鸿蒙开发者社区

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考信创认证华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.7w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.7w 条

刷盘，还是不刷盘，是一个问题 | 架构师之路重启

本文我们一起来看数据库中一个典型的读写事务的场景，并了解这里面可能涉及的技术问题。

2024-06-27 10:02:14

数据库缓冲池

第一次面百度，你觉得这个难度怎么样？

RDB持久化是指在指定时间间隔内将内存中的数据集快照写入磁盘。实际上fork子线程，先将数据集写入临时文件，写入成功后，在替换之前的文件，用二进制压缩文件，RDB是Redis默认的持久化方式，会在对应目录下生产一个dump.rdb文件，重启会通过加载dump.rdb文件恢复数据。

2024-06-27 07:54:46

百度持久化 Redis

SQL 查询之公用表表达式（CTE）

在关系型数据库中，表示数据层级结构的表很常见，例如，上下级关系、父子组件关系等。为了在这些层级结构中进行从上到下或从下到上的遍历，可以使用递归 CTE。

2024-06-27 00:36:06

关系型数据库 CTE

介绍几种 MySQL 官方高可用方案，你中意哪个？

本篇文章介绍了 MySQL 官方提供的几种高可用方案，除此之外，还有其他借助中间件搭建的高可用方案，例如：MHA、MMM、及借助 Keepalived、ProxySQL、Orchestrator 等工具的其他高可用方案。总而言之，高可用方案虽多，选择时还是要基于实际业务需求出发，综合考虑多种因素。

2024-06-26 13:31:54

MySQL 高可用 MHA

从log file sync问题的根因分析谈起：我们为什么需要了解国产数据库的一些原理性知识

Log File sync等待过大，还和很多BUG有关，这些BUG在MOS上都可以很方便地查到。这就是在使用Oracle数据库时做根因分析相对比较容易的主要原因。

2024-06-26 09:03:24

国产数据库 MOS

MySQL优化查询应该从哪些方面入手？

MySQL使用索引能够显著提高查询速度，主要是通过减少数据扫描量、降低I/O操作、优化排序和分组、提高数据检索效率、支持唯一性约束、利用局部性原理和磁盘预读以及降低查询的复杂度来实现的。

2024-06-26 08:32:13

优化查询 I/O MySQL

我们一起聊聊 DuckDB 是什么及适用场景

官方文档就是一个宝库，有着非常丰富的说明及示例，网址为：https://duckdb.org/docs/index。要想深入理解及掌握 DuckDB，需要多读读官方文档。

2024-06-26 08:14:43

DuckDB 轻量级数据库

如何为数据库中的位图添加动态水印译文

开发人员需要了解如何在不更改数据库或应用程序的情况下使数据库中的位图可跟踪。

2024-06-26 08:00:00

数据库位图过滤器

我们一起聊聊 Aho-Corasick 字符串匹配算法的实现

当预先知道字符串字典（例如计算机病毒数据库）时，自动机的构造可以离线执行一次，编译后的自动机存储起来供以后使用。在这种情况下，它的运行时间与输入的长度加上匹配条目的数量成线性关系。

2024-06-26 07:58:06

字符串数据库存储

BenchmarkSQL 对 MySQL 测试时请注意隔离级别！

在使用 BenchmarkSQL（版本为 5.0）压测一段时间后，会出现卡住的现象，即 tpm TOTAL 的值不再发生变化，但通过 top 命令观测到 MySQL 当前的压力还是很大。

2024-06-26 00:43:54

MySQL 测试 TOTAL

在分库分表中，如何选择合适的分片算法？

选择分片算法和选择 Sharding Key 也有一定的关系，比如前一篇提到的 B 端系统使用创建时间去做分片，那算法就很简单了，就是按照一定的时间范围去做拆分。

2024-06-26 00:34:12

分库分表分片算法

时延降低 50%，小红书图数据库如何实现多跳查询性能大幅提升

多跳查询为企业提供了深入的数据洞察和分析能力，它在小红书众多在线业务中扮演重要的角色。然而，这类查询往往很难满足稳定的 P99 时延要求。小红书基础架构存储团队针对这一挑战，基于大规模并行处理（MPP）的理念，开发了一种图数据库上的分布式并行查询框架，成功将多跳查询的时延降低了 50% 以上...

2024-06-25 10:57:08

难得真实的生产数据库死锁问题排查过程记录

在死锁发生后的一周内，我几乎每天都会抽空进行研究。问题很早就被定位到了，并且修改方案也已经有了，但是其中的原理一直没有搞清楚。

2024-06-24 09:29:15

数据库死锁 SQL

SQL中避免使用1=1的原因及C#中的实践

虽然WHERE 1=1在某些情况下可能看起来是一个方便的技巧，但考虑到可读性、可维护性、性能和安全性等方面的因素，我们应该避免在SQL查询中使用它。

2024-06-24 08:33:06

SQL 技巧参数化

全面透彻，深刻理解MySQL索引

MySQL的索引是提高数据库查询性能的关键工具。通过深入了解不同类型的索引以及如何在C#中使用它们，开发人员可以构建出更高效、更响应迅速的应用程序。在使用索引时，务必权衡其带来的性能提升与额外的存储和维护成本。

2024-06-24 08:31:42

MySQL 索引工具

缓存使用中常见的坑及解决方案

使用缓存并非没有代价，如果不当使用或配置，很容易遇到各种问题。本文将探讨在缓存使用过程中可能遇到的一些常见“坑”以及相应的解决方案。

2024-06-24 00:30:00

缓存缓存击穿数据库

真实线上问题之数据库死锁如何解决？

一般来说，对于数据库的死锁问题，主要是要避免并发修改的冲突。另外一种方法是保证操作的顺序，例如多个事务都先操作资源 A，再操作资源 B，这样可以有效地避免死锁的发生。

2024-06-21 09:37:57

数据库死锁顺序

SQL解析框架比较分析

JSqlParser是一个纯Java编写的SQL解析库，支持多种SQL方言。它能够解析复杂的SQL语句，并提供了一个易于使用的API来访问解析后的SQL结构。

2024-06-21 09:25:34

SQL 解析框架

创建索引时一定会锁表吗？

本文将探讨在创建索引时是否一定会锁表，并提供C#示例代码来说明如何在不影响系统正常使用的情况下进行索引的创建。

2024-06-20 12:38:07

索引 C#数据库

MySQL给数据表增加一列，一定会锁表吗？

在MySQL中，给数据表增加一列并不一定会导致整个表被锁定。具体行为取决于MySQL的版本、存储引擎以及执行的操作类型。

2024-06-20 08:03:35

MySQL 数据表版本

国产 “数据库 RAC”，能否一战？原创精选

随着近些年来国产数据库逐步进入深水区，开始承载核心业务，因此对高可用的要求更高；那么基于共享存储的高可用架构正在被更多关注。本文尝试对共享存储架构特点及国内数据库共享存储架构产品加以阐述，说明下此类架构产品的当前能力，便于用户去选项使用。

2024-06-20 07:38:44

数据库国产数据库存储架构

系统日活递增，如何优化提升大规模的数据库

优化大规模数据库系统需要综合考虑多个方面，并持续进行调整和改进，以达到更高的性能和可用性要求。

2024-06-19 09:34:38

系统数据库内存

SQLCMD完全指南：掌控 SQL Server 译文精选

SQL Server 拥有被广泛认可的一流管理工具——SQL Server Management Studio（简称 SSMS）。它提供了丰富的功能，极大地简化了开发人员和数据库管理员（DBA）的工作。

2024-06-19 08:29:28

SQL Server 数据库 SQLCMD

.NET开源的实时应用监控系统 - WatchDog

SignalR进行实时监控，并使用LiteDB作为无需配置的类似MongoDB的无服务器数据库，同时也支持使用外部数据库（如MSSQL、MySQL、Postgres、MongoDB）。

2024-06-19 08:24:47

LiteDB SignalR 数据库

小红书图数据库在分布式并行查询上的探索

小红书作为一个社区属性为主的产品，涵盖了各个领域的生活社区，并存储海量的社交网络关系。为了解决社交场景下的应用痛点以及分布式并行查询实现中的问题，我们自研了面向超大规模社交网络的图数据库系统 REDgraph，大大提高了系统的查询效率和性能。

2024-06-19 07:45:20

图数据库 REDgraph 关系型数据库

面试官：对于 MQ 中的消息重复消费说说的你的理解

在消费者进行消费消息时，首先根据消息唯一标识判断是否已经消费过，可以使用 Redis 或者 MySQL 中的唯一索引等方式，然后来判断该消息是否可以被消费。

2024-06-18 14:08:22

ADO.NET 与 LINQ：.NET 框架中的数据访问与查询

ADO.NET 和 LINQ 是.NET框架中用于数据访问和查询的重要技术，通过将ADO.NET和LINQ结合使用，开发者可以高效地构建强大的数据驱动应用程序。

2024-06-18 13:17:02

数据库框架

实际场景问题之Emoji表情如何操作存储，MySQL是否支持

对于补充字符，utf8mb4 需要使用 4 个字节进行存储，而 utf8mb3 则无法存储这些字符。当将使用 utf8mb3 的列转换为 utf8mb4 时，您无需担心补充字符的转换问题，因为 utf8mb3 根本不支持补充字符。

2024-06-17 10:16:37

MySQL utf8mb4 字节

Redis 脑裂问题的深度解析与 C# 中的应对策略

Redis 脑裂问题是高可用 Redis 集群面临的一个重要挑战。通过优化网络配置、合理配置参数、实现客户端重试机制、数据一致性校验以及建立完善的监控与告警体系等策略，我们可以在 C# 环境中有效地应对这一问题。

2024-06-17 08:24:09

Redis 脑裂集群

SQL Server 中处理重复数据：保留最新记录的两种方案

大家在项目开发过程中，数据库几乎是每一个后端开发者必备的技能，并且经常会遇到对于数据表重复数据的处理，一般需要去除重复保留最新的记录。今天这里给大家分享两种种方案，希望对大家日常开发能够提供一些帮助！

2024-06-17 07:41:43

数据库 SQL Server 后端开发

Select...For Update：行锁还是表锁？

SELECT...FOR UPDATE语句在大多数情况下实现的是行锁，而非表锁。这种细粒度的锁定机制有助于提高数据库的并发性能，但同时也需要开发者谨慎使用，以避免潜在的性能问题和死锁风险。

2024-06-14 09:27:00

行锁表锁细粒度

字节面试：MySQL自增ID用完会怎样？

如果表没有设置主键，InnoDB 会自动创建一个全局隐藏的 row_id，其长度为 6 个字节，当 row_id 达到上限后，它的执行流程和主键 ID 不同，它是再次归零，然后重新递增，如果出现相同的 row_id，后面的数据会覆盖之前的数据。

2024-06-14 08:34:36

MySQL InnoDB ID

线上紧急问题之Using filesort 能优化吗，怎么优化？

资源不足，查询排序操作可能需要大量的计算和内存资源。如果数据库服务器的资源不足以执行排序操作，查询可能会被中断。这种情况可能发生在高负载或资源不足的环境中。

2024-06-14 08:30:37

Using 内存服务器

除了Redis，你还知道哪些键值数据库？

Redis 适用于需要丰富数据结构、高性能读写、发布/订阅功能的场景，适合实时数据处理和复杂缓存需求。

2024-06-14 07:59:00

Redis 键值数据库

阿里云PolarDB斩获SIGMOD最佳论文，性能3倍于同类数据库

在智利举行的数据库国际学术顶会SIGMOD 2024上，阿里云凭借自研PolarDB新架构斩获工业赛道“最佳论文奖”，是中国企业独立完成的成果首次摘得SIGMOD最高奖。

2024-06-13 20:20:46

阿里云 PolarDB SIGMOD

一篇带给你 MongoDB 密码设置

在设置密码之前，先说说 MongoDB 的版本，之前一直使用 5.0.2 和 5.0.14 版本比较多，然而这两个版本都是有安全漏洞的，所以大版本如果选择 5 ，建议选择 5.0.24 。

2024-06-13 08:34:48

MongoDB 容器 CentOS

揭秘MySQL 8.4备份利器：全面解读MySQLDump参数与实战技巧原创精选

MySQLDump 是 MySQL 数据库管理系统提供的一个实用工具，用于创建数据库的逻辑备份。它通过生成 SQL 脚本文件，将数据库中的数据和结构导出，以便进行备份和恢复。

2024-06-13 08:00:00

MySQL MySQLDump 数据库

TiKV 源码分析之 PointGet

本文介绍了TiDB中最基本的PointGet算子在存储层TiKV中的执行流程。

2024-06-13 07:55:19

TiKV PointGet 数据库

前MySQL工程师发声：再不悔改，Oracle将杀死MySQL！原创精选

根据2023年的Stack Overflow开发者调查，PostgreSQL已经成为开发者中最受欢迎的数据库，MySQL则以41.09%的占比屈居第二。无可辩驳的是，PostgreSQL持续展现出强劲的增长势头，相较来说，MySQL虽然长期保持着极高的受欢迎度，但在某些时期的表现却起伏不定。

2024-06-12 14:49:05

MySQL 开发者 PostgreSQL

MySQL数据库锁：Record Lock， Gap Lock 和 Next-Key Lock

Record Lock，Gap Lock和Gap Lock 三种锁是存在MySQL的InnoDB引擎的行锁，MyISAM引擎没有。

2024-06-12 14:03:31

MySQL InnoDB 锁

Redis 源码解析：一条 Redis 命令是如何执行的？

本文主要向大家分享redis基本概念和流程，希望能和大家一起从源码角度分析一条命令执行过程，希望能帮助开发同学掌握redis的实现细节，提升编程水平、设计思想。

2024-06-12 13:36:24

Redis 命令数据库

MySQL 中 IN 语句过多导致性能问题及其解决方案

当 MySQL 查询中的 IN 语句过多导致性能问题时，可以通过使用 JOIN 替代 IN、使用临时表或表变量以及优化索引和查询来解决。

2024-06-12 12:59:16

MySQL IN 语句数据库

解锁七大技巧，避免你的 Postgres 挂掉

如果这些事务同时运行，它们很可能会互相卡住，永远无法完成。Postgres 会在一秒钟左右后识别出这种情况，并取消其中一个事务，让另一个事务完成。出现这种情况时，你应该检查一下自己的应用程序，看看能否让事务始终按照相同的顺序进行。

2024-06-12 11:47:38

Postgres PostgreSQL 默认值

分析SQL执行计划，需要关注哪些重要信息

type = index，key = idx_abc，extra = 使用 where；使用 index。这表明查询利用了 idx_abc 的联合索引，但未严格遵守最左前缀匹配，或者虽然遵守了最左前缀，但在 a 字段上进行了范围查询。因此，实际上仍需扫描索引树，效率并不理想。

2024-06-12 09:23:37

SQL 索引树索引

聊聊 Mybatis 动态 SQL，你学会了吗？

如果你使用过 JDBC 或其它类似的框架，你应该能理解根据不同条件拼接 SQL 语句有多痛苦，例如拼接时要确保不能忘记添加必要的空格，还要注意去掉列表最后一个列名的逗号。

2024-06-12 08:36:25

JDBC SQL Mybatis

百度面试：如何用Redis实现限流？

我们每次访问 allowRequest() 方法时，会尝试从 Redis 中获取一个令牌，如果拿到令牌了，那就说明没超出限制，可以继续执行，反之则不能执行。

2024-06-11 10:03:56

Redis 限流令牌

聊聊Oracle共享池的Duration机制

其实从Oracle 共享池subpool和duration的变迁，是不是也看出一个好的数据库产品不大可能被设计出来，而是要在用户场景中千锤百炼才能变得越来越好呢？

2024-06-11 09:22:51

Oracle duration 机制

惊艳到我的十个 MySQL高级查询技巧！

如果您想要查询子查询，那就是CTEs施展身手的时候 - CTEs基本上创建了一个临时表。使用常用表表达式（CTEs）是模块化和分解代码的好方法，与您将文章分解为几个段落的方式相同。

2024-06-11 08:52:58

MySQL 查询 CTEs

浅聊 Bin Log、Redo Log、Undo log

崩溃恢复是指在数据库系统因各种原因而发生崩溃或非正常关闭后，通过一系列机制和步骤来将数据库恢复到一个一致性和可用的状态。

2024-06-11 00:00:02

MySQL 数据库系统

Elasticsearch index 设置 False，为什么还可以被检索到？

列式存储使得对特定字段的聚合和排序操作更加高效，但对于未被索引的字段，查询效率较低，因为需要遍历整个列的数据来匹配查询条件。

2024-06-07 15:22:17

False 聚合排序

上一页 1 ··· 18 19 20 21 22 ··· 341 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营