鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

SQLite这么小众的数据库，到底是什么人在用？

WebAssembly (WASM) 是一种低级字节码格式，能够在现代浏览器中高效运行。它被设计为一个可移植的目标，可以被多种编程语言编译成它。它有接近原生的性能，同时可以安全地运行在浏览器的沙箱环境中。

2024-07-26 08:34:25

SQLite 数据库字节码

分库分表的理解与实践

分库分表是应对大数据量和高并发访问的有效手段。通过合理的分库分表策略和实践建议，可以提升数据库的性能和扩展性，为业务的快速发展提供有力支撑。

2024-07-26 00:16:11

分库分表高并发大数据

面试官：聊聊你对分库分表的理解？

分库分表技术不但是日常工作中用于解决数据库中的数据量会急剧增长，解决单库单表性能瓶颈的一种方案，更是面试中的高频知识点。

2024-07-25 18:20:03

分库分表 MySQL 数据库

一亿数据大表的分页技术实践

处理包含一亿条记录的大表时，分页查询的性能优化是一个复杂而重要的任务。通过选择合适的分页策略、优化数据库查询、使用缓存系统和实施分库分表等操作，可以显著提高分页查询的性能和用户体验。

2024-07-25 09:15:39

数据大表优化

MySQL中的悲观锁与乐观锁：理解与应用

在实际应用中，可以根据具体的业务场景和需求来选择合适的锁策略。有时候，也可以结合使用悲观锁和乐观锁，以达到更好的并发控制和系统性能。

2024-07-25 09:01:22

MySQL 业务场景乐观锁

MySQL与MongoDB的技术选型指南

无论是MySQL还是MongoDB，都是优秀的数据库系统，选择适合项目需求的数据库，将有助于提高开发效率，降低维护成本，保证系统的稳定性和可靠性。

2024-07-25 08:52:13

MySQL MongoDB 技术

聊聊 Redis 的高可用

使用 Redis Cluster 集群，主要解决了大数据量存储导致的各种慢问题，同时也便于横向拓展。在面对千万级甚至亿级别的流量的时候，很多是在千百台的实例节点组成的集群上进行流量调度、服务治理的。

2024-07-25 08:39:48

Redis 高可用系统

金融行业分布式数据库应用观察原创

金融行业，具有对数据库最为严苛和复杂的要求与调整。分布式事务型数据库，经过多年发展，也成功验证其可行性与实用性，可以在金融行业核心场景中稳定运行。在这一过程中，厂商也积累了丰富的实践经验，为未来更大规模的使用打下坚实基础。

2024-07-25 07:55:37

金融行业数据库分布式事务型数据库

为什么 MySQL 单表不能超过 2000 万行？

互联网江湖上的确流传着一个说法：单表数据量超过 500 万行时就要进行分表分库，已经超过 2000 万行时 MySQL 的性能就会急剧下降。

2024-07-24 16:25:02

MySQL 数据库

数据库连接数太多报错？应该这样避免

在使用 MySQL 数据库时，尤其是在高并发的场景下，数据库连接数过多会导致连接池耗尽，进而影响应用程序的正常运行。本文将介绍几种防止 MySQL 数据库连接过多的方法，来优化数据库性能并提高应用程序的稳定性。

2024-07-24 11:25:43

MySQL 数据库

经典面试题：Redis为什么这么快？

Redis的多线程网络模型通过将读取和写回数据的任务异步化，以及更好地利用多核CPU，从而提高了Redis在处理大量在线流量时的性能表现。

2024-07-24 08:38:07

Redis 多线程网络模型

数据库性能优化：提升系统响应速度的关键策略

数据库性能优化是一个持续的过程，需要开发者和运维人员共同努力。通过合理设计数据库表结构、优化查询语句、建立索引、分库分表、定期清理垃圾数据等策略，可以显著提升数据库的查询速度和事务处理能力，减少系统响应时间，提高用户体验。

2024-07-23 08:08:18

数据库性能优化

提升性能与一致性：MySQL 5.7中的组提交与两阶段提交机制解析

用于将缓冲区内容持久化到磁盘的 fsync 步骤被延迟了。它会等待一个组中的多个事务都处于 Prepare 阶段后，再进行一次组提交，即将日志一次性持久化到磁盘中。

2024-07-22 08:57:58

MySQL 缓冲区磁盘

探索MySQL的高效数据同步：并行复制原理

WriteSet 通过检测两个事务是否更新了相同的记录来判断事务能否并行回放，因此需要在运行时保存已提交的事务信息以记录历史事务更新了哪些行。

2024-07-19 09:10:37

MySQL WriteSet 并行回放

多款OLAP数据库大比拼，谁更胜一筹？

昨天又使用最新版本作了对比，这次chdb卡在了Query08和Query09上，为了确认Query09很耗时，我在我的笔记本（mac M2Max 32GB内存）上做了测试，耗时158s多。

2024-07-19 08:33:56

OLAP 数据库 Query09

字节图数据库架构论文入选数据库顶会SIGMOD 2024

ByteGraph 是字节自研的支持万亿级图数据库，目前 ByteGraph 已部署超过 1000+ 集群，支持今日头条，抖音，西瓜视频，火山，广告，风控等全系产品。

2024-07-18 21:21:29

转转上门履约服务拆分库表迁移实践

本文主要介绍两个数据迁移方案，一个是大家耳熟能详的数据双写，另一个是以短暂写入失败为代价的开关控制迁移方案。

2024-07-17 21:02:42

数据迁移数据库

麻省理工研究人员引入新的人工智能驱动的SQL数据库分析

在当今数据驱动的世界中，对表格数据进行复杂统计分析的能力对于从原始数据中获得有意义的见解至关重要。然而，数据的复杂性和庞大量使得个人和组织越来越难以有效地处理和解释信息。

2024-07-17 13:47:53

人工智能 SQL 数据库

数据库技术演进之路

规范化有第一范式（1NF）：确保每列都是原子的，不可再分；第二范式（2NF）：消除非主属性对主键部分依赖，确保每列都依赖于整个主键；第三范式（3NF）：消除传递依赖，确保每列都直接依赖于主键。

2024-07-17 11:40:58

数据库技术演进

什么是MySQL的"内存数据加速器"——Buffer Pool？

InnoDB 还采用了一种适应性刷新算法，根据 redo log 的生成速度和当前的刷新率动态调整刷新速度。其目的是通过确保刷新活动与当前工作负载保持同步，来平滑整体性能。

2024-07-17 09:10:27

MySQL 服务器算法

MySQL 中的 LIMIT 子句详解及代码示例

在 MySQL 中，LIMIT 子句常被用于限制 SQL 查询结果集中的数据量。这对于分页显示结果特别有用，例如，在网页上展示数据库中的记录时，你可能只希望每次显示一部分记录。本文将详细解释 LIMIT 子句的用法，并提供一些实用的代码示例。

2024-07-17 08:15:09

MySQL SQL LIMIT

MySQLDump导致数据页缓存失效，如何避免失效与业务响应下降？原创精选

运营反馈服务的某个页面响应偶尔特别慢，响应时间大概是16S，重新刷新或关闭页面再次打开秒级响应。同事询问：这是什么情况？

2024-07-17 08:00:00

MySQLDump 缓存

Redis 哨兵机制详解

Redis 哨兵机制通过监控 Redis 主从复制集群的状态，并在主节点故障时自动进行故障转移，保证了 Redis 服务的高可用性。通过合理配置哨兵和客户端，可以方便地实现 Redis 集群的高可用部署，提高系统的稳定性和可靠性。

2024-07-16 08:38:06

Redis 哨兵机制

国产数据库替代策略的探讨

大家要注意的是，在选型决策时，要考虑这个清单的有效期是三年。因此不排除两三年后清单会发生变化。一些企业甚至可能会离开商用数据库产业，因此并不是简单的从中选择某个数据库产品就可以了。

2024-07-16 08:22:09

国产数据库策略

为什么 MySQL 事务默认隔离级别是可重复读？

MySQL 选择可重复读作为默认事务隔离级别，是为了在数据一致性和并发性能之间找到一个平衡点。这种隔离级别通过避免脏读、不可重复读和减少幻读的发生，确保了数据的一致性和可靠性。

2024-07-16 08:19:46

MySQL 数据 InnoDB

为什么 MySQL 插入不存在的数据会产生死锁？

我们简单说一下。MySQL 中，我们现在用的引擎几乎都是 innodb，我们以此为默认条件展开话题。常见的锁有两种，一种是表锁，一种是行锁。当你更新一条数据时，如果你不走索引，那会锁表，否则，锁行。

2024-07-16 08:03:43

MySQL 锁读写锁

揭秘MySQL主从复制：数据同步的幕后故事

在全同步复制模式下，主库在完成事务后，会等待所有从库完成数据复制后，才向客户端反馈。这种方式虽然提高了安全性，但性能较差，尤其在从库数量较多时，整个过程将显得更加漫长。

2024-07-15 09:14:03

MySQL 主从复制

GreatSQL 构建高效 HTAP 服务架构指南

从 GreatSQL 8.0.32-25 版本开始，新增Rapid存储引擎，该引擎使得 GreatSQL 能满足联机分析（OLAP）查询请求。GreatSQL Rapid引擎性能表现优异，在32C64G测试机环境下，TPC-H 100G测试中22条SQL总耗时仅需不到80秒。

2024-07-12 12:43:51

GreatSQL Rapid 引擎性

PostgreSQL 的权限管理，比起 Oracle 来说算简单的了

对于大多数类型的对象，初始状态是只有所有者（或超级用户）才能对对象执行任何操作。若要允许其他角色使用它，必须授予权限。

2024-07-12 12:08:40

PostgreSQL 权限管理

"超级攻略：如何快速排查和优化慢SQL，提升系统速度！"

实际上，最大的挑战不在于解决问题，而在于准确定位问题。因为一旦问题被准确定位，解决起来就变得相对简单。例如，缺少索引就添加索引，JOIN 操作过多就进行拆分。这里不再详细展开。

2024-07-12 09:12:47

SQL 排查优化

巧用Lock解决缓存击穿的解决方案

缓存击穿是指缓存中没有但数据库中有的数据（一般是缓存时间到期），这时由于并发用户特别多，同时读缓存没读到数据，又同时去数据库去取数据，引起数据库压力瞬间增大，造成过大压力。

2024-07-12 08:48:50

缓存数据库数据

关于 MySQL 的 12 种锁详解：业务场景、流程图与 C# 应用实践

本文将详细解析MySQL的12种锁，结合真实业务场景和流程图，帮助读者轻松掌握其运用场景与方式。

2024-07-12 08:00:00

不再担心数据丢失！学会创建MySQL备份脚本，保障数据安全

本教程将介绍如何编写MySQL数据库备份脚本，以有效保障数据的安全。

2024-07-11 16:43:22

MySQL 数据安全数据库

数据库系统中何时使用预写式日志和逻辑复制

预写日志 (WAL) 和逻辑复制在实现数据库系统中的可用性、灾难恢复和可扩展性方面发挥着作用。WAL非常适合优先考虑数据一致性且对性能有影响的场景，例如灾难恢复设置。另一方面，逻辑复制提供了对复制行为的灵活性与控制，使其非常适合具有不同需求的复杂环境。

2024-07-11 11:08:54

数据库系统 WAL

企业内部的运营管理类搜索，使用 PostgreSQL 足够了

在 PostgreSQL 中，全文搜索是一项内置功能，允许您对存储在数据库中的文本执行复杂的搜索。对于文档、文章或任何形式的基于文本的内容，全文搜索通过对其中的单词和短语建立索引，可以实现高效地搜索。

2024-07-11 10:48:59

搜索 GIN 索引

我们一起聊聊 SQL 性能优化神器

rows显示了检查的估计行数，rows× filtered显示了与下表连接的行数。例如，如果 rows为1000且 filtered为50.00（50％），则与下表连接的行数为1000×50％= 500。

2024-07-11 08:26:00

SQL 性能优化

长文：国产数据库兼容性一览原创

近期又接触到部分兼容性工作，特收集整理了部分国产数据库的兼容情况，整体感觉国内产品这部分做的差异还是蛮大的。本文将从一张对比表入手，谈谈国内产品的兼容性问题，并简单介绍下各家的兼容性情况。

2024-07-11 08:00:42

兼容性工作国产数据库

HBase 在统一内容平台业务的优化实践

HBase是一款开源高可靠性、扩展性、高性能和灵活性的分布式非关系型数据库，本文围绕数据库选型以及使用HBase的痛点展开，从四个方面对HBase的使用进行优化，取得了一些不错效果。

2024-07-11 07:02:01

HBase 开源数据库

只有十条，阿里巴巴 MySQL 建表规范，居然...

阿里的MySQL建表强制规范只有10条，其中索引强制规范有4条，SQL强制规范有9条，大伙可以参考借鉴。

2024-07-10 18:43:42

TINYINT(1)和BIT(1)，到底该用哪个

值得注意的是：虽然 bit类型只使用1位，但在计某些算机硬件上，字节才是最小的存储单元，MySQL会将其存储为一个字节（8位），这意味着即使只使用1位，也会占用与TINYINT相同的空间。

2024-07-10 10:54:44

MySQL 存储数据

面试官：你们的项目中竟然还在用多表关联！

可用性提升，如果驱动表有10万条数据，而被驱动表也有10万条，哪怕在QPS为个位数的情况下，都可能将数据库的网卡打满，从而出现系统不可用的情况。

2024-07-10 10:08:36

项目多表关联哈希

提升SQL查询效率的终极指南

在某些情况下，索引的有效性并不完全取决于字段的区分度。例如，如果一个表中包含性别字段，仅有两个可能的取值：男和女，那么通常情况下这个字段的区分度较低，使用该字段进行查询可能无法有效地过滤大量数据，从而无法充分发挥索引的优势。

2024-07-10 09:07:09

SQL 查询字段

实战：Springboot3+ShardingSphere5.2.1生产级分库分表实现

我们完成了在DailyMart中集成分库分表功能的实践，大家在实施分库分表过程中一定要结合自己的业务实际选择合理的分片键，分片键的好坏决定了你分库分表架构方案的好坏。

2024-07-10 08:42:39

分库分表分片键

EF Core下按年分库按月分表的优雅实现，你学会了吗？

本文探讨了如何在EF Core中实现按年分库按月分表的策略，并提供了相应的C#示例代码。通过分库分表，我们可以将大量的数据分散到多个数据库和表中，以提高系统的查询效率和扩展性。

2024-07-10 08:15:40

数据库 Core 代码

探索流式数据库的动态特性译文

因为流式数据库是数据流处理系统的核心组件，本文将对它进行探讨，并描述一些可用的解决方案。

2024-07-10 08:00:00

数据库流式数据库

Db2是一个故事，尽管IBM不愿提及原创精选

PostgreSQL不仅自身取得了成功，还成为了大型云供应商和其他数据库服务（如CockroachDB和Yugabyte）的前端。一些评论人士认为，它将成为实际上的标准前端，而供应商则在后端进行创新。但Db2可能已经错过了这艘船，IBM可能会后悔让其他人来讲述它的故事。

2024-07-09 13:34:51

Db2 IBM PostgreSQL

利用 MySQL 克隆插件搭建主从

MySQL 克隆插件适用于需要快速、高效地复制数据库的场景，尤其是在对数据一致性、速度和停机时间敏感的应用中。然而，其使用也受限于一定的条件和环境，因此在具体应用时需充分评估其适用性和局限性。

2024-07-09 10:42:30

MySQL 克隆插件

分布式数据库很香吗？可能还比不上普通的分区表

如果在执行器启动期间进行了修剪，因为未初始化被消除的分区，映射表会更新，并更改保留分区的子计划索引。这是必要的，以让映射表对执行器稍后要完成的修剪有效。

2024-07-09 09:42:38

分布式数据库初始化

详解 pypika 模块：SQL 语句生成器，让你再也不用为拼接 SQL 语句而发愁

不同数据库的 SQL 语法会有略微不同，最大的一个不同就是包裹字段所用的符号，MySQL 用的是反引号、PostgreSQL 用的是双引号。而 pypika 不知道你的数据库种类，所以默认用的是双引号。如果想适配 MySQL 的话，那么应该告诉 pypika，我们要适配 MySQL。

2024-07-09 08:49:56

语句生成器 SQL

如何选择开源数据库？

开源数据库是现代软件开发中的关键组成部分，提供了强大、可扩展和灵活的数据存储和管理解决方案。以下是十个流行的开源数据库的详细概述，突出其主要特点和使用场景。

2024-07-09 08:27:30

开源数据库数据

1 2 3 4 5 6 ··· 325 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营