鸿蒙开发者社区

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考信创认证华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.7w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.7w 条

38 张图详解 Redis：核心架构、发布订阅机制、9大数据类型底层原理、RDB和AOF 持久化、高可用架构、性能问题排查和调优

今天我们从全局视角开始，带着问题去寻找答案，梳理 Redis 核心知识点与架构设计：核心架构、String（字符串）、Hashes（散列表）、Lists（列表）、Sets（无序集合）、Sorted Sets（可根据范围查询的排序集合）、Bitmap（位图）、HyperLogLog、Geospatial （地理空间）和 Stream（流）等数据类型底层实现原理、发布订阅机制、RDB、AOF 持久化、

2025-09-10 10:03:23

Sets Stream Bitmap

从 MySQL 迁移到 GoldenDB，上来就踩了一个坑

随着这些年国内新创改造的开展，数据库迁移是很多公司必须要做的一个工作，这项工作难度极大，要完全不出问题很难。做好影响分析、制定快速回切方案，最大限度降低业务损失，才能保证不出大事故。

2025-09-10 07:53:52

MySQL GoldenDB 迁移

数据库抽象层的致命陷阱：三次项目失败的血泪教训与架构救赎之路

抽象不等于架构。数据库不只是愚蠢的存储——它们是专门的计算引擎。PostgreSQL的查询计划器比你的Go循环更聪明。MongoDB的聚合管道比你的JavaScript reduce函数更快。

2025-09-10 02:55:00

数据库架构项目

百万&千万级 Excel 导出场景怎样实现？怎样优化？

解决了异步，再看数据查询。分页查库是基础，但有个坑：当偏移量很大时（比如 limit 100000, 1000），MySQL 会扫描前面 10 万条数据再跳过，这时候索引效率会骤降。

2025-09-10 01:55:00

API 异步 MySQL

抛弃AOP！SpringBoot + YAML 零侵入数据脱敏神操作！

不用写复杂的 AOP 切面，不用改业务代码，只改改 YAML 配置，就能实现接口响应脱敏，还支持动态配置、日志脱敏、性能优化，新手也能快速上手。

2025-09-09 09:34:37

AOP YAML 数据脱敏

FastAPI 实战秘籍：从零构建高性能 API -数据库篇

今天主要讲一下通过 sqlalchemy 连接数据库，数据库会话，数据库模型的创建和自动建表等。

2025-09-09 07:00:00

数据库 FastAPI 开发

Redis是如何高效管理有限内存的？

Redis并不支持按照TTI机制来做数据过期处理。但是作为补偿，Redis提供了一个重新设定某个key值过期时间的方法，可以通过expire方法来实现指定key的续期操作，以一种曲线救国的方式满足诉求。

2025-09-09 01:45:00

Redis 内存机制

从墨天轮排名看数据库市场格局变化原创

随着国产数据库发展深化，行业加速洗牌，大浪淘沙，一批厂商脱颖而出。近期在排行榜上，YashanDB（崖山数据库）就完成了一场令人瞩目的逆袭。这款起步相对较晚的国产数据库产品，以307.31的流行度指数首次超越openGauss的260.83，成功跻身排行榜前十强，展现了其扎实而稳健的发展轨迹。

2025-09-08 07:31:14

数据库市场格局墨天轮

基于Redis的分布式锁续期解决方案：Redisson WatchDog机制详解

Redisson的WatchDog机制通过后台线程自动续期分布式锁，优雅地解决了业务执行时间不确定导致的锁超时问题。其核心价值在于将复杂的续期逻辑封装在框架内部，使开发者能够专注于业务逻辑的实现。

2025-09-08 02:35:00

Redisson 分布式锁 WatchDog

面试官：如何提升项目并发性能？

在面试中，并发模块是一定会问到的知识点。而问到并发模块，如何提升项目并发性能？又是一个高频的面试题。但这道面试题大部分同学都回答不好，且没有清晰的回答逻辑链，所以接下来这篇文章咱们给大家系统的梳理一下如何回答这个问题？

2025-09-08 00:00:00

并发模块并发性能异步编程

国产数据库生态工具大起底原创

当用户谈论数据库时，常常会聚焦于性能指标或基础功能：TPS高不高？延迟低不低？是否有分布式？能否平滑扩展？然而，一个真实的现实是：再强大的数据库产品，若没有一套完善的生态工具配合，其在企业真实场景中的使用体验会大打折扣，甚至可能根本无法落地。

2025-09-05 07:35:28

国产数据库生态工具

系统不崩的秘籍：Redis的六大非缓存玩法，支撑高并发流量就靠它！

秒杀高并发排队神器，当年做电商秒杀，数据库行锁直接被打到奄奄一息。Redis 一出马，线程乖乖排队，老板再也不用担心超卖。

2025-09-04 09:03:08

Redis 缓存高并发

Group By越来越慢，如何优化性能？

Group By性能优化是一个需要综合考虑数据库设计、查询编写和系统架构的系统工程。每个业务场景都有其特殊性，需要根据实际情况选择合适的优化方案。

2025-09-03 08:23:03

Group 优化性能

Redis有哪些部署方案？了解哨兵机制吗？

如果考虑最终一致性的话，推荐的是使用 binlog + 消息队列的方式，这个方案其有重试和顺序消费，能够最大限度地保证缓存与数据库的最终一致性:。

2025-09-03 04:25:00

Redis 部署架构

面试官最爱问的坑：MySQL 中 FLOAT 和 DOUBLE 你真懂吗？

别以为这是个“背诵定义”的小问题，面试官随便一追问，很多候选人就“翻车”了。今天我就用一个小故事，把这件事掰开揉碎给大家讲清楚，保证你下次遇到相关问题时，不仅能答，还能答得漂亮！

2025-09-03 04:25:00

MySQL FLOAT DOUBLE

面试官：MySQL BETWEEN AND 语句包括边界吗？

使用数据库时，我们经常会用到范围查询，今天来聊一聊 MySQL 的 BETWEEN AND 语句。

2025-09-02 08:44:35

MySQL 查询数据库

京东面试官揪着问的 InnoDB如何用MVCC和Next-Key Lock实现RR隔离？看完顿悟！

MySQL 的事务隔离级别是一个层次分明、权衡精妙的系统。从 RC 到 RR，不仅仅是隔离性的提升，更是 MVCC 从“每次生成视图”到“第一次生成视图”的转变，以及锁机制从“行锁”到“Next-Key Lock”的升级。

2025-09-01 09:05:00

MySQL 事务隔离隔离性

Redis+Caffeine 太强了！

对比一下之前的 “老古董” 本地缓存比如 Guava Cache，Caffeine 的性能直接碾压 —— 官方测试数据显示，在高并发场景下，Caffeine 的命中率比 Guava Cache 高 10%-20%，而且内存占用更省。我之前把项目里的 Guava Cache 换成 Caffeine，接口响应时间直接从 8ms 降到了 3ms，内存占用还少了 15%，简直是 “降维打击”。

2025-09-01 02:00:00

Redis Caffeine 数据

MySQL 更新消失案

在一个平常的夜晚，收到业务反馈某个检测单流程卡住，不能继续往下走。接到反馈后，连忙上线排查。发现问题点在一个诡异的现象 —— 数据库更新消失: 在事务中，先更新一行记录，后读取该行，读取到竟为更新前的旧值！

2025-09-01 01:55:00

MySQL 版本检测单

面试官：MySQL Redo Log 和 Binlog 有什么区别？分别用在什么场景？

Redo Log 保存在 InnoDB 中，用于保证宕机后数据不丢，是 MySQL 支持数据库事务的基础。Binlog 保存在 MySQL server 层，用于主从同步或点播恢复。

2025-08-29 07:58:42

MySQL 数据库事务

小红书新一代数据库代理 RedHub 的设计与实践

小红书数据库团队研发了新一代数据库代理系统 —— RedHub，致力于构建统一、高性能、易运维的数据库接入层，支撑未来十年的数据库架构演进。

2025-08-29 02:00:00

小红书数据库 RedHub

揭秘！多租户 SaaS 系统这样设计：数据库级/表级隔离 + 资源配额全攻略

我们已经在多个 SaaS 项目中实现了从数百到数十万租户的平滑扩展，既保证了数据安全，又实现了资源的高效利用。

2025-08-28 07:36:48

多租户 SaaS 数据库

推荐四个不错的数据库设计工具，效率提升利器！

今天大姚给大家推荐四个不错的数据库设计工具，希望可以帮助到有需要的同学。

2025-08-28 06:00:00

数据库数据库设计开发

一文聊透CAP定理

ElasticSearch集群写操作的实现原理为，客户端请求通过协调节点路由到主分片，主分片处理完成后同步至副本分片。

2025-08-28 02:15:00

CAP MySQL 架构

GreatSQL优化技巧：手动实现谓词下推

SQL优化的核心思想是减少I/O开销，无论什么优化技巧都是围绕这个主题，根据SQL具体情况演变出的形形色色的方法而已。万变不离其宗，本案例也是如此。

2025-08-28 02:11:00

SQL 优化性能

怎样用Spanner、BigQuery与向量嵌入构建实时推荐系统译文精选

本文将介绍一套基于用户及产品向量嵌入的实时推荐系统，由BigQuery（Google Cloud完全托管的PB级数据仓库）及Spanner（Coogle Cloud完全托管、适合关键任务的全局规模数据库）提供支持。

2025-08-27 08:23:49

向量嵌入推荐系统数据库

2025 DTCC 点滴有感原创精选

作为一个数据库多年从业者，看到了这些年来数据库的快速发展。特别是在最近的二十年，国产数据库经历了巨大的变化。

2025-08-27 07:39:44

数据库国产化 PostgreSQL

设计本地缓存、Redis与数据库的三层架构：一致性协议与过期策略实践

实际实施中，需要根据具体业务特点调整策略参数，如TTL时长、延迟删除时间等。同时，完善的监控和日志记录对于排查问题和优化系统至关重要。

2025-08-27 02:12:00

Redis 数据库架构

用雪花 id 和 uuid 做 MySQL 主键，被领导怼了

技术没有好坏之分，只有合适不合适。别看到别人用雪花 ID、用 UUID，你就跟着用，得先搞明白背后的原理，结合自己的业务场景，才能做出正确的选择。不然哪天被领导怼了，还不知道为啥，多冤啊！

2025-08-27 02:00:00

id MySQL 主键

开发者工具中的 IndexedDB 实战指南：离线存储、缓存优化，玩转浏览器数据库！

IndexedDB它是构建现代、高性能、离线友好型 Web 应用的基石之一。对于前端开发工程师来说属于必备技能。希望本篇文章能对大家了解IndexedDB技术提供一些帮助！

2025-08-26 07:17:20

IndexedDB 离线存储缓存优化

CMU15-445 数据库系统播客：榨取硬件性能 - 现代分析型数据库 OLAP 的深度优化之旅

从避免CPU分支预测失败的微观技巧，到利用SIMD进行向量化并行计算，再到通过查询编译消除解释开销，最后到云原生时代下计算存储分离、弹性伸缩和软硬件协同设计的宏观架构，现代分析型数据库系统的发展充分体现了计算机科学的系统性思维。

2025-08-26 03:15:00

数据库性能优化

索引夺命十连问

简单来说，索引就是数据的目录。就像一本书的目录能帮你快速找到内容一样，数据库索引能帮你快速定位数据。

2025-08-26 02:22:00

索引定位数据

用过Redis哪些数据类型？Redis String 类型的底层实现是什么?

Redis 中的 Sting 类型底层实现主要基于 SDS(Simple Dynamic string 简单动态字符串)结构，并结合 int、embstr、raw 等不同的编码方式进行优化存储。

2025-08-26 02:15:00

Redis 字符串)SDS

CMU15-445 数据库系统播客：Oracle In-Memory 数据库揭秘 - 双格式架构如何驱动实时企业

为了满足这一需求，数据库技术必须进化。传统磁盘数据库的 I/O 瓶颈使其难以胜任，内存数据库（In-Memory Database）因此应运而生，成为推动这场变革的核心技术。

2025-08-26 02:12:00

数据库系统架构

在 SpringBoot 项目中如何动态切换数据源、数据库？（可直接CV）

如果服务器搭建的是一主多从多个mysql数据源，主服务器用来读。从服务器用来写。此时你在代码层面用注解指定了一个增删改方法到从数据源，但是碰巧此时从数据源失效了，那么就会自动的切换到其它服务器。

2025-08-26 01:15:00

Spring 项目数据源

新数据库国测名单解读：信创深水区加速器原创精选

当中国数据库产业跨越规模化应用的门槛，实现从"政策驱动"到"价值驱动"的转变，才能真正奠定数字经济的基石。未来三年，我们将见证这场自主创新征程中最激动人心的飞跃。

2025-08-25 01:00:00

数据库安全信息

CMU15-445 数据库系统播客：海量数据场景下的分布式 OLAP

随着云原生架构和开放数据格式的普及，现代 OLAP 系统正变得前所未有的强大、灵活和经济高效。无论是商业巨头 Snowflake、Redshift，还是开源新星 ClickHouse、DuckDB，理解它们背后的核心原理，都将帮助你更好地驾驭数据洪流，从中发掘价值。

2025-08-22 06:49:20

数据库系统分布式

项目从 MySQL 切换 PostgreSQL，踩了太多的坑！！！

如果不想这样，只能修改代码的所有表对象的字段类型和传参类型保证与postgres数据库的字段类型对应，但是有些依赖的框架底层自己操作数据库可能就无法修改源码了，只能修改数据库表字段类型了。

2025-08-21 08:03:22

MySQL PostgreSQL 类型

CMU15-445 数据库系统播客：OLTP 与分布式事务

本文将带你深入分布式在线事务处理（OLTP）数据库的核心，从最基础的事务概念出发，层层剖析分布式环境下的原子性、一致性与可用性挑战，探讨从二阶段提交（2PC）、共识协议（Paxos/Raft）到最终指导所有设计的 CAP 定理，理解构建一个健壮分布式系统背后所必须做出的深刻权衡。

2025-08-21 06:39:13

OLTP 分布式数据库

CMU15-445 数据库系统播客：分布式数据库简介 - 共享无关、分区与分布式事务

理想情况下，这个中间件层对应用开发者是透明的。开发者编写的 SQL 仿佛是在操作一个单一的、巨大的逻辑数据库，而无需关心数据具体存储在哪个物理分片上。

2025-08-20 07:40:05

数据库系统播客

小红书自研Binlog Server守护MySQL数据0丢失

小红书数据库团队提出一种基于Binlog Server的数据一致性解决方案，通过提升半同步复制性能，加速日志传输，在故障时可无侵入现有数据库架构地实现自动补数据，保证数据一致性。现推出的自研 Binlog Server 与 ORC 高可用方案，经过实践已证明可做到。

2025-08-19 09:05:26

小红书数据库 MySQL

天才用户取用户名为 null，害我熬夜查到两点……

是的，你没看错，不是 Java 里的 null，不是 SQL 里的 NULL，而是一个货真价实的字符串 "null"！这玩意儿乍一看人畜无害，但只要你代码里稍不注意，它就能让你怀疑人生。

2025-08-19 09:00:29

CMU15-445 数据库系统播客：数据库恢复机制 ARIES - LSN、模糊检查点与 ARIES 三阶段协议

ARIES 协议通过预写式日志、重复历史的重做、记录日志的撤销，以及高效的模糊检查点机制，完美地解决了高性能 STEAL/NO-FORCE 策略下的崩溃恢复难题。它的三个恢复阶段——分析、重做、撤销——分工明确，逻辑严谨，确保了无论在何时发生崩溃，数据库都能被恢复到一个正确的状态。

2025-08-19 07:32:09

数据库系统播客

阿里云安装 MySQL 8.0.1 并配置全网访问

以下是在阿里云服务器上安装MySQL 8.0.1并配置允许所有IP访问的详细步骤，快来看看吧！

2025-08-18 09:35:43

阿里云 MySQL 数据库

500万并发不崩溃？InnoDB 内存架构的秘密曝光！

Buffer Pool 使用 LRU 算法的变体进行管理。当需要空间向缓冲池中添加新页面时，最近最少使用的页面被移除，并将新页面添加到列表的中间。

2025-08-18 09:06:51

InnoDB 内存架构

CMU15-445 数据库系统播客：日志与恢复机制解析

现代数据库系统普遍采用基于 STEAL + NO-FORCE 策略的预写日志（WAL）方案，并配合检查点（Checkpoint）机制。

2025-08-18 07:32:23

数据库系统播客

CMU15-445 数据库系统播客：深入解析数据库并发控制 - 两阶段锁（2PL）

本文将深入探讨实现隔离性的经典协议—— 两阶段锁（Two-Phase Locking, 2PL）。我们将从最基本的问题出发，层层递进，揭示2PL的工作原理、它面临的挑战以及在现代数据库系统（如 MySQL 和 PostgreSQL）中的实际应用。

2025-08-18 05:11:00

数据库系统播客

CMU15-445 数据库系统播客：深入理解多版本并发控制 (MVCC) - 现代数据库的并发基石

MVCC 不仅仅是一个技术术语，它是一种精妙的设计哲学，是现代数据库能够在高并发世界中保持优雅和高效的关键。它通过多版本的“时空”换取了读写并发的“自由”，但其实现背后充满了深刻的权衡。

2025-08-18 01:23:00

数据库系统播客

五大数据库 MySQL/PostgreSQL/MongoDB/Redis/Cassandra ：选型指南

本文将深入剖析当前最主流、应用最广泛的五大数据库：MySQL、PostgreSQL、MongoDB、Redis、Cassandra，解析其核心架构、适用场景与独特优势。

2025-08-15 14:00:00

数据库 MySQL 关系数据库

面试官：什么是 Next-Key Lock？作用是什么？

Next-Key Lock 是 InnoDB 引擎行锁加间隙锁的组合，它锁住的是一个前开后闭的区间，消除了 REPEATABLE READ 隔离级别下的幻读问题。

2025-08-15 07:55:20

Next-Key 锁 InnoDB

1 2 3 4 5 6 ··· 344 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营