鸿蒙开发者社区

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考信创认证华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.7w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.7w 条

给你1亿的Redis key，如何高效统计？

今天这篇文章就跟大家一起聊聊如果给你1亿个Redis key，如何高效统计这个话题，希望对你会有所帮助。

2025-06-09 08:21:55

Redis 高效统计今天这篇文章就跟大家

filelock , 一个神奇的 Python 库

filelock 是一个 Python 第三方库，用于实现跨平台的文件锁功能。它允许多个线程或进程在访问共享文件时进行互斥操作，避免并发写入等问题导致的数据混乱。

2025-06-09 07:25:00

filelock 库数据库

RAG、向量数据库和LLM搜索：人工智能驱动商业智能的未来译文精选

RAG通过集成知识检索提升LLM性能，解决其无法及时纳入最新或专有信息的问题，尤其在客户服务领域影响显著。向量数据库则支持快速相似性搜索，理解查询语义。LLM搜索将超越关键字匹配，提供有意义且可操作的对话式答案。

2025-06-06 08:39:15

LLM RAG 向量数据库

深挖 Spring Boot：八种数据库连接控制机制，哪个才是你的最优解？

Spring 推荐使用 javax.sql.DataSource 作为统一的连接工厂接口，它屏蔽了底层连接池实现的细节，使得我们能更专注于业务代码开发。

2025-06-06 07:38:49

数据库连接控制 Spring

MySQL三大日志详解：Undo Log、Redo Log和Binlog的作用与工作机制

MySQL中的Undo Log、Redo Log 和Binlog是保障数据库事务安全、数据一致性和高可用性的核心组件。它们分工明确，协同工作，但各自有不同的设计目标和实现机制。

2025-06-06 07:02:43

MySQL Undo Log 机制

亿级流量，如何保证Redis与MySQL的一致性？失败如何设计补偿？

亿级电商流量，高并发下Redis与MySQL的数据一致性如何保证的方案，非常圆满了。以上的内容，如果大家能烂熟于心、对答如流、如数家珍，基本上面试官会被你震惊到、吸引到。

2025-06-06 01:55:00

Redis MySQL 流量

GreatSQL连接数被打满的三种紧急解决方案

使用数据库时，偶尔会出现数据库连接数飙升的场景，最严重的情况是连接打满，root 用户无法获取到连接，登陆数据库失败。这时候无法登录数据库kill 掉相关的数据连接,影响数据库的稳定性。

2025-06-06 01:55:00

GreatSQL 数据库连接数

加了个索引，SQL性能竟然慢了十倍！

在事务中通过索引检索并锁定行时，如果锁数量过多（超过阈值），数据库可能将锁升级为表锁，严重降低并发性能。

2025-06-05 04:22:00

SQL 性能索引

Redisson简明教程—你家的锁芯该换了

今天咱们就来聊聊Redisson提供的各种锁，Redisson就像是Redis给Java程序员的一把瑞士军刀，不仅能存数据，还能玩出各种分布式花样。

2025-06-05 01:40:00

Redisson 锁芯 Redis

为什么需要分库分表？你知道吗？

当你的系统用户量突破百万级、日订单量达到10万+时，单库单表的性能瓶颈会像紧箍咒一样限制业务发展。

2025-06-05 01:11:00

分库分表订单

大模型向量去重的N种解决方案！

向量数据库去重一定是生产环境要做的事，它的解决方案也有很多，通常我们会选择一种高效、且没有线程安全的解决方案，例如 Redis SetNX 或 Set 数据结构来解决。

2025-06-05 00:00:00

向量数据库线程安全 Redis

一条 INSERT 语句背后的秘密

数据库的 “高性能密码” 藏在底层结构里。从 INSERT 语句到磁盘存储，COMPACT 行格式的字段管理、行溢出的优化逻辑，都是提升数据库能力的关键。懂记录结构，才能在面试中从容应答，在优化时直击痛点。

2025-06-04 08:20:30

INSERT 数据库 COMPACT

在 .NET 中实现发件箱模式的实战

本文介绍了发件箱模式在.NET中的实现，讨论了该模式的利弊和扩容机制，在本文的基础上也能比较方便的实现基于其他语言的发件箱模式。

2025-06-04 08:10:00

发件箱模式 .NET 数据库

面试官：MySQL JOIN 表太多，你有哪些优化思路？

对于新系统、新代码，使用多表 join 的情况比较少，因为开发规范一般不允许这样做。但是老系统或者做过数据库迁移的系统，可能会遇到这种情况。要多个因素综合考虑再下手优化。

2025-06-04 07:48:46

MySQL JOIN 系统

MySQL JSON 类型 NOT NULL 竟无法约束 NULL 值插入？

正向解析 binlog 生成 SQL 看并无问题，binlog 里记录的确实是 '' （空）值。但是通过查看线上表数据发现，在有 JSON NOT NULL 类型的约束下，对应的回滚 SQL 主键值竟然是 NULL 值！这和 binlog 里记录的 '' （空）值不一致。

2025-06-04 02:55:00

MySQL NULL 类型

理清MySQL的行锁、意向锁、记录锁、间隙锁和临键锁

在InnoDB存储引擎中行级锁每次操作锁住对应的行数据，锁定粒度最小，发生锁冲突的概率最低，并发度最高。InnoDB的数据是基于索引组织的，行锁是通过对索引上的索引项加锁来实现的，而不是对记录加的锁。

2025-06-04 02:55:00

MySQL 意向锁记录锁

SQL优化困局：从90秒延迟到18秒响应的实战突围

当时我在开发客户留存看板，需要关联订单历史、计算最近购买间隔、过滤流失用户并按区域展示结果。预期耗时几秒，实际却每次都需要超过一分钟。当每天需要重复调试15次以上时，这种痛苦开始指数级放大。

2025-06-04 02:20:00

SQL 优化仪表盘

P7领导建议：可以用UUIDv7作为数据库主键

我们提到分布式主键ID的时候，可能都会想到UUID，比如在设计数据库主键的时候。但是可能最终都不会考虑它。但是呢，最近领导却建议说，可以考虑它作为数据库主键了，因为UUIDv7的出现~~

2025-06-04 02:15:00

UUIDv7 数据库主键

别再滥用模糊查找了，来试试 MySQL 多值索引！

MySQL 8.0版本以后，可以建立多值索引，应用此种查询场景。相比模糊查找方案，多值索引的检索性能更好，方案更加简单。

2025-06-04 01:02:00

Pottery，一个超酷的 Python 库

Pottery 提供了一系列高层次的抽象，使得开发者可以更方便地使用 Redis 来实现复杂的分布式系统功能。

2025-06-03 08:30:00

Pottery Redis Python

SpringBoot与InfluxDB整合，实现智能电表数据采集系统

InfluxDB是一个分布式时序数据库，专门用于存储和查询大规模的时间序列数据。广泛应用于监控系统、物联网（IoT）、金融数据分析等领域。

2025-06-03 02:10:00

Spring InfluxDB 数据

Redis之父：AI 水平不错，但远落后人类智能，开发者跟评：业界存在大量能力较弱的开发者，许多情况下，AI可以超越他们

“今天我要分享一个人类为何仍比大语言模型更有优势的小故事。我并不反对 AI 或者类似的技术成果，持续关注我的朋友都知道。我经常用大模型，现在也一样。之所以会有这段故事，是因为我想测试自己的想法、进行代码审查、看看 AI 会不会有比我更好的灵感、探索点专业范围内的更多可能性之类。”

2025-06-03 01:00:00

AI 语言模型

国产数据库培训认证大盘点原创

众所周知，国产数据库近些年来发展迅猛，伴随着国产化的大趋势，有更多的企业、场景开始使用国产数据库。这也倒逼数据库厂商开始重视用户生态建设，作为生态建设的一部分，数据库认证首当其中。那么作为个人来说，也面临需要升级原有技术栈，开始考虑学习国产数据库。那么国产数据库好入门嘛？

2025-05-30 07:31:00

国产数据库培训

ZODB，一个神奇的 Python 库

ZODB 的主要优势在于使用简单，开发者可以像操作普通 Python 对象一样操作数据库中的数据，无需编写 SQL 语句。

2025-05-29 10:00:00

ZODB Python 数据库

实战 2000w 数据大表的优化过程，提供三种解决方案

MySQL是基于线程的服务模型，因此在一些并发较高的场景下，单实例并不能充分利用服务器的CPU资源，吞吐量反而会卡在mysql层，可以根据业务考虑自己的实例模式。

2025-05-29 02:10:00

数据优化 MySQL

MySQL推出全新Hypergraph优化器，正式进军OLAP领域

在刚刚过去的 MySQL Summit 2025 大会上，Oracle 发布了一个用于 MySQL 的全新 Hypergraph（超图）优化器，能够为复杂的多表查询生成更好的执行计划，从而优化查询性能。

2025-05-29 02:00:00

MySQL 优化器数据库

MySQL和MongoDB事务同步的一种尝试

对于要求更高事务一致性的场景，可能需要考虑使用专门的分布式事务解决方案，如 XA 协议或 TCC (Try-Confirm-Cancel) 模式。比如JTA就属于XA协议，我们可以使用开源实现atomikos。

2025-05-29 01:23:00

MySQL MongoDB 事务同步

如何应对 Redis 大 Key 问题

监控 Redis 中的内存占用大小和网络带宽的占用大小，以及固定时间内的内存占用增长率，当超过设定的阈值的时候，进行报警通知处理。

2025-05-28 03:10:00

Redis 内存网络

开放数据标准：Postgres，OTel，与Iceberg，你知道哪个？

Postgres[1] 基本已经是事实标准；OTel[2] 和 Iceberg[3] 尚在成长，但它们具备当年让 Postgres 走红的同样配方。常有人问我：“为什么最后是 Postgres 赢了？” 标准答案是“可扩展性” —— 对，但不完整。

2025-05-28 02:55:00

Postgres OTel Iceberg

Redis如何助力高并发秒杀系统？看完这篇我彻底懂了！！

秒杀业务最大的特点就是瞬时并发流量高，在电商系统中，库存数量往往会远远小于并发流量，比如：天猫的秒杀活动，可能库存只有几百、几千件，而瞬间涌入的抢购并发流量可能会达到几十到几百万。

2025-05-28 02:20:00

Redis 电商系统

明明是同一条SQL，为什么有时候走索引a，有时候却走索引b ？

明明是同一条SQL，有时候走的索引a，而有时候走的索引b，就是它的锅。今天这篇文章跟大家一起聊聊，MySQL选错索引的问题，希望对你会有所帮助。

2025-05-28 01:10:00

SQL 索引 MySQL

面试官：使用 MySQL 时你遇到过哪些索引失效的场景？

面试官：使用 MySQL 时你遇到过哪些索引失效的场景？我：MySQL 索引失效的场景有很多，我说一下我遇到的几个场景。先假定有一张员工表，sql 如下：

2025-05-28 00:00:01

MySQL 场景索引

PG 的 Bgwriter 为什么搞得那么复杂

我是从C程序员转DBA的，所以遇到数据库的一些问题，我总是喜欢从一个码农的角度去发出灵魂拷问：为什么会这样？为什么要这样？这么做有啥必要？

2025-05-27 02:20:00

PG 数据库 DBA

阿里面试：MySQL 一个表最多加几个索引？6个？64个？还是多少？

没有索引时，数据库要执行全表扫描，就像你从图书馆第一本书开始一本本找，数据量越大查询越慢。有索引后，数据库可以直接定位数据位置，效率提升几十甚至上百倍。

2025-05-27 02:10:00

MySQL 数据库数据

MySQL datetime 类型精度设置踩坑

在 MySQL 数据库设计中，应显式声明 datetime 精度、验证版本兼容性与工具链一致性，并通过开文档化时区策略与测试环境模拟，系统性规避时间精度陷阱，确保业务逻辑的稳定性和数据准确性。

2025-05-27 01:55:00

MySQL 数据库工具链

MVCC 机制的原理及实现

在InnoDB中的实现主要是为了提高数据库并发性能，用更好的方式去处理读-写冲突，做到即使有读写冲突时，也能做到不加锁，非阻塞并发读，而这个读指的就是快照读，而非当前读。当前读实际上是一种加锁的操作，是悲观锁的实现。而MVCC本质是采用乐观锁思想的一种方式。

2025-05-27 01:00:00

MVCC 机制 InnoDB

我写的 SQL 竟然要经历这么多'九九八十一难'？难怪这么慢！

从今天开始，我们就开始学习数据库了，本文就来聊聊最基础也最神秘的话题——SQL到底是怎么跑起来的？

2025-05-26 09:30:00

SQL 数据库索引

FastAPI + Redis 实战：一分钟搞定高性能缓存方案

本文带你快速实战：FastAPI 如何优雅接入 Redis 实现缓存与存储！

2025-05-26 09:25:00

Web 接口开发 Redis

MySQL InnoDB 磁盘架构：如何管理和存储各数据？系统表、独立表、通用表、撤销表、临时表空间是什么？表和索引如何管理?

在聚集索引中，数据页内除了按照主键大小进行记录存放以外，在File header中，有两个字段：fil_page_prev 和fil_page_next, 分别记录了上一页/下一页的偏移量（offset），用以实现数据页在 B+ Tree 叶子位置的双向链表结构。

2025-05-26 08:37:17

MySQL InnoDB 磁盘架构

换掉ES！Redis官方搜索引擎来了，性能炸裂！

RediSearch是一个Redis模块，为Redis提供查询、二次索引和全文搜索。要使用RediSearch，首先要在Redis数据上声明索引。然后可以使用重新搜索查询语言来查询该数据。

2025-05-26 04:10:00

Redis 引擎性能

MySQL 派生表查询导致 Crash 的根源分析与解决方案

对于复杂的 SQL 会执行复杂的 Item 变换和删除不需要的 Item，但是正是由于这样才更容易导致 Crash 的出现。分析类似这样的 Crash 问题的时候，因为涉及代码量大，代码逻辑复杂往往很难找到相关修复代码，因此需要对代码运行流程比较熟悉，同时要有相关复杂问题解决的经验才能更好的应对这类问题。

2025-05-26 03:55:00

MySQL Crash 代码

从手工打标签到自动识别：LangChain4j如何革新文本分类？

传统方法如朴素贝叶斯、SVM 已经用烂了，语义太弱。然后我突然想起，前段时间不是玩过 LangChain4j 吗？它不是支持 Embedding 和向量数据库吗？

2025-05-26 03:15:00

SVM Embedding 数据库

未来AI场景，会是向量数据库为主？还是传统数据库向量化呢？

简单来说，向量数据库是一种专门用来存储、管理和查询向量数据的数据库。那什么是向量呢？你可以把它理解为一串数字，用来表示某个对象在多维空间中的位置。

2025-05-26 02:44:00

向量数据库传统数据库向量化

那些年，我们都踩过的十个MySQL经典大坑……

我们在从库中进行了一条针对有主键表的 sql 语句的插入，导致主库再插入相同 sql 的时候，主从状态出现异常。发生主键冲突的报错。

2025-05-26 02:22:00

MySQL 主库系统

MySQL 同步 ES 总崩？这四招直接封神！

在解决问题之前，咱得先搞清楚，MySQL 同步 ES 为啥总崩。这就跟处对象一样，你得知道人家为啥吵架，才能对症下药不是？咱先看看常见的 "分手现场" 都啥样。

2025-05-23 09:30:57

MySQL ES 技术

当AI邂逅向量数据库：重新定义智能时代的数据检索译文精选

本文将剖析这一组合如何革新信息发现与理解方式，通过一些实际案例、代码示例及技术流程解析其运行逻辑。

2025-05-23 08:26:11

人工智能向量数据库推荐系统

微软正式发布 SQL Server 2025 公开预览版，深度集成AI功能

微软在今年的 Build 2025 大会上正式发布了 SQL Server 2025 公开预览版，标志着这一经典数据库产品在 AI 集成、安全性、性能及开发者工具方面的全面升级。

2025-05-22 10:31:22

微软 SQL Server AI功能

五分钟上手！Docker‑Compose 快速部署 Redis

对于有多服务、配置更复杂的场景，docker-compose显得更优雅。只需一份docker-compose.yml，即可一键启动。

2025-05-22 10:00:00

Docker Redis 容器

聊聊 Redis 中的字典设计与实现

本文笔者从字典的数据结构和常见操作的角度对 Redis 中字典的设计思想和优化思路进行深入的剖析，希望对你有帮助。

2025-05-22 08:15:00

Redis 字典数据库

如何将实时流量解析并存入数据库

Suricata是一个开源的网络入侵检测和防护系统（IDS/IPS），由Open Information Security Foundation（OISF）开发和维护。该系统可以利用多线程设计在硬件上实现高性能数据处理，并且能够深入检查并解析多种网络和应用层协议。

2025-05-22 07:17:09

流量数据库系统

上一页 1 2 3 4 5 6 ··· 341 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营