鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

超实用！用FunctionCall实现快递AI助手

昨天晚上直播，我们用 RAG（Retrieval-Augmented Generation，检索增强生成）实现了数据库 AI 助手，今天我们准备换一个技术使用 function call 来实现快递 AI 助手。

2025-04-18 00:00:00

AI 助手数据库

HexHub：一款高颜值的数据库、SSH/SFTP、Docker管理工具

推荐一个专为程序员和运维人员量身打造的一站式开发运维利器：HexHub。它可以同时支持数据库开发、SSH 以及 RDP 远程连接、SFTP 文件传输以及 Docker 面板管理。

2025-04-17 08:00:00

HexHub 数据库 Docker

SQLite-Web：一个轻量级的SQLite数据库管理工具

SQLite-Web 是一个基于 Web 浏览器的轻量级 SQLite 数据库管理工具。它基于 Python 开发，免费开源，无需复杂的安装或配置，适合快速搭建本地或内网的 SQLite 管理和开发环境。

2025-04-17 04:00:00

SQLite-Web SQLite 数据库

Spring Boot3.3 + Apache Calcite 实战：用 SQL 动态查询 JSON 数据源

Apache Calcite 作为一个高度可扩展的查询引擎，在大数据和异构数据访问场景中具有广泛的应用价值。它不仅支持灵活的 SQL 查询语法，还能与各类数据源轻松集成，让开发者能够以统一方式访问结构化和非结构化数据。

2025-04-17 03:33:00

Spring SQL 动态查询

学会MySQL数据备份与恢复，删库不跑路！

真实案例告诉我们：没有安全的数据库，就像没有安全绳的走钢丝——一次误操作就可能让业务坠入深渊。在实际的运维过程中，做好数据库的备份和恢复至关重要，也是运维工程师和dba需要掌握的基本技能。

2025-04-17 03:30:00

MySQL 数据备份

dbt：新一代数据转换工具

dbt（Data Build Tool）一款专为数据分析和工程师设计的开源工具，专注于 ETL/ELT 流程的数据转换（Transform）环节，帮助用户以高效、可维护的方式将原始数据转换为适合分析的数据模型。

2025-04-17 03:00:00

dbt 数据转换工具开源

Hydra Columnar：一个开源的PostgreSQL列式存储引擎

Hydra Columnar 是一个 PostgreSQL 列式存储插件，专为分析型（OLAP）工作负载设计，旨在提升大规模分析查询和批量更新的效率。

2025-04-17 01:30:00

开源 PostgreSQL 存储引擎

SpringAI更新：向量数据库不可用的解决方案！

虽然 SimpleVectorStore 不支持了，但 Spring AI 内置了 Redis 或 ES 作为向量数据库的分布式存储中间件，我们可以用他们来进行向量的存储。

2025-04-17 00:00:00

SpringAI 数据库 Redis

糟糕，线上库存竟然变成负500......

通过组合使用：Redis做第一道防线（承受80%流量）；分布式锁控制核心业务逻辑；预扣库存+消息队列保证最终一致性。

2025-04-16 08:20:34

线上库存预扣

基于数据库锁实现防重复提交

今天介绍如何结合数据库的悲观锁或乐观锁来实现对请求的有效验证，确保同一操作不会被重复执行。

2025-04-15 08:40:00

数据库悲观锁乐观锁

SeaTunnel 同步 MySQL 到 Doris 的优化策略

SeaTunnel作为一个高性能的分布式数据集成工具，被广泛用于将MySQL数据同步到Doris等OLAP数据库。本文将结合实际配置文件，详细探讨SeaTunnel同步MySQL到Doris的优化策略。

2025-04-15 08:30:00

MySQL 数据库 Doris

面试官：RocketMQ 长轮询是怎么实现的？

长轮询可以降低无效的轮询请求，提升请求效率。RocketMQ 消费者长轮询支持配置，当消息量不太大，消费者没有必要频繁地请求，这时可以设置成长轮询机制。需要注意的是，消费端设置的请求超时时间必须大于 Broker 轮询时间。

2025-04-14 11:41:12

RocketMQ 长轮询配置

SQLite + Redis = Redka

Redka 是一个基于 SQLite 实现的 Redis 替代产品，实现了 Redis 的核心功能，并且完全兼容 Redis API。

2025-04-14 02:00:00

SQLite Redis Redka

不宕机、无风险！千亿级数据线上平滑扩容实战！

在项目初期，我们部署了三个数据库A、B、C，此时数据库的规模可以满足我们的业务需求。为了将数据做到平均分配，我们在Service服务层使用uid%3进行取模分片，从而将数据平均分配到三个数据库中。

2025-04-14 02:00:00

不宕机数据数据库

SpringBoot与Calcite整合，实现多数据源统一查询系统

最近，接到一个电商系统的兼职小单，其中订单信息存储在MySQL数据库，而用户信息存储在PostgreSQL数据库。客户那边想有一个统一查询接口，可以通过SQL查询同时获取这两个数据源的信息。

2025-04-14 01:00:00

Calcite 电商系统 MySQL

大厂防止商品超卖的五种方案！

当时某电商大促，我们自认为完美的分布式架构，在0点整瞬间被击穿。数据库连接池耗尽，库存表出现负数，客服电话被打爆...

2025-04-14 00:00:00

数据库分布式架构分布式锁

FastAPI 实战：打造高效的 CRUD 接口（增删改查优秀实践）

快速、安全、优雅地构建一套完整的数据库 API，是每个全栈工程师的基本功。本篇文章，我们用 FastAPI + Tortoise-ORM 实现最常见的用户信息表的 CRUD 接口。

2025-04-11 10:13:00

数据库 API FastAPI

线上 Redis 频繁崩溃？这套大 key 治理方案请收好

现在稍微大点的项目都用 Redis 集群，假设你用的是分片集群（比如 Codis、Redis Cluster），一个大 key 会被固定分配到某个分片上。想象一下，其他分片内存使用率才50%，就这个分片像吹气球一样涨到90%，整个集群的负载均衡瞬间失效。

2025-04-11 09:30:42

Redis 频繁 Codis

5大步骤+10个案例，SQL优化万能公式！

在应用开发的早期，数据量少，开发人员开发功能时更重视功能上的实现，随着生产数据的增长，很多SQL语句开始暴露出性能问题，对生产的影响也越来越大，有时可能这些有问题的SQL就是整个系统性能的瓶颈。

2025-04-11 02:44:00

SQL 优化万能公式

FastAPI + Tortoise-ORM：异步数据库操作优秀实践

在构建现代 Web 应用时，我们越来越追求高性能 + 易维护 + 强扩展性。FastAPI 与 Tortoise-ORM 这对组合，正是实现异步数据库操作的黄金搭档。

2025-04-10 10:20:12

Web 应用异步数据库 FastAPI

"另类MySQL"-openHalo 初体验原创

作为最大的两个开源项目，MySQL\PostgreSQL 拥有着庞大的用户群体。而这一开源项目，将两者统一起来，让很多MySQL生态用户，可以平滑迁移到PG生态上来。我也抽了点时间做个简单的评测，下面将从通讯协议、数据类型、数据对象、字符集、SQL语法、过程化语言、内置函数、系统视图及其他等角度进行阐述。

2025-04-10 07:30:43

MySQL openHalo 开源

如何合理规划Elasticsearch的索引

创建一个索引需要结合业务使用场景考量字段类型选择和是否需要索引分词，按照数据规模和业务增长速度来确定分片和副本的数量的大小。

2025-04-10 01:11:00

索引数据业务

Prometheus 快速监控 MySQL 数据库，超简单！

本文在默认数据库和 prometheus 都已部署好的前提下，分享 Prometheus 如何监控 MySQL 数据库。

2025-04-09 11:35:00

MySQL 数据库监控

MySQL遇到AI：字节跳动开源 MySQL 虚拟索引 VIDEX

VIDEX 提供开箱即用的虚拟索引能力，可无缝集成至现有 MySQL 生态；对于数据库研究者，VIDEX 模块化设计允许新算法（如 NDV 估计、Cardinality估计等等）在 MySQL 上快速验证，推动前沿技术落地。

2025-04-09 09:20:00

MySQL AI 人工智能

Spring Boot：RedisTemplate的List类型操作

Redis中的List类型是一个双向链表结构，支持在头部或尾部进行元素的插入和删除操作，常用于实现队列、栈等场景。RedisTemplate对Redis中的List类型提供了多种操作方法，通过opsForList()，可以进行List的增删查操作。

2025-04-09 00:55:00

List 类型 Redis

面试官：谈谈你对分库分表的理解？

Sharding Sphere JDBC 和 Sharding Sphere Proxy 使用场景分别是啥？ShardingSphere-JDBC 具体实现步骤有哪些？说说它的实现原理？

2025-04-09 00:00:00

分库分表 MySQL

数据库与缓存不一致，你会怎么办？

缓存与数据库数据不一致，根本上是由数据库主从不一致引起的。当主库上发生写操作之后，从库binlog同步的时间间隔内，读请求，可能导致有旧数据入缓存。

2025-04-08 09:00:00

数据库缓存架构

一文搞懂 MySQL InnoDB架构 Buffer Pool、Change Buffer、自适应哈希索引、Log Buffer

Buffer Pool 是主内存中的一个区域，它在访问时缓存表和索引数据。Buffer Pool 允许频繁使用的数据直接从内存中访问，从而加快处理速度。

2025-04-08 08:20:00

MySQL 架构 InnoDB

FastAPI 响应模型：Pydantic 的数据验证与转换，一篇吃透！

response_model 是 FastAPI 最强大功能之一，搭配 Pydantic 使用，可以动校验、转换、过滤、文档全搞定！

2025-04-08 08:15:00

FastAPI 响应模型数据库

国产集中式数据库对象评测 — 索引原创

索引能否发挥更大作用，取决于优化器能能否充分地利用索引。这里有一些常见的优化手段，包括索引覆盖扫描、索引条件下推、索引跳跃扫描等等。这里稍微吐槽下，国内数据库这部分介绍的不多，搜索也得不到有用的信息，因此可能信息不够完整。

2025-04-08 07:30:40

数据库对象索引

国产数据库与Oracle数据库事务差异分析

数据库中的ACID是事务的基本特性，而在Oracle等数据库迁移到国产数据库国产中，可能因为不同数据库事务处理机制的不同，在迁移后的业务逻辑处理上存在差异。

2025-04-08 06:00:00

数据库 Oracle 处理机制

Entity Framework性能翻车？手写SQL不如试试这三招！

我们能够有效地提升Entity Framework的性能，避免出现“性能翻车”的情况。在大多数场景下，这些优化技巧能够让EF在性能上与手写SQL相媲美，甚至在某些复杂业务逻辑场景中更具优势。开发者们可以根据实际项目需求，灵活运用这些技巧，打造高性能的.NET应用程序。

2025-04-08 01:00:00

Entity SQL 开发

重生之 MySQL B+Tree 提前问世二十年，MySQL之父叫我师父

B+树把磁盘的物理运动，变成了内存的闪电舞蹈！"——当日登上《程序员》杂志封面。三月后，林渊成立"深空科技"，发布"伏羲 B+引擎"。

2025-04-07 08:30:04

MySQL B+Tree ID 字段

常见SQL慢查询问题及解决方法

SQL 慢查询问题的排查和解决需要综合考虑多个方面，包括索引的使用、查询语句的编写、表的关联方式以及数据库的配置等。通过对常见问题的分析和针对性的解决方法，可以有效地提高数据库查询的性能，提升系统的整体运行效率。

2025-04-07 07:20:35

SQL 慢查询性能

镜像漏洞清零计划：Trivy + 自动化修复流水线实战

本文将深入探讨镜像漏洞的全生命周期管理，覆盖精准检测、分级修复、运行时防护，并提供可直接落地的代码和架构设计。

2025-04-07 04:21:00

镜像漏洞流水线

MySQL 8.0 INSTANT DDL 算法原理简析

MySQL 8.0 中引入 INSTANT DDL，极大提高了 DDL 的执行效率，具体原理简单说就是仅修改元数据，不修改现有行的物理结构，显然这样会导致数据与表结构不一致，这个问题是怎么解决的呢？本文将简单分析这个问题，并先回顾 online DDL。

2025-04-07 03:00:00

MySQL DDL online

面试官：说说MySQL主从复制实现原理？

MySQL 主从复制用于多个数据库服务器之间的数据同步，它可以提供高可用性、提高数据库整体性能和吞吐量，以及可以进行数据备份和数据库恢复。

2025-04-07 00:00:00

MySQL 数据库服务器

RAG实战 | 向量数据库LanceDB指南

LanceDB是一个开源的用 Rust 实现的向量数据库。向量搜索是一种在高维空间中搜索向量的方法，主要是将原始数据通过嵌入模型得到向量，然后通过向量相似度算法计算向量之间的距离，从而找到最相似的向量。

2025-04-03 16:02:14

RAG 向量数据库 LanceDB

为什么AI需要向量数据库？

大模型遇到了严峻瓶颈。参数膨胀效益递减，幻觉问题依旧。在这关键节点，有个核心技术正在成为破局者——向量数据库。

2025-04-03 11:04:40

AI 向量数据库大模型

Redis 三主三从高可用集群部署全过程详解

在每台主机上运行两个 Redis 实例，需要为每个实例创建独立的配置文件和数据目录。

2025-04-03 11:00:00

Redis 集群数据库

一文读懂 Apache Doris

海量数据如同洪水般涌来，传统数据库却无力应对？当分析查询需求日益增长，普通数据库却只能提供龟速的响应时间？当业务决策需要实时洞察，而系统返回的只有超时提示？这正是Apache Doris要解决的核心问题。

2025-04-03 10:56:47

数据库数据分析

MySQL 主从，一定会不一致！

今天聊聊数据库主库与从库的一致性问题，以及数据库主从不一致时的四种常见优化方案。

2025-04-03 09:51:37

MySQL 数据库架构

震惊！用 Redis+AI 模型实现秒级实时风控，这波操作太秀了

兄弟们，有没有遇到过这种情况：凌晨三点在某东抢购显卡，刚提交订单就提示"系统繁忙"，转头发现黄牛已经在海鲜市场挂出同款；扫码支付时突然弹出风险提示，非要验证人脸识别；更绝的是某银行APP，刚输完密码就收到短信提醒："检测到您的账户存在异常操作"——但此时您根本没动过手机。

2025-04-03 09:30:56

Redis AI 模型

活动中台系统慢 SQL 治理实践

活动中台系统作为中台项目非常注重系统性能和用户体验，数据库系统性能问题会对应用程序的性能和用户体验产生负面影响。慢查询可能导致应用程序响应变慢、请求堆积、系统负载增加等问题，甚至引发系统崩溃或不可用的情况，因此，需要在数据库系统中针对执行缓慢的SQL查询进行优化和改进。

2025-04-03 09:00:00

慢SQL 数据库

行转列不再复杂：SQL高手都在用的技巧揭秘

将冗长的纵向数据“压缩”为横向结构，让分析更高效。本文将通过实战案例，手把手教你掌握 SQL 中行转列的3 种核心方法，并揭示高手的隐藏技巧。

2025-04-03 08:00:51

SQL 原始数据结构

Elasticsearch深度分页全解：从原理到跳页实战

在数据爆炸的时代，分页查询已成为系统标配功能。但当面对亿级数据量时，传统的分页方式却可能成为压垮系统的最后一根稻草。本文将深入剖析Elasticsearch深度分页的成因，并提供常见的解决方案.

2025-04-03 00:03:00

数据内存网络

五分钟快速部署 MySQL：二进制方式

本篇文章我们将分享关于 MySQL 五种部署方式中的二进制部署。下面，我们一起来看。

2025-04-02 11:30:00

MySQL 二进制部署数据库

IvorySQL：兼容Oracle数据库的开源PostgreSQL

今天给大家介绍一款基于 PostgreSQL 开发、兼容 Oracle 数据库的国产开源关系型数据库管理系统：IvorySQL。

2025-04-02 08:30:00

IvorySQL Oracle PostgreSQL

CTO 问我，为什么不按照教材上的 3NF 来设计数据库？

数据冗余在大数据量与高并发量的数据库设计中使用极其广泛，今天重点讲讲冗余表的设计。

2025-04-02 08:05:00

数据库 3NF 数据冗余

阿里面试：MySQL乐观锁是什么？底层实现原理？

MySQL的乐观锁通过版本号或时间戳机制实现，其核心原理：是在更新数据时检查数据是否被其他事务修改，从而避免并发冲突。

2025-04-02 01:22:44

MySQL 乐观锁数据

1 2 3 4 5 6 ··· 338 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营