直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.5w 条

几个基于CDC实时同步数据的开源组件，让你的数据同步更实时

数据库CDC是一种非常有用的技术，它能够提供实时性、可靠性、灵活性、高效性和易用性等优势，为企业提供了更好的数据管理和应用价值。接下来就分享几个CDC相关的开源项目。

2023-05-03 08:58:46

数据库开源

Spring Boot JPA：简单高效的数据库操作利器

JPA（Java Persistence API）是一种Java持久化规范，并不是具体的实现，它定义了一套面向对象的关系型数据库操作接口。JPA提供了一些注解和API，用于定义实体类、映射关系以及数据的持久化等方面。JPA的使用可以避免手写SQL语句，提高代码的可读性和可维护性。

2023-04-28 15:15:39

Redis+DB实现基于号段的发号器原理

在互联网行业中，为了保证服务的稳定性、可用性、并发性等指标，服务一般是采用集群多节点部署，如何保证在这些不同的节点生成符合业务要求的ID，又引出另一个概念：分布式ID生成器(实现方案有多种)。

2023-04-28 10:06:15

Redis 发号器集群

深入理解MySQL索引底层数据结构

索引本质上是一种排好序的数据结构，了解了MySQL索引的底层数据结构及存储原理，可以帮助我们更好地进行SQL优化。其实数据库索引调优是一项技术活，不能仅仅靠理论，因为实际情况千变万化，而且MySQL本身存在很复杂的机制，如查询优化策略和各种引擎的实现差异等都会使情况变得更加复杂。

2023-04-28 08:53:09

MySQL 索引底层数

使用Golang连接MongoDB方法详解

本文主要讲解使用MongoDB官方驱动Go.mongodb.org/mongo-driver/mongo 连接MongoDB的方法。

2023-04-28 07:56:09

MongoDB 字符串

MyBatis的延迟加载，你知道是怎么实现的么？

延迟加载也称为懒加载、惰性加载，使用延迟加载可以提高程序的运行效率，针对数据持久层的操作，在某些特定查询的情况下去访问特定的数据库，在其他情况下可以不访问某些数据表，尽量减少 SQL 的执行，从而达到提高速度的目的，是对数据库操作的一种优化。

2023-04-28 07:44:44

MyBatis 查询 SQL

如何使用大型语言模型和知识图来管理企业数据？译文

组织可以采用一种系统性的方法来生成知识图，方法是先摄取标准本体（比如保险风险），并使用GPT-3等大型语言模型（LLM）创建脚本以生成和填充图数据库。

2023-04-27 19:02:30

语言模型管理企业数据

索引合并，能不用就不要用吧！

索引合并看着似乎提升了 MySQL 搜索的性能，然而，一般出现索引合并，大概率都是因为索引创建的不合理，我们需要重新审视自己的索引。

2023-04-27 13:25:22

索引合并 MySQL

Python数据库编程：连接、查询和操作数据库的完整指南

数据库编程是Python编程中的重要组成部分，可以通过第三方库连接各种类型的数据库并执行查询和操作，同时也可以使用SQL语句进行各种数据库操作。

2023-04-27 09:36:43

数据库 Python

Redis Set 用了两种数据结构来存储，到现在才知道

当你需要存储多个元素，并且要求不能出现重复数据，无需考虑元素的有序时，就可以使用 Sets 来存储，这样能利用我对单个元素操作 O(1) 时间复杂度带来的性能优势。

2023-04-27 08:40:55

Redis 数据结构存储

MyBatis：MyBatis一二级缓存，你学会了吗？

如果中间sqlSession去执⾏commit操作（执⾏插⼊、更新、删除），则会清空SqlSession中的⼀级缓存，这样做的目的为了让缓存中存储的是最新的信息，避免脏读。

2023-04-27 08:18:10

MyBatis 缓存存储

零售行业如何进行活动前的准备工作

因为资源本身并不能解决大并发的问题，只是提供一个承载环境。如果有一些很严重的慢SQL，资源架构优化的再好也有会被打爆的一天。

2023-04-27 08:04:19

零售行业 SQL

详解Redis三大集群模式，轻松实现高可用！

本文详细介绍了Redis的三大集群模式：主从复制、哨兵模式和Cluster模式。每种模式都有其特点和应用场景。在实际应用中，可以根据系统的需求和特点选择合适的Redis集群模式，以实现高可用性、高性能和大规模数据存储等目标。

2023-04-27 07:52:56

Redis 集群模式

当你对 Redis 说你中意的女孩是 Mia

Redis 将所有对数据库进行过写入的命令(及其参数)记录到 AOF 文件，以此达到记录数据库状态的目的，为了方便起见，我们称呼这种记录过程为同步。

2023-04-27 07:48:53

redis 数据库 AOF

Redis布隆过滤器的原理和应用场景，解决缓存穿透

布隆过滤器BloomFilter是一种专门用来解决去重问题的高级数据结果。

2023-04-26 08:32:45

Redis 布隆过滤器

MySQL索引15连问，扛住！

聚簇索引并不是一种单独的索引类型，而是一种数据存储方式。它表示索引结构和数据一起存放的索引。非聚集索引是索引结构和数据分开存放的索引。

2023-04-26 07:40:34

MySQL 索引类型存储

分布式数据库是伪需求吗？

分布式数据库的核心权衡是：“以质换量”，牺牲功能、性能、复杂度、可靠性，换取更大的数据容量与请求吞吐量。但分久必合，硬件变革让集中式数据库的容量与吞吐达到一个全新高度，使分布式(TP)数据库失去了存在意义。

2023-04-26 06:56:31

分布式数据库伪需求

只需七步，教你轻松解决Redis热点Key问题

本文介绍了Redis热点key的概念、带来的问题和产生原因。为了解决热点key问题，可以采取数据分片、读写分离、缓存预热、限流和熔断降级等策略。

2023-04-26 01:07:03

Redis 读写分离缓存预热

七个业界流行的数据库，每个开发人员都应该了解！

在当今的技术领域中，有许多不同类型的数据库可供选择，每种数据库都有其独特的优点和用途！作为一名开发人员，了解不同类型的数据库是非常重要的。

2023-04-21 14:51:34

开发数据库

美团二面：细数 Redis 阻塞的九种情况

执行迁移时，两端的 Redis 均会进入时长不等的阻塞状态，对于小Key，该时间可以忽略不计，但如果一旦 Key 的内存使用过大，严重的时候会触发集群内的故障转移，造成不必要的切换。

2023-04-21 13:57:38

Redis 阻塞半自动

图解Dubbo，Dubbo服务提供者详解

本文将介绍 Dubbo 中的服务提供者，包括服务提供者的定义、服务暴露的方式、服务注册的实现、服务提供者的容错处理、服务提供者集群以及服务提供者的网络通信。

2023-04-19 08:13:42

Dubbo 服务注册

使用这个开源工具轻松同步数据库

开源的 Apache SeaTunnel 项目是一个数据整合平台，可以很容易地实现数据同步。

2023-04-18 18:22:31

开源工具数据库

一文了解MongoDB的各种部署模式

本文介绍了MongoDB的四种部署模式：单节点模式和三种集群模式。副本集模式已经替代了主从复制模式，保障了集群的可靠性；分片集群模式的可扩展性，可以满足海量数据的存储和高吞吐的需求。

2023-04-18 08:45:28

MongoDB 部署模式

再聊 MySQL 聚簇索引

聚簇索引英文是 Clustered Index，有时候小伙伴们可能也会看到有人将之称为聚集索引等，与之相对的是非聚簇索引或者二级索引。

2023-04-17 10:47:49

MySQL 聚簇索引

带你读 MySQL 源码：Select *

本篇我们来聊聊 Select * 中的星号是怎么展开为表中所有字段的。

2023-04-17 08:19:47

Redis性能瓶颈揭秘：如何优化大key问题？

Redis大key问题指的是某个key对应的value值所占的内存空间比较大，导致Redis的性能下降、内存不足、数据不均衡以及主从同步延迟等问题。

2023-04-17 08:04:15

Redis 性能内存

五分钟技术趣谈 | 图形数据库介绍

移动互联网的快速发展，服务器上存储了海量的数据，在传统关系数据库上，每次计算耗费的资源和时间是不可想象的。图形数据库应运而生，它使用简洁的形式表示数据关系，以更直观的形式构建商业数据，处理性能也得到极大提升。图形数据库在金融风控领域、社交网络、电商等领域正发挥着越来越重要的作用。

2023-04-15 20:33:35

图形数据库数据库

VLDB 顶会论文 Async-fork 解读与 Redis 实践

通过不同数据量下对比测试，我们可以看到，Async-fork 相比原生 fork，阻塞时间大大减少，性能提升非常明显。而且阻塞时间非常稳定，不会因为数据量的增长出现倍数级增长。

2023-04-14 18:35:19

Redis 数据 Async

DataLeap数据资产实战：如何实现存储优化？

本文主要讲述了使用 MySQL 作为 JanusGraph 存储后端时，在设计上面的思考，以及在实际过程中遇到的一些问题。

2023-04-14 15:37:02

DataLeap 存储优化 MySQL

总结一下Redis的缓存雪崩、缓存击穿、缓存穿透

Redis的使用，可以有效地提高系统的性能和可用性。但是在使用过程中，需要注意缓存击穿、缓存穿透和缓存雪崩等问题，采用适当的解决方案来避免这些问题的发生，从而保证系统的稳定性和可靠性。

2023-04-14 07:34:19

Redis 缓存击穿缓存穿透

记一次 MySQL 主从同步异常的排查记录，百转千回！

relay log 损坏了，导致从库的 SQL 线程解析 relay log 时出现异常。从库恢复方式是通过手动设置当时出错的 GTID 的下一个值，让从库不从主库同步这个 GTID，最后从库就能正常同步这个 GTID 之后的 binlog 了，后续 SQL 线程也能正常解析 relay log 了。

2023-04-13 12:00:00

MySQL SQL 线程

我们一起聊聊MySQL中的游标，你学会了吗？

游标（cursor）是一个存储在MySQL服务器上的数据库查询，它不是一条SELECT语句，而是被该语句检索出来的结果集。在存储了游标之后，应用程序可以根据需要滚动或浏览其中的数据。

2023-04-13 08:40:12

MySQL 服务器 SELECT

不要让数据库平替成为一剂毒药

在数据库迁移替代工作中，能够“平替”肯定会大大节约迁移的成本，但是我们不能因为“平替”能力的存在而放弃优化工作，否则就会为今后的长期应用与运维埋下一株邪恶的毒草。

2023-04-13 08:25:03

数据库 Oracle 迁移

图解Redis，Redis更新策略、缓存一致性问题

Redis的集群主节点数量一般不会超过1000个。集群中节点越多，心跳包的消息体内的数据就越多，如果节点过多，也会造成网络拥堵。因此Redis的作者Salvatore Sanfilippo不建议Redis Cluster的节点超过1000个，对于节点数在1000个以内的Redis Cluster，16384个槽位完全够用。

2023-04-13 08:15:47

Redis 缓存一致性

Redis为什么能抗住十万并发？揭秘性能优越的背后原因

Redis的8种对象类型底层都是基于这5种数据结构实现的，丰富的数据结构可以减少内存占用和计算复杂度，提高数据操作的效率。

2023-04-13 08:00:45

Redis 底层性能

MySQL索引数据结构入门

Hash 索引在 MySQL 中主要是 Memory 和 NDB 引擎支持，InnoDB 索引本身是不支持的，但是 InnoDB 索引有一个特性叫做自适应哈希索引，自适应三个字意味着整个过程是全自动的，不需要开发者配置。

2023-04-12 16:45:07

MySQL 索引数据结构

MySQL两个表的亲密接触-连接查询的原理

MySQL对于被驱动表的关联字段没索引的关联查询，一般都会使用 BNL 算法。如果有索引一般选择 NLJ 算法，有索引的情况下 NLJ 算法比 BNL算法性能更高。

2023-04-12 08:14:10

mysql 关联字段索引

SQL中常用的四个排序函数，你知道几个？

今天就给大家介绍四个你不怎么常用排序函数，他们就是SQL Server排序中经常用到的ROW_NUMBER()，RANK()，DENSE_RANK()，NTILE()这四个好兄弟。

2023-04-11 08:49:42

排序函数 SQL

Docker Compose搭建Redis7.0.4高可用一主二从三哨兵集群并整合SpringBoot

本次以一台虚拟机进行搭建，小编也是搭建了一星期，主从没啥问题，就是故障转移不行，根本原因就是Docker网络的问题，redis和哨兵不在一个网段中。很多教学都是用Host，但是不知道现在不能启动成功，所以还是要在一个网络中！

2023-04-11 08:30:52

给您的 MongoDB 定期做个体检：MongoDB 诊断

随着 MongoDB 的不断运行且数据量日益增多，就会不免产生一些问题。当问题出现时，该怎么办呢？我们会从以下几个方面进行探讨。

2023-04-11 08:01:31

MongoDB 数据工具

深度剖析 Redis 九种数据结构实现原理

Redis Bitmaps类型的内部编码使用了一种称为“压缩位图”的数据结构。它通过使用两个数组来存储位图数据：一个存储实际位的值，另一个存储每个字节中1的个数。这种编码方式可以大大压缩位图数据的大小。

2023-04-11 08:00:56

Redis 类型编码

我们一起使用Postman测试GraphQL

使用Postman可以很方便地测试GraphQL，也允许我们导入Schema并生成查询。

2023-04-11 07:43:32

Postman GraphQL 查询。

工业物联网的定义、架构、优势和示例

工业物联网(IIoT)是一套工具和应用程序，允许大公司创建从核心到边缘的端到端连接环境。它还包括传统的物理基础设施，如集装箱和物流卡车，以收集数据，对事件做出反应，并在智能设备的帮助下做出更明智的决策。

2023-04-10 10:00:20

工业物联网物联网

MySQL的Varchar字段最大长度真的是65535吗？

Char和Varchar的区别在于，Varchar虽然声明了最大能放100个字符，但一开始不需要分配100个字符的空间，可以根据需要慢慢增加空间。而Char一开始声明是多少，就固定预留多少空间。

2023-04-10 08:28:35

Jenkins系统用户认证配置管理

在配置之前还是要嘱咐一句，由于配置失败或者不当可能会影响后续用户的登录。在此建议大家首先在测试环境进行测试。可以提前将${JENKINS_HOME}/config.xml备份一下，然后配置失败的时候迅速还原。

2023-04-10 08:11:27

Jenkins 数据库

带你读 MySQL 源码：Limit，Offset

从 LimitOffsetIterator::Read() 的实现逻辑来看，offset 越大，读取之后被丢弃的记录就越多，读取这些记录所做的都是无用功。

2023-04-10 08:07:48

MySQL limit offset

PostgreSQL 主流压缩表工具推荐

出现表一直膨胀，该如何处理？开源社区的魅力就在于很多大神会提供很多工具来解决对应的问题，而本问题则有2种主要的工具：Pg_repack和Pgcompacttable。

2023-04-09 19:58:38

PostgreSQL 压缩表工具

Redis哨兵模式（Sentinel）的搭建与配置

创建三个Redis实例所需的目录，生产环境需独立部署在不同主机上，提高稳定性。

2023-04-09 19:54:52

Redis 哨兵模式

StarRocks在捞月盘货中的实践

虽然整个过程遇到了很多问题也踩了不少的坑，但上线后查询响应时间以及整体运行的稳定性还是比较满意的，因此后续我们也考虑接入更多的数据以及场景到starrocks中，也特别感谢DBA 团队和 Starrocks 官方的支持。

2023-04-07 18:35:23

StarRocks 货品运营

如何使用Docker搭建Redis Cluster集群？

本文主要讲了如何在一台Linux服务器上使用Docker搭建一个Cluster模式的Redis集群，这种方式搭建的集群主要用于测试用途，不建议在生产环境使用。

2023-04-07 08:28:14

上一页 1 ··· 23 24 25 26 27 ··· 319 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营