鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

Redis cluster集群Hash Tag原理分析

hash tag是一把双刃剑，在使用时需要考虑具体业务逻辑与场景，应当尽量避免上述问题。假设无法避免时，可以对key的粒度按照业务线或者场景进行细化，进而对key进行拆分，以便更均匀的分散到不同的slot上。

2023-06-10 23:09:40

Redis 场景内存

Flask与SQLAlchemy基础查询：让你轻松掌握ORM查询技巧

在使用Flask和SQLAlchemy时，SQLAlchemy提供了一种Pythonic的查询方式，即使用Python代码来构建SQL查询语句。

2023-06-09 07:55:09

Flask SQLAlchemy

Neondb-穷人的Aurora，你看明白了吗？

Neon是以Apache V2开源的，我们目前可以到GITHUB上去下载，项目名称为NervanaSystems/neon。整个项目是用Rust开发的，其易读性不错，作为数据库产品，性能应该也没问题。

2023-06-09 07:18:03

开源数据库开源

MySQL分库分表全攻略：从小白到大神的进阶指南！

我们先来了解一下什么是分库分表。分库分表是指将原本存储在单一数据库中的数据，拆分到多个数据库或者多个数据表中。这样做的目的是为了提高数据库的扩展性和性能，解决单一数据库在数据量和并发访问上的瓶颈。

2023-06-09 00:09:46

MySQL 分库分表

Doris为什么那么快？

在绝大多数场景之中，用户只需要将session变量enable_vectorized_engine设置为true，则FE在进行查询规划时就会默认将SQL算子与SQL表达式转换为向量化的执行计划，从而提升SQL执行性能。

2023-06-08 18:25:40

Doris 场景查询

Oracle推行“星链”式云战略

Oracle和企业计算巨头IBM以及SAP一样，已经从以其自身为中心的、单一中心的观点转向多极化了，或者更具体地说，转向了多云世界。除了小型企业，对于大多数中型到大型企业来说，多云是他们已经在计划中或者默认的规则。

2023-06-08 14:11:22

Oracle 云战略

MySQL 同步 ES 实战，肝到爆！

基本是手把手教你如何将 MySQL 同步到 ES，不仅是增量同步，还包括全量同步，如果你的项目也需要用到该场景，基本可以直接照搬。

2023-06-08 08:43:36

MySQL ES 场景

OpenEuler22+GreatSQL+Dbops玩转MGR

预备的 jemalloc 包只有两个版本：一个是针对 EL7，一个是针对 EL8。并没有专门为国产操作系统准备的专用包。在国产操作系统上，你应该优先使用 yum 来安装适合该系统的包。如果使用 yum 安装失败，你可以考虑使用 EL7 或者 EL8 的 jemalloc 包来进行兼容性安装。

2023-06-08 08:17:32

GreatSQL MGR EL7

Flask和SQLAlchemy的模型操作：增删改查方法详解

在Flask应用程序中，SQLAlchemy可以轻松地与Flask集成，这使得创建和管理数据库变得更加容易。在下面的讲解中，我们将学习如何使用Flask和SQLAlchemy来建立，查询，修改和删除数据库模型。

2023-06-08 08:13:43

Flask SQLAlchemy

快速带你读懂MySQL的Binlog写入机制

如果 MySQL 服务器在崩溃恢复时发现二进制日志比应有的短，则它至少缺少一个成功提交的 InnoDB 事务。如果 sync_binlog=1 并且磁盘/文件系统在请求时进行实际同步（有些则没有），则不会发生这种情况，所以服务器打印一条错误消息日志。在这种情况下，此二进制日志不正确，应从源数据的新快照重新启动复制。

2023-06-08 07:37:35

MySQL binlog 机制

数据库索引原理与底层数据结构解析

通过本文的介绍，我们了解了数据库索引的原理和底层数据结构。我们知道了IO操作对于索引的重要性，以及如何通过分块读取和局部性原理来优化IO性能。

2023-06-08 07:25:56

数据库索引数据结构

纠删码技术在vivo存储系统的演进【上篇】

本文将学术界和工业界的纠删码技术的核心研究成果进行了相应的梳理，然后针对公司线上存储系统的纠删码进行分析，结合互联网企业通用的IDC资源、服务器资源、网络资源、业务特性进行分析对原有纠删码技术进行优化和微创新，提出了融合EC整体方案以及可落地的RS+LRC+中间结果优化+并行修复跨AZ带宽设计方案，为后续的工程实践提供重要原理和架构支撑。

2023-06-08 05:58:28

数据库纠删码技术

IDC：中国关系型数据库市场2027年将达102.7亿美元

IDC预测，到2027年，中国关系型数据库软件市场规模将达到102.7亿美元，2022-2027的5年市场年复合增长率（CAGR）为24.5%。

2023-06-07 20:17:45

数据库关系型数据库

Hadoop数据仓库的主要特征有哪些？

数据仓库(英语：Data Warehouse，简称数仓、DW),是一个用于存储、分析、报告的数据系统。数据仓库的目的是构建面向分析的集成化数据环境，分析结果为企业提供决策支持(Decision Support)。

2023-06-07 16:33:28

数据仓库 Hadoop

华为云张平安：根深才能叶茂，发展根技术应产业聚力，做大做强

发展基础软件根技术，做大做强中国数据库产业，是一项长期性、战略性的工作。华为将坚定不移战略投入GaussDB数据库，携手产业伙伴，给世界一个更优选择。

2023-06-07 15:57:09

面试官：MySQL连环炮，你扛得住嘛？

为了节省大家的时间，阿Q决定帮大家先将 MySQL 面试相关的知识进行汇总整理，一改往日知识点东一棒槌西一榔头的问题。那么，你准备好迎接 MySQL 连环炮了嘛？

2023-06-07 15:29:33

MySQL 事务面试

根技术再突破，华为宣布GaussDB数据库正式向全球客户提供服务

6月7日，在华为全球智慧金融峰会2023上，华为常务董事、华为云CEO张平安以“一切皆服务，做好金融数字化云底座和使能器”为主题发表演讲，全面介绍了华为云基于全云化底座、分布式数据库GaussDB、分布式中间件以及可信的开发工具等构建的金融分布式新核心，并正式发布新一代分布式数据库GaussDB。

2023-06-07 11:58:16

Flask和SQLAlchemy的结合，你了解多少？

在Flask应用程序中，我们需要进行一些配置来连接数据库。我们可以创建一个Config.py文件，用于存储应用程序的配置信息。

2023-06-07 08:18:25

Flask SQLAlchemy

SpringBoot整合Mybatis-Plus多数据源

MyBatis-Plus则是一个优秀的ORM框架，它为我们封装了大量的数据库操作细节，简化了我们的开发工作，同时也提供了多数据源方案。

2023-06-07 08:08:37

Mybatis SpringBoot

AWS Aurora 数据库 Failover 处理方案

在 Failover 过程中，仅影响当前活跃连接在数据库重启过程中对应的读/写业务，彻底消除 Failover 过程 DNS 带来的read-only异常、也避免了 failover 后的连接倾斜现象，最小化的处理数据库 failover 对应用程序造成的影响。

2023-06-07 08:00:40

Failover 数据库 DNS

Mybatis-plus的批量插入真的不能用吗？原创精选

在很多公司，经常听到“不要用 mybatis-plus 的批量插入，它其实也是遍历插入，性能很差的”。真的是这样吗？我们不应该人云亦云，应该自己去探究下。

2023-06-07 08:00:00

MySQL 批量插入

深入剖析SQL JOIN原理，助你掌握数据连接的奥秘！

通过本文的介绍，我们了解了 JOIN 的基本概念和常见的 JOIN 类型。同时，深入探讨了嵌套循环 JOIN、排序合并 JOIN 和哈希 JOIN 这三种常见的 JOIN 算法及其优化。

2023-06-07 07:43:57

数据库 JOIN 类型

什么时候 MySQL 查询会变慢？

数据按需取用。有时候我们会忽略多拿数据对查询性能的影响，然而优化是一个锱铢必较的事情，需要多少数据就查询多少，要尽量避免数据库查询 100 条，结果前端只展示 10 条这种情况。

2023-06-06 16:54:00

MySQL 性能数据

数据库云化成为趋势阿里云与MongoDB开启合作新征程

数据库的云化已经不可避免，日前，阿里云宣布与开发者数据平台公司MongoDB续签战略合作协议，双方致力于将MongoDB的最新产品成果与阿里云企业级服务相结合，携手深耕广袤的国内市场。

2023-06-06 14:15:15

数据库云计算

InnoDB为什么不用跳表，Redis为什么不用B+树？

Innodb是MySQL的执行引擎，MySQL是一种关系型数据库，而Redis是一种非关系型数据库。这两者之间比较大的区别是：关系型数据库以表的形式进行存储数据，而非关系型数据库以Key-value的形式存储数据。

2023-06-06 09:03:06

精通SQLAlchemy高级功能：全面指南数据库高级操作

SQLAlchemy提供了非常丰富的高级功能，包括数据库迁移和版本控制、多数据库支持、分布式事务支持以及ORM映射定制等。这些高级功能可以帮助我们更加方便、高效地使用SQLAlchemy，并满足不同应用场景的需求。

2023-06-06 08:25:31

SQLAlchemy 数据库

大型数据库上云能从阿里云易搭上学到些什么

数据库的前端连着应用，后端连着数据中台，还和其他云上云下的业务系统保持着复杂的关系，因此对于云上的转发路由器TR也有十分高的要求。

2023-06-06 08:03:15

数据库上云数据中台

HDFS中Acl权限管理的简单实用，你学会了吗？

对于其他人,不可访问这个目录。现在有这么一个特殊的用户root，我想root用户可以访问这个目录，在不修改root用户组和其他人的权限的情况下，还有什么方式可以实现这个功能呢？

2023-06-06 07:50:07

权限管理 hdfs acl

数据库运维管理平台面面观原创精选

近年来，数据库运维管理平台市场非常活跃，涌现出一批有代表性的厂商产品，其背后也是数据库管理需求变化所致。在深究下来，也是近些年数据库技术演进与管理方式的变化所致。

2023-06-06 07:31:33

数据库运维管理平台

腾讯面试体验倍儿好，我们一起感受一下吧！

索引可以帮助我们快速搜索数据，innodb 存储引擎用的是 b+树索引，叶子节点存放的是索引+数据，非叶子节点只存放索引。

2023-06-05 14:14:21

腾讯索引面试

SQLAlchemy性能调优，你了解多少？

SQLAlchemy提供了一个强大的调试工具，可以帮助我们分析SQL语句的性能。我们可以在创建SQLAlchemy引擎时，将echo参数设置为True，这样SQLAlchemy就会在执行每个SQL语句时输出相应的日志信息，包括执行的SQL语句和执行时间。

2023-06-05 09:17:50

SQLAlchemy 关系型数据库

聊聊SQL中的排名问题，你学会了吗？

RANK()函数，顾名思义排名函数，可以对某一个字段进行排名，这里和ROW_NUMBER()有什么不一样呢？ROW_NUMBER()是排序，当存在相同成绩的学生时，ROW_NUMBER()会依次进行排序，他们序号不相同，而Rank()则不一样。如果出现相同的，他们的排名是一样的。

2023-06-05 08:36:04

SQL 函数 RANK()

答读者问：唯一索引冲突，为什么主键的 Supremum 记录会加 Next-Key 锁？

我在 MySQL 8.0.32 复现了问题，并调试了加锁流程，写下来和大家分享。了解完整的加锁流程，有助于我们更深入的理解 InnoDB 的记录锁，希望大家有收获。

2023-06-05 08:15:30

聚集索引和非聚集索引，很简单的面试题，但是很多人都不知道

非聚簇索引是将索引和数据分开存储，那么在访问数据的时候就需要2次查找，但是和InnoDB的非聚簇部分还是有所区别。InnoDB是需要查找2次树，先查找辅助索引树，再查找聚簇索引树（这个过程也叫回表）。而MyISAM的主键索引叶子结点的存储的部分还是有所区别。

2023-06-05 08:07:34

聚集索引存储数据

SQL治理高阶实践：异常防御体系建设与应用挖掘

在开发阶段，研发通常不受相应开发规范和SQL审核约束。从开发到测试或生产发布时，才会进行DDL和DML的审核。目前业内SQL治理，主要还是在SQL出问题之后进行相应的治理。

2023-06-05 07:24:46

SQL 治理防御体系

小白必看！轻松理解和解决MySQL幻读问题！

幻读是MySQL数据库中常见的一个问题，但是通过使用适当的方法，我们可以解决这个问题。在本文中，我介绍了两种常用的解决方法：间隙锁和一致性非锁定读。

2023-06-05 00:28:24

MySQL 数据库非锁定读

MySQL：MySQL体系架构

存储引擎负责MySQL中数据的存储与提取，与底层系统文件进行交互。MySQL存储引擎是插件式的，服务器中的查询执行引擎通过接口与存储引擎进行通信，接口屏蔽了不同存储引擎之间的差异。现在有很多种存储引擎，各有各的特点，最常见的是MyISAM和InnoDB。

2023-06-02 08:16:14

MySQL 体系架构

聊一聊SQLAlchemy事务和并发

事务和并发是数据库系统中非常重要的概念，能够保证数据的一致性和完整性，同时提高系统的处理能力和效率。在使用SQLAlchemy时，应该充分利用其提供的事务管理功能，并注意隔离级别和锁的使用，以避免并发问题的出现。

2023-06-02 07:45:39

SQLAlchemy 数据库

Doris数仓的四大特点，一篇讲明白

Doris是一款基于MPP技术的SQL分析型数据库系统，能够在海量数据的OLAP场景下提供毫秒级的查询响应性能。Doris的实现架构脱胎自Apache Impala和Google Mesa系统，并进行了大量的改造和优化，最终形成了今天大家看到的这款架构优雅、性能卓越、功能丰富、简单易用的OLAP数据库系统。

2023-06-01 21:50:53

Doris 数仓 SQL

SQLAlchemy连接池与连接管理：提高数据访问效率和稳定性的关键

SQLAlchemy提供了强大的连接池和连接管理功能，可以有效地管理数据库连接，并提高应用程序的性能和可靠性。连接池和连接管理的实现原理比较复杂，但是使用起来非常简单，只需要了解一些基本概念和参数即可。

2023-06-01 07:56:48

SQLAlchemy 数据库

踩坑必看！事务隔离级别选择指南，避免数据库操作的陷阱！

在数据库中，事务隔离机制的实现基于锁机制和并发调度。其中，并发调度使用的是MVVC（多版本并发控制），通过保存修改的旧版本信息来支持并发一致性读和回滚等特性。这样可以避免不同事务之间的互相干扰，确保数据的隔离性和一致性。

2023-06-01 07:37:48

级别事务调度

墨天轮关系型分布式数据库榜单解读原创

本文分析数据源，来自墨天轮最新一期的榜单数据。分布式关系型数据库作为一种新架构基础软件，满足人们对数据在更大规模、更强算力、更高可用性上的要求。

2023-06-01 07:30:42

分析数据源关系型数据库

得物人事系统时间轴设计的演化历程

时间轴对于人事系统是重要且必要的，其将人事数据从离散变为有序，通过把各模块数据按照时间串联起来，构建成一套既可追溯企业发展历程、也支持预先规划未来发展的人事底层数据库。

2023-05-31 18:58:16

得物人事系统时间轴

游戏万能卡片—舒尔特方格游戏

通过开发这个小游戏元服务，学习到不少知识，其实我有尝试过把数据库操作类写到动态共享包里，这样元服务打包后不就更小了。

2023-05-31 15:42:06

游戏开发关系型数据库

SpringBoot使用Canal做MySQL与Redis的数据同步

mysql-bin.000003 是首次配置的，如果master节点重启了，这个文件会递增变为mysql-bin.000004，这时我们的从节点会自动连上这mysql-bin.000004。

2023-05-31 08:56:24

Spring MySQL Redis

MySQL5.7备份恢复工具—Xtrabackup实战

MySQL 备份通常分为两种类型：逻辑备份和物理备份。这两种备份方法各有优缺点，适用于不同的场景。

2023-05-31 08:54:14

MySQL 逻辑备份

Redis事件驱动(aeEventLoop)原理分析

Redis作为Server服务端在启动之后随时随刻监听着相关事件的发生。以linux为例，其处理过程与基于epoll的i/o多路复用伪代码框架基本相似，Redis源码中更多的是通过封装使其得到一个方便使用的库，库的底层包含了多种i/o多路复用实现方式。

2023-05-31 08:39:04

redis 事件驱动

从SIMD与AVX-512说起，你明白了吗？

Oceanbase也比较重视将向量化引擎引入数据库，利用SIMD来提升一些复杂分析类任务的性能。提高数据库单核计算性能，降低查询响应时间数据库来说至关重要。

2023-05-31 08:29:08

数据库 CPU 类型

玩转SQLAlchemy：掌握外键和多种类型的关系定义技巧

本文介绍了SQLAlchemy中的关系模型、外键、一对多关系和多对多关系。关系模型是ORM框架的核心，它将多个表之间的关联转化为模型对象之间的关系。

2023-05-31 08:24:20

SQLAlchemy Python

分享几个索引创建的小 Tips

由于在 A 这个二级索引中就包含了 ID 字段，所以上面这个查询是可以使用到索引排序的。此时，如果由于其他需求，我们将 A 这个索引扩展成联合索引（A、B）了，那么很明显，再执行上面的查询的时候就用不了索引排序了，只能 filesort 了。这样的问题小伙伴们在创建或者修改索引的时候很容易忽略，所以一定要仔细。

2023-05-30 11:52:11

索引冗余索引冗余索引

上一页 1 ··· 35 36 37 38 39 ··· 333 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营