开源基础软件社区

AISummit人工智能大会

MetaCon元宇宙大会

公众号矩阵

移动端

免费课程课程排行直播课软考学堂

精品班厂商认证 IT技术 2022年软考 PMP项目管理

在线学习企业服务

CTO训练营技术经理研习营 LeaTech峰会

文章资源问答开源课堂专栏直播

51CTO

开源基础软件社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

开源基础软件社区订阅号

51CTO学堂APP

51CTO学堂企业版APP

开源基础软件社区视频号

数据库

1.3w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.3w 条

Oracle Database 23c 十小新特性速览，你知道几个？

在23c之前的版本，如果针对 Schema 对其他用户进行授权，需要通过系统权限或对象权限分别显示的授予，这对数据库带来了额外的安全风险或复杂性。

2022-09-27 10:41:44

Schema 数据库 Oracle

慢查询 MySQL 定位优化技巧，从10s优化到300ms

我们可以用force index强制指定索引，然后去分析执行计划看看哪个索引是更好的，因为查询优化器选择索引不一定是百分百准确的，具体情况可以根据实际场景分析来确定是否使用查询优化器选择的索引。

2022-09-27 08:40:44

慢查询 MySQL 定位优化

从0.742秒到0.006秒，MySQL百万数据深分页优化实战

本文将分四个方案讨论如何优化MySQL百万数据的深分页问题。

2022-09-26 09:41:25

MySQL 数据库

百亿级数据分库分表后怎么分页查询？

数据量很大时，可以禁止跳页查询，只提供下一页的查询方法，比如APP或者小程序中的下拉刷新，这是一种业务折中的方案，但是却能极大的降低业务复杂度。

2022-09-26 08:28:22

分库分表数据

原来Advanced Format HDD已经普及了

硬件发展虽然没有我们想象的那么快，只不过DBA的硬件知识更新的太慢了。以至于现代硬件数年前就已经研究的很清楚的问题，我们今天才去关注。如果不是那个Oracle的BUG，我可能还停留在HDD 512扇区的惯性里。这种知识的学习，什么时候是个头啊，选择DBA这个职业，真的得保持一颗学习的心。

2022-09-26 08:09:11

DBA 硬件 Oracle

16. 数据一致性、安全性保障 | 深入浅出MGR

对于MGR这样的"分布式"系统而言，需要在多个节点间保障事务的一致性，无论各个节点状态正常，或者个别节点处于故障修复状态，都要能保证各个节点的事务数据最终一致。所谓的最终一致性是指当所有写事务请求都停止后，各个节点上的事务数据是一致的。

2022-09-26 08:01:02

数据节点系统

为什么代理架构常作为缓存实现方案

本文主要走查了Redis的集群模式的故障发现、故障转移流程。由于Redis集群模式中存在过高的通信成本。集群代理模式也常常作为自建缓存集群的方案。

2022-09-26 00:04:32

Redis 故障模式

用 Pandas 处理结构不佳的 Excel 文件

本文将讨论如何使用pandas和openpyxl来读取这些类型的Excel文件，并干净地将数据转换为适合进一步分析的DataFrame。

2022-09-26 00:00:02

Pandas Excel 文件

Flowable 流程部署与删除

其实当我们使用了 Spring Boot 之后，默认情况下流程是会自动部署的，基本上不需要我们额外做什么事情。不过这些操作里还是有不少细节，今天松哥就来带大家一起来梳理一下。

2022-09-24 13:29:42

Spring 操作 SQL

几种常用关系型数据库架构和实现原理

几种常用关系型数据库架构和实现原理

2022-09-24 09:05:16

关系型数据库架构

PingCAP 用户峰会：开启数据敏捷新时代，共创企业级数据服务平台

在当前数字化转型加速、经济形势快速变化下，应对不确定性的挑战成为企业重要课题，尤其对于数据驱动的企业来说，正面临着来自数据架构的严峻挑战。PingCAP 创始人兼 CEO 刘奇在大会上表示，分布式数据库是一个高度复杂的系统，和云的结合使得复杂性进一步提升。分布式数据库能否生存下去，取决于能否掌控复杂性。TiDB 分而治之的开放式架构能够管理复杂性，因此能够成为更多用户的选择。

2022-09-23 14:16:29

PingCAP TiDB 分布式数据库

MySQL Binlog 组提交实现

为了保证事务的持久性和原子性，事务提交完成前，其日志（WAL）必须持久化。

2022-09-23 13:24:21

MySQL 数据库

数据仓库的下一阶段该是什么？

如何让公司数据能够快速和业务融合起来成为了广大数据从业者和数据服务厂家一直以来思考的问题。

2022-09-23 09:31:45

那些年我们经常唠嗑的SQL优化

把对数据库的读写操作分到不同的数据库服务上，以实现数据库的高性能和高并发能力；读写分离最大的弊端就是复制延迟，对于以查询为主的项目比较合适，看项目进行取舍。

2022-09-23 08:16:55

数据库高并发项目

聊聊时序数据库

随着工业互联网的发展，以及物联网技术与应用的发展，时序数据库变得越来越热了。时序数据库是一种特殊的数据库管理系统，针对时间序列数据的处理进行了优化，每条记录都有时间戳。时序数据可能由物联网中的传感器、智能仪表或 RFID 产生，也可以由电网运行的各个采集点中产生，也可以从股票交易记录中产生。

2022-09-23 07:44:48

时序数据库物联网

如何正确恢复SQL Server的Master系统库

本文介绍可能需要恢复Master数据库的情况以及如何正确完成这些步骤。

2022-09-22 22:51:32

Master 数据库

如何正确恢复SQL Server的Master系统库

本文介绍了Master库在实例能正常启动和不能正常启动，两种情况下的恢复方法。

2022-09-22 19:09:11

SQL Server 数据库

领先公司利用图驱动的数字孪生管理互连的复杂系统

图数据平台Neo4jⓇ宣布对用于数字孪生图技术的需求急剧增加。企业正在利用图技术构建大规模数字孪生，从而能够统一来自不同来源的数据、提供丰富的分析，并支持对关键资产的近实时监控。

2022-09-22 17:10:24

图数据 Neo4j

OpenHarmony设备开发（四）-WIFI_AP开发

本文章主要讲轻量化系统的WIFI的AP连接，即是打开WIFI的热点。本文适用于OpenHarmony3.1的轻量化系统设备.

2022-09-22 15:23:40

设备开发鸿蒙

数据库日检不仅是一项工作，更是一种能力

对于金融、证券、运营商、互联网企业来说，日检是发现系统中存在比较急迫的隐患的一种最常用的技术手段。而中长期的问题发现往往可以通过优化和月度/季度巡检来实现。

2022-09-22 07:50:12

数据库运营商日检

来个查漏补缺！关于 Redis 都在这一篇里了

Redis拥有优秀的性能，数据是存储在内存中，读写速度非常快，可支持并发10W QPS。

2022-09-21 16:25:17

学习 MySQL 必知的 28 个小技巧

随着信息技术的不断发展以及互联网行业的高速增长，作为开源数据库的MySQL得到了广泛的应用和发展。目前MySQL已成为关系型数据库领域中非常重要的一员。

2022-09-21 15:11:28

MySQL 数据库技巧

ClickHouse 挺快，esProc SPL 更快

CH 计算某些简单场景（比如单表遍历）确实很快，和 SPL 的性能差不多。但是，高性能计算不能只看简单情况快不快，还要权衡各种场景。

2022-09-21 10:43:57

ClickHouse esProc SPL 数据库

数据库选型规划上，很多人第一步就做错了……

数据库是上接企业应用，下连IT基础设施的关键性IT组件，其选型的影响上到应用开发，下到云平台，所以不得不慎重。

2022-09-21 09:09:49

数据库选型

美团三面：一直追问我， MySQL 幻读被彻底解决了吗？

MySQL 可重复读隔离级别并没有彻底解决幻读，只是很大程度上避免了幻读现象的发生。

2022-09-21 09:00:10

MySQL 幻读隔离级别

MySQL中dd::columns表结构转Table过程以及应用

实际上更改表结构如果通过alter命令来改流程跟上面也是一样的，也是通过更新dd表来实现表结构的变更，这里只是从更底层来介绍。

2022-09-21 08:03:45

MySQL table 表结构

聊聊数据库勒索病毒的防范

勒索病毒问题在全世界十分泛滥，我国的数据库中勒索病毒虽然也不少，但是还不算重灾区。中病毒的大多数都是中小企业，数据库管理水平比较低，备份，容灾等措施也十分不到位。

2022-09-21 07:30:12

数据库勒索病毒企业

四种 Python 连接 MySQL 数据库的方法

mysqlclient包是用于MySQL的最流行的Python包之一。它包含MySQLdb模块，一个提供Python数据库API的MySQL接口。

2022-09-20 19:37:08

读懂HikariCP一百行代码，多线程就是个孙子！

HikariCP是SpringBoot默认的数据库连接池，它毫不谦虚的的起了一个叫做光的名字，这让国产Druid很没面子。

2022-09-20 19:11:40

HikariCP Spring 数据库

SQL Server 备份和还原的如何使网络驱动器

在本文中，我们将展示如何查看其他驱动器以便使用 SSMS 进行备份恢复。

2022-09-20 18:29:29

SQL Server 数据库

如何在PostgreSQL中存储文本译文精选

在本文中，我将介绍在PostgreSQL中存储长文本的各种方法，如Lob、text和长VARCHAR数据库表的列。另外，我将简单说明Hibernate 5和6在存储长文本数据方面的区别。

2022-09-20 14:46:17

PostgreSQL 存储工具

千万级用户ms级抽奖N名设计方案

在用户关注直播间在写入MySQL关注用户表时，再往Redis增加一个userlist Set，存储用户编号。可保证用户全局唯一（避免用户反复的取消和关注影响数据记录），且数据基于Hash乱序存储，取出的直接就是随机值。

2022-09-20 14:37:43

ms级抽奖 MySQL

有了这四款脚本工具，老板再也不怕我写烂SQL了

今天和大家分享几个mysql 优化的工具，你可以使用它们对你的mysql进行一个体检，生成awr报告，让你从整体上把握你的数据库的性能情况。

2022-09-20 14:30:24

脚本工具 SQL 数据库

详谈 MySQL 8.0 原子 DDL 原理

MySQL 8.0 推出新特性 - 原子 DDL，DDL 是指数据定义语言（Data Definition Language），负责数据结构的定义与数据对象的定义。

2022-09-20 10:44:06

MySQL 8.0 数据库 DDL

五大主流方案对比：MySQL千亿级数据线上平滑扩容实战

线上数据库，为了保障其高可用，一般每台主库会配置一台从库，主库负责读写，从库负责读取。

2022-09-19 16:22:43

数据库方案

12张图、6个故事，终于有人把图数据库的原理讲明白了

你知道图数据库（图计算）作为前沿技术近年来发展迅猛的关键是什么吗？其实，其伟大之处在于它并不是一个全新的事物，而是人类在追求科学与技术发展的探索中对图思维方式的一次伟大复兴。

2022-09-19 09:41:45

数据库思维

从PG15 WAL压缩优化说起，你明白了吗？

对于仅有PK的场景影响并不大，对于PG来说，第一次数据写入，都是创建的新块，不同的算法之间的影响还不算太大。但是对于其他场景影响较大。

2022-09-19 09:03:08

命令压缩优化

使用查询分离后从20s优化到500ms

本篇文章介绍了表数据量大查询缓慢的一种解决方案：查询分离，但这也不是银弹，仍然是存在一些不足，比如表数据量大，写入缓慢怎么办？

2022-09-19 08:41:02

数据查询分离

深入了解redis分布式锁

本篇文件我们来介绍如何Redis实现分布式锁的演进过程，以及为什么不能直接用Setnx实现分布式锁。

2022-09-19 08:17:09

Redis 分布式锁

实现一个简单的Database1，你会了吗？

为了弄清楚这些，我从头写了一个数据库。它是模仿SQLite实现的，因为SQLite设计小巧，并且相比于MySQL和PostgreSQL，它的功能相对要少很多，所以我希望能更容易的理解它。在实现上，整个数据库都存储在一个数据文件中。

2022-09-19 08:01:45

数据库 SQLite PostgreSQL

安装数据库很痛苦？试试这个SQL在线编辑器，省掉你的安装烦恼

为什么好用呢？它能满足你写SQL代码练习测试的根本需求，而且还支持手机端使用哦。下面给大家介绍一下这个在线编辑器的一些功能。

2022-09-19 07:06:03

SQL 代码编辑器

关系型数据库存储多维指标数据

关系型数据库会有一个特殊的约定：数据模式是相对固定的。业务不发生变化的情况下，数据模式不会轻易发生变化。

2022-09-16 11:33:24

数据库关系

别再问了，数据库与缓存一致性问题今天全整齐活了！

今天跟大家一起深入探索缓存的工作机制和缓存一致性应对方案。

2022-09-16 09:46:42

缓存数据库

SQL养成这些好习惯是一笔财富

我们做软件开发的，大部分人都离不开跟数据库打交道，特别是erp开发的，跟数据库打交道更是频繁，存储过程动不动就是上千行，如果数据量大，人员流动大，那么我么还能保证下一段时间系统还能流畅的运行吗？我么还能保证下一个人能看懂我么的存储过程吗？那么我结合公司平时的培训和平时个人工作经验和大家分享一下，希望对大家有帮助。

2022-09-16 00:32:39

SQL 数据库习惯

MySQL客户端对配置文件的读取顺序

我们都知道使用 mysql 客户端去访问 MySQL 数据库时,会以一定的顺序去读取不同位置的配置文件,但在一次做测试时,发现除了按照顺序读取默认的配置文件路径外,mysql 还有额外的读取配置文件的行为,以下是在我本地测试环境做测试时遇到的一个有意思的小知识点。

2022-09-15 16:48:30

MySQL 数据库测试

7.2K Star！把数据库的每一行都监控到的强大数据流平台

一些数据库提供了 API 或者框架来进行监控，但是没有一个统一的标准，因此每个数据库的方法都不同。

2022-09-15 15:34:48

数据库开源

长文捋明白 Spring 事务！隔离性？传播性？一网打尽！

数据库事务是指作为单个逻辑工作单元执行的一系列操作，这些操作要么一起成功，要么一起失败，是一个不可分割的工作单元。

2022-09-15 10:47:19

数据库事务工作单元

如何保障 MySQL 和 Redis 的数据一致性？

在满足实时性的条件下，MySQL 和 Redis 不存在两者完全保存一致的方案，只有最终一致性方案。

2022-09-15 10:37:46

MySQL Redis 数据一致性

攻破主流数仓缺陷，字节跳动基于Doris的湖仓分析探索实践

在数仓业务中，随着业务对数据实时性的要求越来越高，T+1数仓业务逐渐往小时级、分钟级，甚至秒级演进。

2022-09-15 09:32:42

数据仓处理

数据异构就该这样做，yyds~

根据数据异构的定义，将数据异地构建存储，我们可以应用的地方就非常多，文中说的分库分表之后按照其它维度来查询的时候，我们想脱离DB直接用缓存比如redis来抗量的时候。数据异构这种方式都能够很好的帮助我们来解决诸如此类的问题。

2022-09-15 08:41:16

数据异构分库分表

1 2 3 4 5 6 ··· 266 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客开源基础软件社区

教育

51CTO学堂精培企业培训 CTO训练营