直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.5w 条

数据库的存储引擎优化是一个扬长避短的过程

LSM-TREE的出现是在内存成本第一次大幅下降之后的，因此基于memtab可以大幅优化高并发写入的性能，同时SSTABLE可以更加充分的利用存储，更加有利于数据压缩。

2022-10-26 10:56:29

数据库存储引擎

一篇了解全MVCC

在RC隔离级别下，是每个快照读都会生成并获取最新的Read View，而在RR隔离级别下，则是同一个事务中的第一个快照读才会创建Read View，之后的快照读获取的都是同一个Read View。

2022-10-26 07:39:36

MVCC 数据库 RR

一次 Redis 事务使用不当引发的生产事故

现象：每天早上客服人员在后台创建客服事件时，都会创建失败。当我们重启这个微服务后，后台就可以正常创建了客服事件了。到第二天早上又会创建失败，又得重启这个微服务才行。

2022-10-25 18:00:00

Redis 事务生产事故

苹果 Safari 浏览器 16.1 新增支持通行密钥、Web 通知、Apple Pencil 悬停体验等

苹果发布了 Safari 16.1 正式版，为苹果平台上的 Safari 带来了许多新功能。Safari 16.1 直接内置于 iOS 16.1、iPadOS 16.1 和 macOS 13 Ventura 中，但也可用于 macOS Monterey 和 macOS Big Sur。

2022-10-25 13:08:07

苹果 Safari 浏览器浏览器

聊聊国产数据库TiDB相关知识，你学会了吗？

针对至少有千万行级别的大表，或者数据库schema的占空空间有T级别的数据量比较适合TiDB；如果数据存储规模少于500G且每秒查询量少或并发量小则建议使用mysql。

2022-10-25 07:24:23

数据库 TiDB mysql

温故知新-EverDB容器化之旅

EverDB的三个组件的Pod在容器拉起时，需要配置性能参数，主从信息等。EverDB配置容器运行参数时，对于复杂的配置文件信息，采用ConfigMap创建配置文件的形式实现，在Pod启动时，将其挂载到容器中，而对于一些简单的运行参数，则是通过环境变量的形式注入到容器中。

2022-10-25 07:23:45

EverDB 容器存储

[GN+Ninja学习 0x03] GN语法与操作学习

这一篇，我们来学习GN的语法和操作行为等，GN提供了扩展的内置帮助文档系统，提供每一个函数功能和内置变量的详细的参考引用。

2022-10-24 14:43:31

共享数据库过时了，应用程序数据库才是王道！译文精选

了解在架构中使用应用程序数据库和显式发布数据的原因，以及如何管理数据范围和大小的增长。

2022-10-24 14:21:09

数据库应用数据库数据管理

浅析数据库的历史，你了解了吗？

随着硬件技术、应用场景等不断的变化，最近的这些年，在不同的领域，不同的应用方向，诞生了很多不同类型的数据库。例如多模数据库（Multi-Model）、区块链数据库（Blockchain）、流式处理数据库（Streaming）等等。

2022-10-24 08:45:23

数据库应用场景区块链

Redis Cluster 原理说的头头是道，这些配置不懂就是纸上谈兵

集群中的每个节点都有一个配置文件，这个文件并不是让程序员编辑的，是我自己创建和更新的，每个节点都要使用不同的配置文件，一定要确保同一个集群中的不同节点使用的是不同的文件。

2022-10-24 08:41:52

集群配置编辑

如何写出高质量的 SQL 代码？

如果你是刚工作的小白，可千万别害羞去问别人需求。一旦你害怕去问别人，你的工作任务就会越堆越多，而你整天也会因为没有需求无所事事或者写的都是没意义的代码。

2022-10-24 08:10:21

SQL 代码业务

MySQL 连接怎么保活？

MySQL 系统变量 wait_timeout，默认值是 28800 秒（8 小时），用于控制客户端多长时间没有给 MySQL 发送请求，MySQL 就自动断开连接。

2022-10-24 08:03:04

MySQL 数据库

MySQL 啥时候用记录锁，啥时候用间隙锁？

我们做了这么多个测试，虽然有 3 种索引类型（聚簇索引、唯一二级索引、普通二级索引）和 2 种匹配类型（精确匹配、范围匹配），它们两两组合可以得出 6 种情况，再加上查询的值是否存在，可能有更多的可能性。但是我们发现它们的结构都非常类似，基本上都跟查找的记录是否存在，以及查找的记录是否是唯一的相关。

2022-10-24 08:02:14

MySQL 索引类型

MySQL 全局锁、表级锁、行级锁，你搞清楚了吗？

备份数据库的工具是 mysqldump，在使用 mysqldump 时加上 –single-transaction 参数的时候，就会在备份数据库之前先开启事务。这种方法只适用于支持「可重复读隔离级别的事务」的存储引擎。

2022-10-24 00:33:59

MySQL 全局锁行级锁

深入挖掘Elastic Search的原理

Elasticsearch 是分布式的，但是对于我们开发者来说并未过多的参与其中，我们只需启动对应数量的节点，并给它们分配相同的 cluster.name 让它们归属于同⼀个集群，创建索引的时候只需指定索引主分⽚数和副分⽚数即可，其他的都交给了 ES 内部⾃⼰去实现。

2022-10-24 00:18:41

Elasticsea 分布式数量

为什么动态链接库以"错误"的方式被卸载？

在标记为 “oops” 的行中，不能保证 B.DLL 仍在内存中，因为 B.DLL 不会出现在 A.DLL 的依赖项列表中，即使存在由对 LoadLibrary 的调用导致的运行时生成的动态依赖项。

2022-10-24 00:03:21

动态链接库 DLL

Oracle重磅发布Alloy基础设施平台和新数据库

Oracle近日在美国拉斯维加斯举行的Oracle CloudWorld大会上推出了一款用于支持本地云环境的基础设施平台，包括多个新的公有云服务、以及多项对数据库产品组合的重大更新。

2022-10-21 11:22:17

Oracle 公有云

携程酒店慢查询治理之路

随着携程酒店业务的不断扩张，再加上大量的SQLServer转MySQL项目的推进，慢查询的数量正在飞速增长，每日的报警量也居高不下，因此慢查询的治理优化已经是刻不容缓，此文主要针对MySQL。

2022-10-21 10:40:08

携程酒店 MySQL 慢查询

从 SQL Server 创建到 MySQL 的链接服务器

SQL Server 链接服务器用于查询远程数据库，在本技巧中，我们将学习如何从 SQL Server 为 MySQL 服务器配置链接服务器

2022-10-21 08:32:43

SQL Server 数据库

MongoDB原来也就这么回事！

在这篇文章中，我们讨论了如何在MongoDB中检查字段是否存在。我们使用可以使用一个基本的查询来检查一个字段是否存在。也采用了com.mongodb.client.model.Filters和Document查询方法来检查字段的存在。

2022-10-21 08:17:13

MongoDB 查询 Document

国产数据库：五款国产数据，你知道哪款？

TiDB 是由PingCAP 公司研发设计的开源分布式 HTAP (Hybrid Transactional and Analytical Processing) 数据库，它结合了传统的关系型和非关系型数据库的最佳特性。TiDB 兼容 MySQL，支持无限的水平扩展，具备强一致性和高可用等特性。

2022-10-21 07:07:33

TiDB HTAP 数据库

PostgreSQL 的并行框架

PostgreSQL 提供了一些简单的机制使得编写并行算法更加简单。你可以通过使用 ParallelContext 数据结构去唤起后台工作进程、初始化工作进程的进程状态（以匹配唤起他们的后台进程），使进程通过动态共享内存 (Dynamic Shared Memory) 进行通信和写并不复杂的逻辑且不用意识到并行的存在就可以让代码跑在用户后台进程或者任一并行的工作进程。

2022-10-20 23:15:10

PostgreSQL 算法机制

图解 | 聊聊 MyBatis 缓存

本篇分别介绍了 MyBatis 一级缓存、二级缓存、自定义缓存的原理和使用，其中还穿插了 4 道考题来验证 MyBatis 缓存的功能。不足之处是 MyBatis 缓存源码未分析。

2022-10-20 18:00:00

MyBatis 缓存类型

业务单表读写缓慢如何优化？

关系型数据库目前市面上主流无非三种：MySQL、Oracle、SqlServer，笔者更倾向于MySQL，也是很多新型企业在用的一种数据库，因此本篇文章也将重点围绕MySQL展开。

2022-10-20 09:26:24

MySQL Oracle SqlServer

关于跳表，这么解释你肯定能听懂

跳表中，每一层索引都是一个有序的单链表，单链表删除元素的时间复杂度为 O(1)，最多需要删除 LogN 个元素（索引层数为 LogN），所以删除元素的总时间包 = 查找元素的时间 + 删除 LogN 个元素的时间 = O(LogN ) + O(LogN ) = 2O(LogN )，忽略常数部分，删除元素的时间复杂度为 O(LogN)。

2022-10-20 08:51:40

跳表复杂度索引

为SQLserver增加一只透视眼，你学会了吗？

随着不断积累新的故障模型，优化知识体系，分析诊断的能力也会不断提升。随后我们会在DBAIOPS社区开展SQL SERVER的智能诊断测试工作，也希望有兴趣的朋友参与测试，并给我们反馈测试结果，用于改善知识库。

2022-10-20 07:43:46

SQLserver 故障 SQL

如何在 Oracle 中检查临时表空间

临时表空间用于 Oracle 中的排序操作。这是一个非常重要的表空间，如果管理不当，可能会出现问题。让我们看看临时表空间管理的各种查询。

2022-10-19 21:24:24

临时表空间 Oracle

系统请求1次10s，我被客户爆骂，一怒之下优化数据库提升百倍性能

那么什么时候主库写数据的压力会过大呢？其实我们之前也聊过这个问题，那就是多个业务共用一个物理数据库的，比如商品相关的表、订单相关的表和用户相关的表等，所有表都放到了一个MySQL数据库中。

2022-10-19 17:42:22

数据库 MySQL

聊一聊十个Pandas的小技巧

pandas是数据科学家必备的数据处理库，我们今天总结了10个在实际应用中肯定会用到的技巧。

2022-10-19 15:20:58

pandas 数据处理库技巧

你还不知道怎么做数据库读写分离么，用这个中间件让你性能提10倍

我们以mysql一主两从架构为例，也就是一个master节点下有两个slave节点，在这套架构下，写请求统一交给master节点处理，而读请求交给slave节点处理。

2022-10-18 23:03:53

mysql 架构 slave

数据仓库、数据集市、数据湖、数据中台到底有什么区别？都得做吗？

用了一系列时髦的新技术不见得就是数字化领军企业，不用也不见得就是古典互联网时代的落后作坊。

2022-10-18 10:10:52

JVM & MySQL时区配置问题-两行代码让我们一帮子人熬了一个通宵

通过异常数据中订单ID可以去系统中捞出这个订单从最开始处理到结束之间所有的日志（入参、处理过程中的参数等等），通过日志可以分析出发生问题的机器有哪些，确定了机器就比较有针对性了（该应用在线上有180台ECS），通过日志也可以在线下环境通过模拟回放的方式去尝试复现问题。

2022-10-18 07:30:06

MySQL JVM 日志

温故知新-你好，我是EverDB！

我的诞生正逢其时。在这个金融科技创新的时代，对数据库大并发、高频次的访问和可扩展性需求与日俱增，集中式数据库架构的限制和制约逐渐显现。为满足业务发展需求，G行科技人根据金融业务特点和分布式数据库产品特性采取了双轨并行的策略，在引入了分布式数据库产品的同时，和合作伙伴一起,共同打造自主知识产权的分布式数据库方案，于是我诞生了。

2022-10-18 07:17:31

EverDB 数据库系统

四个提升数据管道的优秀软件工程策略

现状和最佳实践总是在不断的变化之中，这既适用于软件工程，也适用于数据工程。

2022-10-17 14:54:09

基于Spring Cloud+Apache Ignite的Redis备用方案实例教程原创精选

Ignite是一个功能强大的分布式缓存框架，相比Redis更复杂、可阅资料少、学习成本高，本文旨在帮助读者快速入门。

2022-10-17 12:12:07

Redis 分布式缓存

再聊聊数据库国产化替代

实际上，如果真的去做这件事，方案选型也并不是很难的事情，也并非必须经过严格的考虑才不会出错的，有时候你考虑了良久，反而最后的选择不见得最好。而我的观点是，可能会选错数据库但是你的数据库国产化道路不会走错，你会在不断的纠偏过程中不断的完善方案。

2022-10-17 09:03:52

数据库国产化系统

CMU 15445 学习之Hash Table

哈希表是一个高效的数据结构，大多时候能够在 O(1) 的情况下插入和查询数据，在数据库系统中，有很多地方都使用到了哈希表，例如前面提到的 page table，page directory，以及执行 sql 查询时一些用于 join 的临时数据结构。

2022-10-17 08:49:47

数据磁盘管理内存

聊聊SQL中的高级日期函数

细心的同学可能发现DATEPART和DATENAME有很多相似之处，但是请注意他们返回的类型是不同的，DATEPART返回的是数值类型，DATENAME返回的是字符串类型。

2022-10-17 08:22:28

SQL 函数字符串

MySQL 8.0.31并行构建索引特性管窥

利用sysbench构建一个有400万行记录的测试表，只有一个主键索引时，表空间物理文件大小为1044381696 Bytes，添加完测试索引后，表空间物理文件大小涨到1434451968 Bytes，增加了37.35%。

2022-10-17 08:01:55

MySQL sysbench 索引

面试官问我MySQL索引失效怎么排查？懵逼了

索引为什么会失效呢？失效之后会导致什么样的后果呢？这一节，我们利用当下的问题，也就是千万级的订单表查询居然需要耗费3s的时间，通过这个问题我们来一探究竟。

2022-10-17 00:04:30

索引 SQL 订单

SQL优化实战：如何通过缓存给MySQL查询进行流量削峰？

大量请求跑到MySQL这查询数据，此时就会有大量请求密集请求数据库，然后就会导致数据库所在机器的CPU和内存占用率都飙升，最终就会导致MySQL查询效率极速降低。

2022-10-17 00:00:00

SQL MySQL 数据，

数据库已经不是最难国产化的IT基础设施了

数据库已经不算是最难国产化的IT基础设施了，甚至可以说数据库的国产化只等待企业的IT决策者的发令枪了。既然国产化替代不可避免，那么还是早点动手比较好，犹豫什么，干就行了。

2022-10-14 17:38:26

数据库 IT 基础

千万数据量下的真实业务场景SQL性能优化

SQL优化是非常重要，因为即使再好的MySQL设计架构，也扛不住一个频繁查询的垃圾SQL语句。

2022-10-14 17:24:35

MySQL SQL优化

实时推荐场景中的图形数据库用例译文精选

本文在介绍图形数据库和推荐系统的基本概念的基础上，详细讨论了图形分解技术、PageRank算法、以及协同过滤等方法，以及如何使用NebulaGraph图形数据库，去构建实时推荐系统。

2022-10-14 08:03:46

图形数据库系统

系统库-关于SQL Server Model Database探究

模型数据库被用作在实例中创建新数据库的模板。这意味着实例中新创建的数据库会继承模型数据库的选项、恢复模型、数据文件初始大小等。

2022-10-13 21:07:48

数据库 SQL Server

分库分表实战之从根上带你吃透MySQL的索引

在磁盘中，MySQL存放数据的基本单位是数据页，数据是放在数据页中的，每个数据页中都有很多的数据行。

2022-10-13 17:43:10

MySQL 存放数据

全网都在说一个错误的结论，真的错了吗？

联合索引的最左匹配原则，在遇到范围查询（如 >、<）的时候，就会停止匹配，也就是范围查询的字段可以用到联合索引，但是在范围查询字段后面的字段无法用到联合索引。注意，对于 >=、<=、BETWEEN、like 前缀匹配的范围查询，并不会停止匹配。

2022-10-13 09:43:31

MySQL 索引联合索引

企业级数据治理体系建设全面指南

我将结合企业级数据治理经验，详细介绍从0到1搭建数据治理体系全流程，帮你梳理数据治理的主要内容以及过程中会遇到的哪些坑。

2022-10-13 09:38:01

SQL常用脚本整理，你保存了吗？

使用导入导出功能进行全表复制。如果是使用【编写查询以指定要传输的数据】，那么在大数据表的复制就会有问题？因为复制到一定程度就不再动了，内存爆了？它也没有写入到表中。而使用上面3种语法直接执行是会马上刷新到数据库表中的，你刷新一下mdf文件就知道了。

2022-10-13 08:43:24

大数据语法 SQL

MySQL-CommunicationsException异常的三个典型场景及解决方法

客户端发送select语句后，服务端往客户端写大量数据，客户端需要等待超过1分钟才能继续写入，服务端就会把这种写入时超过１分钟（默认值）等待的连接直接关闭。

2022-10-13 07:35:52

数据配置 MySQL

上一页 1 ··· 33 34 35 36 37 ··· 318 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营