鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

6.6K Star！比 Pandas 快很多的数据处理库

Python实现的Rust crate被称为 py-polars ，以区别于Rust crate包 polars 本身。

2022-07-07 10:46:51

一款深受用户欢迎的HTAP数据库，PingCAP做对了什么？原创

在有了正确的PMF，开源和云的快速增长引擎之后，TiDB真正的帮助了用户实现了商业价值的快速实现，这也是PingCAP获得客户肯定，上榜Gartner® Peer Insights™“Voice of the Customer” 报告的原因。

2022-07-07 10:09:32

分库分表实战：竿头日上—千万级数据优化之读写分离

大量下单的用户会不断刷新订单来查询订单的信息，比如看一下订单是否开始配送，此时大量的请求会打到了MySQL上去，此时单库又抗不了这么读请求，就导致了数据库负载很高，从而严重降低了MySQL的查询效率。

2022-07-07 09:33:06

MySQL 查询数据优化

一篇带给你Redis中Bitmap的妙用

Redis从2.2.0版本开始新增了setbit,getbit,bitcount等几个bitmap相关命令。虽然是新命令，但是并没有新增新的数据类型，因为setbit等命令只不过是在set上的扩展。

2022-07-07 08:02:49

No.2时序数据库随笔 - IoTDB核心技术剖析原创

Gartner指出赋能边缘是2020年十大战略技术趋势之一，5G加速IoT领域的发展，物联网设备数据的收集，存储和计算需求与日俱增。Apache IoTDB是物联网时序数据收集、存储、管理与分析为一体的的软件系统。Apache IoTDB作为Apache的2020新晋顶级项目，以其出色的表现得到了Apache的认可！

2022-07-06 15:50:04

No.1-时序数据库随笔 - 时序数据库综述原创

《时序数据库随笔系列》文章会涉及时序数据库发展趋势和现状分享，同时会深入剖析现有时序数据库产品，涉及到 OpenTSDB，InfluxDB，Apache IoTDB等主流时序数据库的设计原理和优劣的剖析。

2022-07-06 15:41:55

面试官：为什么 Redis 要有哨兵？

Redis 在 2.8 版本以后提供的哨兵（Sentinel）机制，它的作用是实现主从节点故障转移。它会监测主节点是否存活，如果发现主节点挂了，它就会选举一个从节点切换为主节点，并且把新主节点的相关信息通知给从节点和客户端。

2022-07-06 13:48:24

Redis Sentinel 机制

火了十年，两万字聊聊数据湖的发展史

数据湖是目前比较热的一个概念，许多企业都在构建或者计划构建自己的数据湖。

2022-07-06 10:56:51

数据湖架构

卓越工程实践之—前端高质量单测原创精选

在我们的项目中，用issue来管理用户需求。用户每发现一个问题都可以到我们指定仓库中去提issue，新增的issue触发机器人在钉钉群里艾特对应修改人，修复后机器人通知创建人。

2022-07-06 08:34:17

前端单测项目

Undo 日志用什么存储结构支持无锁并发写入？

本文我们就来聊聊 undo 日志的存储结构，它是怎么写入 undo 日志文件的，以及事务二阶段提交过程中和它有关的操作。

2022-07-06 08:02:51

undo 日志数据库

面试问了分布式锁，你会答吗？

在数据库中创建一个锁表，并且在需要的字段上创建唯一索引，使用锁的时候就插入数据，插入成功则获得锁，执行结束后，就删除数据。也可以加上version控制，使之成为乐观锁。

2022-07-06 08:01:05

数据库分布式锁

Apache Doris刚“毕业”：为什么应关注这种SQL数据仓库？译文

Doris原名Palo，诞生于中国互联网搜索巨头百度，是其广告业务的数据仓库系统，2017 年开源，2018年进入Apache 孵化器。

2022-07-06 08:00:00

数据仓库 SQL Doris

面试突击：MySQL 中如何去重？

在 MySQL 中，最常见的去重方法有两个：使用 distinct 或使用 group by，那它们有什么区别呢？接下来我们一起来看。

2022-07-06 07:35:19

MySQL关于查找模式对象的语句

在日常工作中，搜索特定的数据库对象，是最常见的一个工作，下面分享几个关于mysql模式查找的语句。

2022-07-06 05:59:40

数据库 mysql

抽丝剥茧—千万级数据之SQL优化

索引为什么会失效呢？失效之后会导致什么样的后果呢？这一节，我们利用当下的问题，也就是千万级的订单表查询居然需要耗费3s的时间，通过这个问题我们来一探究竟。

2022-07-05 21:31:21

索引 SQL 分库分表

Redis 6 中的多线程是如何实现的！

事实上 Redis 也确实这么干了，在 6.0 以后的版本里，开始支持了多线程。我们今天就来领略一下 Redis 的多线程是如何实现的。

2022-07-05 14:49:25

Redis 6 多线程多线程

MySQL 死锁了，怎么办？

间隙锁本质上是用于阻止其他事务在该间隙内插入新记录，而自身事务是允许在该间隙内插入数据的。也就是说间隙锁的应用场景包括并发读取、并发更新、并发删除和并发插入。

2022-07-05 11:48:47

MySQL 死锁表锁

SQL查询优化实战：900W+数据，从17s到300ms

查询条件放到子查询中，子查询只查主键ID，然后使用子查询中确定的主键关联查询其他的属性字段。

2022-07-05 10:50:31

数据库查询实战

PostgreSQL超越MySQL

MySQL 依然是最受欢迎的的数据库。但在专业开发者群体中，PostgreSQL（46.48%）已经超越 MySQL（45.68%）夺得了第一名。

2022-07-05 10:06:55

PostgreSQL MySQL 数据库

Flink SQL 知其所以然：Window TopN 操作

今天我们来学习 Flink SQL 中的 Window TopN 操作。

2022-07-05 09:03:05

Redis 内存优化神技，小内存保存大数据

我们应该从 Redis 是如何保存数据的原理展开，分析键值对的存储结构和原理。从而继续延展出每种数据类型底层的数据结构，针对不同场景使用更恰当的数据结构和编码实现更少的内存占用。

2022-07-05 08:41:03

Redis 保存大数据

分库分表实战：小试牛刀—千万级数据之SQL优化

在sql优化这个例子中，这个问题是由DBA同学发现的，然后DBA同学将问题反馈给了我们，实际在工作中呢，也可能是产品同学发现订单信息查询页面有点慢，然后将问题反馈给我们。

2022-07-04 23:24:28

sql 优化监控

海量数据冷热分离方案与实践原创精选

随着财经支付业务的快速发展，考虑到未来订单量持续增长，在线存储遇到更大的挑战，需提前做好规划。目前财经支付主要业务都是使用 mysql（InnoDB）作为数据存储，因历史订单信息访问频率低并占用了大量数据库存储空间，期望将历史数据跟生产最新交易数据进行分离。

2022-07-04 15:03:24

财经支付数据库存储

谈一谈数据中台的原罪

数据中台的确有很大的价值，但也隐含着不少风险，我们以前谈其优点多了，缺点谈少了，这不是实事求是的作风，更可怕的是，也许我们自己并不知道这些风险的存在。

2022-07-04 10:51:27

数据中台数据仓库

七月数据库排行榜：MongoDB 和 Oracle 分数下降最多

上月分数上涨的 Oracle、PostgreSQL 和 MongoDB 在这个月同时出现了下滑，尤其是 Oracle 和 MongoDB，不过和去年同期相比，MySQL 和 SQL Server 的分数却是下降最多。

2022-07-04 09:06:47

数据库 Oracle MongoDB

数亿数据MySQL撑不住，无缝迁移到MongoDB后稳得一批！

合理选择分片键和建立索引，会使你的查询速度更快，这个要具体场景具体分析。

2022-07-04 09:01:50

数据库迁移

Kotlin、JUnit5、Database Rider数据库动态测试实践

由于项目基于Kotlin语言，又用到了JUnit5动态测试特性，以及Database Rider数据库测试框架，特此作一分享，方便需要的同学围观和参考。

2022-07-04 05:59:18

Kotlin JUnit5 数据库

MySQL主键自增值为什么有“空洞”?

本文在测试 insert、insert ignore、replace into 三种数据插入方式的时候，发现插入数据的时候在表内存在带有“唯一特性”的值重复的情况下三种语句的处理方式。最终发现了MySQL主键自增值“空洞”了

2022-07-03 22:00:49

MySQL 自增值数据

分库分表实战：寻根问底—MySQL索引是如何形成的？

正确的使用索引，我们就能有效的把磁盘IO的次数降到常数级，这样查询速度将会变得非常快，接下来让我们深入了解下MySQL的索引。

2022-07-03 19:01:19

磁盘 IO MySQL

分库分表实战：追根溯源—一次查询会经过哪些流程呢？

MYSQL InnoDB存储引擎中，有一块内存区域叫做Buffer Pool，也叫做缓冲池，一般情况，MYSQL的数据都存放在磁盘中，如果你去查询数据，数据就会从磁盘加载到MYSQL内存中，也就是放在缓冲池Buffer Pool中。

2022-07-03 10:21:19

MYSQL 存储缓冲池

数据湖治理：优势、挑战和入门

数据治理的配套数据管理学科包括数据质量、元数据管理和数据安全，所有这些因素都会影响数据湖治理及其挑战。

2022-07-03 07:50:57

数据治理数据湖数据仓库

MySQL数据库中查找最常用的数据类型

今天给大家分享几个关于MySQL数据类型的查询，下面，我们一起来看。

2022-07-03 06:10:15

MySQL 数据库

Redis 的内存淘汰策略和过期删除策略，你别再搞混了！

Redis 是可以对 key 设置过期时间的，因此需要有相应的机制将已过期的键值对删除，而做这个工作的就是过期键值删除策略。

2022-07-01 14:20:49

Redis 策略函数

分库分表实战：幸福的烦恼—流量大爆发啦！

对于数据库中的订单表而言，如果按照一天2万个订单数据量计算，一年也就七八百万的订单量，还是可以轻松hold住的。

2022-07-01 10:37:18

分库分表数据库

横空出世的 Data Fabric，是下一个风口吗？原创精选

Fabric这个词的本意是“织物、布、构造“。可以想象，数据将在纵横交错的、像织物那样的云网络中自由流动，没有任何限制。不管是哪种计算模式，还是什么的网络，针对批数据、流数据都可以自由交换、共享和处理，那就是数据经纬-Data Fabric带来的新体验。目前对Data Fabric，还没有特别统一的认识，各家对其有着自己的解读。

2022-07-01 07:30:58

Data Fabri 数据经纬

云数据建模：为数据仓库设计数据库

数据建模人员在设计数据仓库和数据集市时必须掌握一些新技巧。尽管其中包含的一些建议可能与您感到舒适的内容相反，但请保持开放的心态。

2022-06-30 18:17:00

数据集云数据建模计数据仓库

分库分表实战：最初的我们—了解一下单库外卖订单系统

如果你刚入职了这家初创型互联网公司，而你所在的部门又刚好是做外卖APP的订单系统的，那你认为入职之后要干的第一件事是什么呢？

2022-06-30 14:07:10

分库分表系统

Group By 有哪些注意事项？你知道吗？

SQL 语句编写一定要遵循此先后顺序：select、from、where、group by、having、order by、limit。其中 having 或 group by 都可单独使用，并且在 MySQL 5.7.5 之后，group by 和 having 可以使用别名查询，但 where 不能使用别名。

2022-06-30 13:41:44

SQL 语句 group by

字节云数据库未来方向的探索与实践原创精选

字节云数据库架构的特点是支持三个分离，一是存储与计算的分离，二是日志和数据的分离，三是缓存与计算的分离。

2022-06-30 10:56:18

字节云数据库存储

Tubes响应性数据系统的设计与原理

本文详细介绍了响应性数据系统在 Tubes 中的运用，以及响应性数据系统的三种不同设计与原理。

2022-06-30 10:00:28

2022上半年盘点：20+主流数据库重大更新及技术要点汇总

在云数据库领域，云原生数据库成为焦点，各厂商已从传统数据库托管类产品的竞争，过渡到自有云原生数据库产品的较量，承载规模、弹性能力、极致性价比等成为了发展要点。

2022-06-30 09:47:39

数据库技术盘点

流批一体在京东的探索与实践

提到流批一体，不得不提传统的大数据平台 —— Lambda 架构。它能够有效地支撑离线和实时的数据开发需求，但它流和批两条数据链路割裂所导致的高开发维护成本以及数据口径不一致是无法忽视的缺陷。

2022-06-30 09:30:36

FlinkSQL 流批一体京东

谈谈你对NoSQL的理解

随着互联网的发展，NoSQL数据库的产生就是为了解决超大规模和高并发系统中多重数据种类带来的挑战，特别是大数据应用的难题。目前具有代表性的NoSQL数据库有Redis、HBase、ES、MongoDB等等。

2022-06-30 09:10:33

NoSQL HBase Redis

SQL中常用的四个排序函数，你知道几个？

今天就给大家介绍四个你不怎么常用排序函数，他们就是SQL Server排序中经常用到的ROW_NUMBER()，RANK()，DENSE_RANK()，NTILE()这四个好兄弟。

2022-06-30 08:31:54

排序函数 SQL SQL

Redisson 高性能 Redis 分布式锁源码分析

锁的续期是在 org.redisson.RedissonLock#tryAcquireAsync方法中调用 scheduleExpirationRenewal实现的。续期需要注意的是，看门狗是设置在主线程的延迟队列的线程中。

2022-06-30 08:04:16

Redis 分布式锁 Redisson

为什么MySQL的count()方法这么慢？

mysql用count方法查全表数据，在不同的存储引擎里实现不同，myisam有专门字段记录全表的行数，直接读这个字段就好了。而innodb则需要一行行去算。

2022-06-30 08:01:53

mysql myisam count

解决MySQL幻读的终极指南译文

本文将介绍MySQL开发人员如何解决幻读可能导致的“写偏”。

2022-06-30 08:00:00

MySQL 关系数据库开发

联合搜索：搜索中的所有需求

对于这种类型的搜索，所有内容都必须在同一个索引中。这允许搜索管理数据并获得更好的结果。

2022-06-30 07:45:29

搜索联合搜索索引

分库分表实战：一叶知秋—图览分库分表外卖订单项目

本节主要对整个外卖订单系统的背景、系统演进的过程、单库版本的系统架构和分库分表版本的系统架构，做了一个简单的介绍，后续就会围绕单库版本的订单系统来进行一步一步的优化，最终优化成分库分表版本的系统架构。

2022-06-30 07:34:46

分库分表外卖订单系统

面试突击：说一下MySQL事务隔离级别？

MySQL 中有 4 种事务隔离级别：读未提交（存在脏读/不可重复读/幻读问题）、读已提交（存在不可重复读/幻读问题）、可重复读（存在幻读问题）和序列化，其中可重复读是 MySQL 默认的事务隔离级别。

2022-06-29 11:01:05

MySQL 事务隔离级别

上一页 1 ··· 49 50 51 52 53 ··· 327 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营