直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.5w 条

四个提升数据管道的优秀软件工程策略

现状和最佳实践总是在不断的变化之中，这既适用于软件工程，也适用于数据工程。

2022-10-17 14:54:09

基于Spring Cloud+Apache Ignite的Redis备用方案实例教程原创精选

Ignite是一个功能强大的分布式缓存框架，相比Redis更复杂、可阅资料少、学习成本高，本文旨在帮助读者快速入门。

2022-10-17 12:12:07

Redis 分布式缓存

再聊聊数据库国产化替代

实际上，如果真的去做这件事，方案选型也并不是很难的事情，也并非必须经过严格的考虑才不会出错的，有时候你考虑了良久，反而最后的选择不见得最好。而我的观点是，可能会选错数据库但是你的数据库国产化道路不会走错，你会在不断的纠偏过程中不断的完善方案。

2022-10-17 09:03:52

数据库国产化系统

CMU 15445 学习之Hash Table

哈希表是一个高效的数据结构，大多时候能够在 O(1) 的情况下插入和查询数据，在数据库系统中，有很多地方都使用到了哈希表，例如前面提到的 page table，page directory，以及执行 sql 查询时一些用于 join 的临时数据结构。

2022-10-17 08:49:47

数据磁盘管理内存

聊聊SQL中的高级日期函数

细心的同学可能发现DATEPART和DATENAME有很多相似之处，但是请注意他们返回的类型是不同的，DATEPART返回的是数值类型，DATENAME返回的是字符串类型。

2022-10-17 08:22:28

SQL 函数字符串

MySQL 8.0.31并行构建索引特性管窥

利用sysbench构建一个有400万行记录的测试表，只有一个主键索引时，表空间物理文件大小为1044381696 Bytes，添加完测试索引后，表空间物理文件大小涨到1434451968 Bytes，增加了37.35%。

2022-10-17 08:01:55

MySQL sysbench 索引

面试官问我MySQL索引失效怎么排查？懵逼了

索引为什么会失效呢？失效之后会导致什么样的后果呢？这一节，我们利用当下的问题，也就是千万级的订单表查询居然需要耗费3s的时间，通过这个问题我们来一探究竟。

2022-10-17 00:04:30

索引 SQL 订单

SQL优化实战：如何通过缓存给MySQL查询进行流量削峰？

大量请求跑到MySQL这查询数据，此时就会有大量请求密集请求数据库，然后就会导致数据库所在机器的CPU和内存占用率都飙升，最终就会导致MySQL查询效率极速降低。

2022-10-17 00:00:00

SQL MySQL 数据，

数据库已经不是最难国产化的IT基础设施了

数据库已经不算是最难国产化的IT基础设施了，甚至可以说数据库的国产化只等待企业的IT决策者的发令枪了。既然国产化替代不可避免，那么还是早点动手比较好，犹豫什么，干就行了。

2022-10-14 17:38:26

数据库 IT 基础

千万数据量下的真实业务场景SQL性能优化

SQL优化是非常重要，因为即使再好的MySQL设计架构，也扛不住一个频繁查询的垃圾SQL语句。

2022-10-14 17:24:35

MySQL SQL优化

实时推荐场景中的图形数据库用例译文精选

本文在介绍图形数据库和推荐系统的基本概念的基础上，详细讨论了图形分解技术、PageRank算法、以及协同过滤等方法，以及如何使用NebulaGraph图形数据库，去构建实时推荐系统。

2022-10-14 08:03:46

图形数据库系统

系统库-关于SQL Server Model Database探究

模型数据库被用作在实例中创建新数据库的模板。这意味着实例中新创建的数据库会继承模型数据库的选项、恢复模型、数据文件初始大小等。

2022-10-13 21:07:48

数据库 SQL Server

分库分表实战之从根上带你吃透MySQL的索引

在磁盘中，MySQL存放数据的基本单位是数据页，数据是放在数据页中的，每个数据页中都有很多的数据行。

2022-10-13 17:43:10

MySQL 存放数据

全网都在说一个错误的结论，真的错了吗？

联合索引的最左匹配原则，在遇到范围查询（如 >、<）的时候，就会停止匹配，也就是范围查询的字段可以用到联合索引，但是在范围查询字段后面的字段无法用到联合索引。注意，对于 >=、<=、BETWEEN、like 前缀匹配的范围查询，并不会停止匹配。

2022-10-13 09:43:31

MySQL 索引联合索引

企业级数据治理体系建设全面指南

我将结合企业级数据治理经验，详细介绍从0到1搭建数据治理体系全流程，帮你梳理数据治理的主要内容以及过程中会遇到的哪些坑。

2022-10-13 09:38:01

SQL常用脚本整理，你保存了吗？

使用导入导出功能进行全表复制。如果是使用【编写查询以指定要传输的数据】，那么在大数据表的复制就会有问题？因为复制到一定程度就不再动了，内存爆了？它也没有写入到表中。而使用上面3种语法直接执行是会马上刷新到数据库表中的，你刷新一下mdf文件就知道了。

2022-10-13 08:43:24

大数据语法 SQL

MySQL-CommunicationsException异常的三个典型场景及解决方法

客户端发送select语句后，服务端往客户端写大量数据，客户端需要等待超过1分钟才能继续写入，服务端就会把这种写入时超过１分钟（默认值）等待的连接直接关闭。

2022-10-13 07:35:52

数据配置 MySQL

十分钟教你写一个数据库

Calcite 是一个用于优化异构数据源的查询处理的可插拔基础框架（他是一个框架），可以将任意数据（Any data, Anywhere）DML 转换成基于 SQL 的 DML 引擎，并且我们可以选择性的使用它的部分功能。

2022-10-12 23:02:49

Calcite 异构数据框架

深入MySQL查询过程底层原理，我找到了MySQL查询慢的根本原因

其实说白了，就是随着数据表中的数据量，变得越来越大，导致磁盘IO发生的次数也相应变多了，如果我们能把磁盘IO的次数降到常数级别，那么查询速度是非常快的，所以，后边的优化都是以降低磁盘IO次数为目标。

2022-10-12 17:42:54

MySQL 数据表磁盘

使用 PostgreSQL 建立你的数据库

PostgreSQL 是最灵活的数据库之一，并且它是开源的。

2022-10-12 13:33:25

PostgreSQL 数据库

一个数据库故障的表象与机理，你明白了吗？

大部分情况下，我们仅仅是从表象入手，问题暂时不重现就算搞定了。而如果分析这个问题的人缺少对数据库机理的深入理解，是很难从这些表象中发现深层次的问题的。而且实际上，在运维体系中，一线工程师也不可能放置如此高水平的DBA的。

2022-10-12 08:47:55

数据库故障事件

图文结合带你搞定MySQL日志之Undo log(回滚日志)

Undo Log:数据库事务开始之前，会将要修改的记录放到Undo日志里，当事务回滚时或者数据库崩溃时，可以利用UndoLog撤销未提交事务对数据库产生的影响。

2022-10-12 08:01:08

MySQL 日志数据库

MQ-消息堆积-一条SQL阻塞了整个服务线程案例分析

对参数是null的情况进行过滤，不再向Oracle发送这样的SQL语句；同时日志里对这种异常情况进行记录，以便更细致地分析数据为null的产生场景。加强应用可观测性之线程执行耗时监控。

2022-10-12 07:38:24

SQL 语句异常

分库分表实战之流量激增带来的技术挑战

对于数据库中的订单表而言，如果按照一天2万个订单数据量计算，一年也就七八百万的订单量，还是可以轻松hold住的。

2022-10-11 17:51:49

分库分表数据库

Flowable 任务如何认领，回退？

小伙伴们看到，UserTask 中的 flowable:candidateUsers="javaboy,zhangsan,lisi" 就表示这个 UserTask 由 javaboy、zhangsan 和 lisi 三个用户处理，用户名之间用 , 隔开。

2022-10-11 10:47:04

UserTask SQL 查询

搜索引擎之Elastic Search的高级使用

索引别名就像⼀个快捷⽅式或是软连接，可以指向⼀个或多个索引，也可以给任意⼀个需要索引名的API来使⽤。别名的应⽤为程序提供了极⼤地灵活性。

2022-10-11 09:27:45

搜索引擎 es 索引

MySQL监控方式五花八门，这种最朴素的反而真香！

今天介绍一下完全采用 MySQL 自有方式采集获取监控数据，在单体下达到最快速、方便、损耗最小。

2022-10-11 09:00:18

MySQL 监控数据

分库分表实战之订单业务完整梳理

如果你刚入职了这家初创型互联网公司，而你所在的部门又刚好是做外卖APP的订单系统的，那你认为入职之后要干的第一件事是什么呢？

2022-10-10 17:37:59

分库分表订单业务

毫秒间查询千亿级Trace数据，SkyWalking上链路追踪这么强？

SkyWalking的这次实践，截止到现在有一年多的时间，回顾总结一下这段历程中的些许积累和收获。

2022-10-10 09:17:43

聊聊 MySQL 8.0 数据字典表

本文我们就来聊聊 MySQL 8.0 中的数据字典表。

2022-10-10 08:01:08

MySQL 字典表

基于订单系统的分库分表实战，让应用飞起来

基于外卖订单业务，儒猿技术团队开发了一个外卖订单项目，通过该项目逐步分析随着订单数据量逐步增加，系统将遇到什么问题。

2022-10-09 18:14:31

订单系统分库分表

堪称一站式管理平台，同时支持Linux、MySQL、Redis、MongoDB可视化管理！

最近发现一款好用的可视化管理工具mayfly-go，可以通过Web的形式进行Linux系统管理，同时支持MySQL、Redis、MongoDB等数据库的管理，功能非常强大！今天就给大家介绍下这款工具，希望对大家有所帮助！

2022-10-09 09:42:19

可视化管理工具 mayfly-go

CMU 15445 学习之Storage Manager

cpu 寄存器和高速缓存（L1、L2、L3），以及内存是常见的易失性存储，容量小速度快，但是掉电之后无法恢复，不能持久化保存数据。

2022-10-09 08:53:06

存储容量 SSD

聊一聊SQL自定义排序

你有遇到过这样的场景吗？按指定的顺序输出结果，比如按“北京，天津，上海，重庆……”这样的顺序。

2022-10-09 08:35:06

SQL 自定义排序

数据库的等待事件分析接口其实比我们想象的更丰富

今天我就以Oracle、SQL SERVER、openGauss、Polardb四个数据库为例，分析一下这些数据库的等待事件接口的特点，以及如何使用这些接口来进行系统诊断。谈起他数据库之前，我们先来看看等待事件分析的鼻祖Oracle提供了哪些等待事件。

2022-10-08 08:16:32

数据库 Oracle 数据

深入浅出MGR，你明白了吗？

所有表都必须要有主键。同上，能创建没有主键的表，但无法写入数据，在利用Clone构建新节点时也会报错。尽量不要使用大事务，默认地，事务超过150MB会报错，最大可支持2GB的事务（在GreatSQL未来的版本中，会增加对大事务的支持，提高大事务上限，但依然不建议运行大事务）。

2022-10-08 08:09:13

MGR GreatSQL 事务

超实用 Demo：使用 FastAPI、Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流

今天分享一份代码，使用 Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流，你可以修改 task.py 来实现你自己的异步任务。

2022-10-08 07:55:33

Demo MongoDB 异步

面试官问我ES读写数据的过程，结果你能猜到吗？

对 es 基本就是个黑盒，你还能干啥？你唯一能干的就是用 es 的 api 读写数据了。要是出点什么问题，你啥都不知道，那还能指望你什么呢？

2022-10-08 00:08:00

api ES Facebook

我们一起聊聊 SQLServer 的Latch

SQLSERVER中并无此类机制，因此对于一些重度访问的内存结构，设计了LATCH来保护，而其他的一些数据结构，使用spinlock。在SQLSERVER中，总是使用spinlock来保护那些访问十分快速的内存结构。

2022-10-08 00:00:05

SQL 机制结构

从头完成一个 Restful API 服务

着重说下 AdminUser 类，定义了一个静态方法 init_user，是用来后面初始化数据库的，我们需要把这个鉴权用户手动添加到数据库中。方法 verify_password 用于后面 API 的鉴权，如果数据库存在该用户且密码的哈希值相同，则鉴权通过。

2022-10-08 00:00:00

AdminUser 数据库鉴权

CMU 15445 学习之Advanced SQL

DML 是数据操作，例如增删改查数据，DDL 是数据定义，例如新建一个表，增加一个索引等。此外还包含其他的一些操作，例如视图、事务等。

2022-10-08 00:00:00

我们聊聊CMU 15445之1 Relational Model

让我们先忘记 MySQL、PostgreSQL、Oracle 这些知名的数据库系统，来看看如果是我们自己设计一个数据库系统，应该怎么做，需要考虑和权衡哪些因素。

2022-09-30 11:08:44

MySQL PostgreSQL Oracle

系统库-SQL Server MSDB探究

在本文中，我们论述了 Msdb 数据库的一些重要特性。我们看到备份恢复相关信息以及 SQL Server 代理作业、维护计划和日志传送相关信息都存储在 msdb 中。

2022-09-29 19:37:09

SQL Server 数据库

值得关注的MySQL高可用方案

高可用是数据库永恒的话题，高可用方案也是最受数据库爱好者关注的重点技术之一。在MySQL二十多年的发展历程中，针对MySQL的高可用方案百花齐放，各具特色，这也是这款开源数据库最能让人着迷的地方。例如，早些年著名的MMM、MHA等等。

2022-09-29 15:24:15

MySQL 数据库高可用

秒换存储引擎，又多了一种架构方案？精选

今天聊了聊TiDB体系结构的宏观设计原则，希望大家有收获。

2022-09-29 12:09:40

MySQL TiDB 数据库

Mybatis Plus批量插入数据到MySQL中

SQL语句的长度受MySQL服务端的max_allowed_packet参数限制，默认为1M，如果拼接的字符串过长则会报错。可以进来减少批量提交的记录，或者是调整max_allowed_packet参数的大小。

2022-09-29 10:06:56

SQL MySQL 服务端

实时数仓、湖仓一体、流批一体，它们都在说什么

IT 行业瞬息万变，各种新的技术和新的词汇令人无所适从，但是万变不离其宗，抓住业务场景来去理解业务的痛点，进而才能有效把握新技术的卖点。

2022-09-29 09:22:33

万亿级数据秒级实时分析，小红书OLAP引擎的进化之路

在实时体系构建在Flink+Doris整体框架后，实现了数据服务统一化，大大简化了实时数据处理链路。

2022-09-29 09:08:15

Navicat使用指南

最近使用了DataGrip一段时间，发现它并不适合我，因为我平时不仅仅要写代码，也要负责数据仓库的建设和数据库管理的一些工作。

2022-09-29 09:07:08

DataGrip 数据仓库数据库

SQL高效查询建议，你学会了吗？

为什么别人的查询只要几秒，而你的查询语句少则十多秒，多则十几分钟甚至几个小时？今天我们来看看如何写出比较高效的查询语句。

2022-09-29 08:32:14

查询语句 OR

上一页 1 ··· 34 35 36 37 38 ··· 319 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营