鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

企业级数据治理体系建设全面指南

我将结合企业级数据治理经验，详细介绍从0到1搭建数据治理体系全流程，帮你梳理数据治理的主要内容以及过程中会遇到的哪些坑。

2022-10-13 09:38:01

SQL常用脚本整理，你保存了吗？

使用导入导出功能进行全表复制。如果是使用【编写查询以指定要传输的数据】，那么在大数据表的复制就会有问题？因为复制到一定程度就不再动了，内存爆了？它也没有写入到表中。而使用上面3种语法直接执行是会马上刷新到数据库表中的，你刷新一下mdf文件就知道了。

2022-10-13 08:43:24

大数据语法 SQL

MySQL-CommunicationsException异常的三个典型场景及解决方法

客户端发送select语句后，服务端往客户端写大量数据，客户端需要等待超过1分钟才能继续写入，服务端就会把这种写入时超过１分钟（默认值）等待的连接直接关闭。

2022-10-13 07:35:52

数据配置 MySQL

十分钟教你写一个数据库

Calcite 是一个用于优化异构数据源的查询处理的可插拔基础框架（他是一个框架），可以将任意数据（Any data, Anywhere）DML 转换成基于 SQL 的 DML 引擎，并且我们可以选择性的使用它的部分功能。

2022-10-12 23:02:49

Calcite 异构数据框架

深入MySQL查询过程底层原理，我找到了MySQL查询慢的根本原因

其实说白了，就是随着数据表中的数据量，变得越来越大，导致磁盘IO发生的次数也相应变多了，如果我们能把磁盘IO的次数降到常数级别，那么查询速度是非常快的，所以，后边的优化都是以降低磁盘IO次数为目标。

2022-10-12 17:42:54

MySQL 数据表磁盘

使用 PostgreSQL 建立你的数据库

PostgreSQL 是最灵活的数据库之一，并且它是开源的。

2022-10-12 13:33:25

PostgreSQL 数据库

一个数据库故障的表象与机理，你明白了吗？

大部分情况下，我们仅仅是从表象入手，问题暂时不重现就算搞定了。而如果分析这个问题的人缺少对数据库机理的深入理解，是很难从这些表象中发现深层次的问题的。而且实际上，在运维体系中，一线工程师也不可能放置如此高水平的DBA的。

2022-10-12 08:47:55

数据库故障事件

图文结合带你搞定MySQL日志之Undo log(回滚日志)

Undo Log:数据库事务开始之前，会将要修改的记录放到Undo日志里，当事务回滚时或者数据库崩溃时，可以利用UndoLog撤销未提交事务对数据库产生的影响。

2022-10-12 08:01:08

MySQL 日志数据库

MQ-消息堆积-一条SQL阻塞了整个服务线程案例分析

对参数是null的情况进行过滤，不再向Oracle发送这样的SQL语句；同时日志里对这种异常情况进行记录，以便更细致地分析数据为null的产生场景。加强应用可观测性之线程执行耗时监控。

2022-10-12 07:38:24

SQL 语句异常

分库分表实战之流量激增带来的技术挑战

对于数据库中的订单表而言，如果按照一天2万个订单数据量计算，一年也就七八百万的订单量，还是可以轻松hold住的。

2022-10-11 17:51:49

分库分表数据库

Flowable 任务如何认领，回退？

小伙伴们看到，UserTask 中的 flowable:candidateUsers="javaboy,zhangsan,lisi" 就表示这个 UserTask 由 javaboy、zhangsan 和 lisi 三个用户处理，用户名之间用 , 隔开。

2022-10-11 10:47:04

UserTask SQL 查询

搜索引擎之Elastic Search的高级使用

索引别名就像⼀个快捷⽅式或是软连接，可以指向⼀个或多个索引，也可以给任意⼀个需要索引名的API来使⽤。别名的应⽤为程序提供了极⼤地灵活性。

2022-10-11 09:27:45

搜索引擎 es 索引

MySQL监控方式五花八门，这种最朴素的反而真香！

今天介绍一下完全采用 MySQL 自有方式采集获取监控数据，在单体下达到最快速、方便、损耗最小。

2022-10-11 09:00:18

MySQL 监控数据

分库分表实战之订单业务完整梳理

如果你刚入职了这家初创型互联网公司，而你所在的部门又刚好是做外卖APP的订单系统的，那你认为入职之后要干的第一件事是什么呢？

2022-10-10 17:37:59

分库分表订单业务

毫秒间查询千亿级Trace数据，SkyWalking上链路追踪这么强？

SkyWalking的这次实践，截止到现在有一年多的时间，回顾总结一下这段历程中的些许积累和收获。

2022-10-10 09:17:43

聊聊 MySQL 8.0 数据字典表

本文我们就来聊聊 MySQL 8.0 中的数据字典表。

2022-10-10 08:01:08

MySQL 字典表

基于订单系统的分库分表实战，让应用飞起来

基于外卖订单业务，儒猿技术团队开发了一个外卖订单项目，通过该项目逐步分析随着订单数据量逐步增加，系统将遇到什么问题。

2022-10-09 18:14:31

订单系统分库分表

堪称一站式管理平台，同时支持Linux、MySQL、Redis、MongoDB可视化管理！

最近发现一款好用的可视化管理工具mayfly-go，可以通过Web的形式进行Linux系统管理，同时支持MySQL、Redis、MongoDB等数据库的管理，功能非常强大！今天就给大家介绍下这款工具，希望对大家有所帮助！

2022-10-09 09:42:19

可视化管理工具 mayfly-go

CMU 15445 学习之Storage Manager

cpu 寄存器和高速缓存（L1、L2、L3），以及内存是常见的易失性存储，容量小速度快，但是掉电之后无法恢复，不能持久化保存数据。

2022-10-09 08:53:06

存储容量 SSD

聊一聊SQL自定义排序

你有遇到过这样的场景吗？按指定的顺序输出结果，比如按“北京，天津，上海，重庆……”这样的顺序。

2022-10-09 08:35:06

SQL 自定义排序

数据库的等待事件分析接口其实比我们想象的更丰富

今天我就以Oracle、SQL SERVER、openGauss、Polardb四个数据库为例，分析一下这些数据库的等待事件接口的特点，以及如何使用这些接口来进行系统诊断。谈起他数据库之前，我们先来看看等待事件分析的鼻祖Oracle提供了哪些等待事件。

2022-10-08 08:16:32

数据库 Oracle 数据

深入浅出MGR，你明白了吗？

所有表都必须要有主键。同上，能创建没有主键的表，但无法写入数据，在利用Clone构建新节点时也会报错。尽量不要使用大事务，默认地，事务超过150MB会报错，最大可支持2GB的事务（在GreatSQL未来的版本中，会增加对大事务的支持，提高大事务上限，但依然不建议运行大事务）。

2022-10-08 08:09:13

MGR GreatSQL 事务

超实用 Demo：使用 FastAPI、Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流

今天分享一份代码，使用 Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流，你可以修改 task.py 来实现你自己的异步任务。

2022-10-08 07:55:33

Demo MongoDB 异步

面试官问我ES读写数据的过程，结果你能猜到吗？

对 es 基本就是个黑盒，你还能干啥？你唯一能干的就是用 es 的 api 读写数据了。要是出点什么问题，你啥都不知道，那还能指望你什么呢？

2022-10-08 00:08:00

api ES Facebook

我们一起聊聊 SQLServer 的Latch

SQLSERVER中并无此类机制，因此对于一些重度访问的内存结构，设计了LATCH来保护，而其他的一些数据结构，使用spinlock。在SQLSERVER中，总是使用spinlock来保护那些访问十分快速的内存结构。

2022-10-08 00:00:05

SQL 机制结构

从头完成一个 Restful API 服务

着重说下 AdminUser 类，定义了一个静态方法 init_user，是用来后面初始化数据库的，我们需要把这个鉴权用户手动添加到数据库中。方法 verify_password 用于后面 API 的鉴权，如果数据库存在该用户且密码的哈希值相同，则鉴权通过。

2022-10-08 00:00:00

AdminUser 数据库鉴权

CMU 15445 学习之Advanced SQL

DML 是数据操作，例如增删改查数据，DDL 是数据定义，例如新建一个表，增加一个索引等。此外还包含其他的一些操作，例如视图、事务等。

2022-10-08 00:00:00

我们聊聊CMU 15445之1 Relational Model

让我们先忘记 MySQL、PostgreSQL、Oracle 这些知名的数据库系统，来看看如果是我们自己设计一个数据库系统，应该怎么做，需要考虑和权衡哪些因素。

2022-09-30 11:08:44

MySQL PostgreSQL Oracle

系统库-SQL Server MSDB探究

在本文中，我们论述了 Msdb 数据库的一些重要特性。我们看到备份恢复相关信息以及 SQL Server 代理作业、维护计划和日志传送相关信息都存储在 msdb 中。

2022-09-29 19:37:09

SQL Server 数据库

值得关注的MySQL高可用方案

高可用是数据库永恒的话题，高可用方案也是最受数据库爱好者关注的重点技术之一。在MySQL二十多年的发展历程中，针对MySQL的高可用方案百花齐放，各具特色，这也是这款开源数据库最能让人着迷的地方。例如，早些年著名的MMM、MHA等等。

2022-09-29 15:24:15

MySQL 数据库高可用

秒换存储引擎，又多了一种架构方案？精选

今天聊了聊TiDB体系结构的宏观设计原则，希望大家有收获。

2022-09-29 12:09:40

MySQL TiDB 数据库

Mybatis Plus批量插入数据到MySQL中

SQL语句的长度受MySQL服务端的max_allowed_packet参数限制，默认为1M，如果拼接的字符串过长则会报错。可以进来减少批量提交的记录，或者是调整max_allowed_packet参数的大小。

2022-09-29 10:06:56

SQL MySQL 服务端

实时数仓、湖仓一体、流批一体，它们都在说什么

IT 行业瞬息万变，各种新的技术和新的词汇令人无所适从，但是万变不离其宗，抓住业务场景来去理解业务的痛点，进而才能有效把握新技术的卖点。

2022-09-29 09:22:33

万亿级数据秒级实时分析，小红书OLAP引擎的进化之路

在实时体系构建在Flink+Doris整体框架后，实现了数据服务统一化，大大简化了实时数据处理链路。

2022-09-29 09:08:15

Navicat使用指南

最近使用了DataGrip一段时间，发现它并不适合我，因为我平时不仅仅要写代码，也要负责数据仓库的建设和数据库管理的一些工作。

2022-09-29 09:07:08

DataGrip 数据仓库数据库

SQL高效查询建议，你学会了吗？

为什么别人的查询只要几秒，而你的查询语句少则十多秒，多则十几分钟甚至几个小时？今天我们来看看如何写出比较高效的查询语句。

2022-09-29 08:32:14

查询语句 OR

Spring Boot 加一个注解，轻松实现 Redis 分布式锁

使用 Redis 作为分布式锁，将锁的状态放到 Redis 统一维护，解决集群中单机 JVM 信息不互通的问题，规定操作顺序，保护用户的数据正确。

2022-09-29 08:28:57

Spring Redis 分布式

建立DBAIOPS社区的高效互动机制

数据库运维工具是十分丰富的，种类繁多，功能与侧重点也不同，可以满足不同用户的需求。两个运维工具可能满足了用户的不同的运维场景需求，因此并不存在某个工具好或者不好的问题，只是对于某个客户是否适用而已。

2022-09-29 08:19:24

数据库运维 D-SMART

面试官提问：什么是前缀索引？

本文主要围绕前缀索引做了一次初步的知识讲解，具体数据库表索引的选择性，还需要结合业务实际需求来考虑！

2022-09-29 07:30:57

数据库索引字段

Flowable 流程实例的挂起（暂停）与激活

执行的 SQL 中我们可以清晰的看到，操作的表是 ACT_RE_PROCDEF，修改的字段就是 SUSPENSION_STATE_，将该字段的值修改为 2（乐观锁相关的 REV_ 字段不考虑）。

2022-09-28 21:24:33

PingCAP 的客户成功新范式：自主开源+持续引领+面向未来原创

在日前举办的 PingCAP 用户峰会上，PingCAP 创始人兼 CEO 刘奇介绍了 PingCAP 助力客户成功的新范式，借助“自主开源 + 持续引领 + 面向未来”持续服务于客户成功。

2022-09-28 09:21:15

PingCAP TiDB HTAP

万字干货，分布式数据库 HBase 中文入门指南

Hbase 是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。HBase 的原型是谷歌的分布式存储系统 BigTable，是谷歌 BigTable 的开源实现。

2022-09-28 09:12:16

HBase 分布式数据库数据库

MongoDB 系列 - ObjectId() 是如何实现的 “千万级” 分布式唯一 ID？

本文从理论到实践，实现了一个自定义的 UniqueId()，这是一个最简化的 MongoDB ObjectId() 实现，代码量也不多，感兴趣的可以自己实现一遍，加深理解。

2022-09-28 07:58:06

MongoDB 分布式 ID

因为查询没有命中索引，数据库直接被查崩了

在我们创建表的时候，适当的索引能够加快我们的查询速度，不适当的索引，反而对我们的表，有害而无益。你学会了么？

2022-09-28 07:31:59

索引数据库查询

系统库-SQL Server Master探究

Master数据库包含有关 SQL Server 系统的所有信息，包括有关初始化的信息、配置设置、与实例相关的元数据、有关所有其他数据库的信息，例如数据库文件的位置等。

2022-09-27 21:22:02

SQL Server 数据库

如何查询已经执行过的流程信息？

一个流程中的每一个节点都是一个活动，当一个流程执行结束的时候，如果我们还想查看每一个活动执行的细节，就得通过查询历史活动来实现了。

2022-09-27 19:40:09

查询流程信息

Oracle Database 23c 十小新特性速览，你知道几个？

在23c之前的版本，如果针对 Schema 对其他用户进行授权，需要通过系统权限或对象权限分别显示的授予，这对数据库带来了额外的安全风险或复杂性。

2022-09-27 10:41:44

Schema 数据库 Oracle

慢查询 MySQL 定位优化技巧，从10s优化到300ms

我们可以用force index强制指定索引，然后去分析执行计划看看哪个索引是更好的，因为查询优化器选择索引不一定是百分百准确的，具体情况可以根据实际场景分析来确定是否使用查询优化器选择的索引。

2022-09-27 08:40:44

慢查询 MySQL 定位优化

从0.742秒到0.006秒，MySQL百万数据深分页优化实战

本文将分四个方案讨论如何优化MySQL百万数据的深分页问题。

2022-09-26 09:41:25

MySQL 数据库

百亿级数据分库分表后怎么分页查询？

数据量很大时，可以禁止跳页查询，只提供下一页的查询方法，比如APP或者小程序中的下拉刷新，这是一种业务折中的方案，但是却能极大的降低业务复杂度。

2022-09-26 08:28:22

分库分表数据

上一页 1 ··· 40 41 42 43 44 ··· 325 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营