鸿蒙开发者社区

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考信创认证华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.7w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.7w 条

OLAP和OLTP的本质区别，一篇文章讲明白

ADS层数据本质上面向业务的，高度业务化的数据。可以认为是基于DW层分析的结果，很多情况下是指标、标签等计算结果。本书在后续内容中使用ADS名词时，如无特殊说明，均指基于DW层分析后的业务化的结果。

2023-01-03 18:32:32

OLAP OLTP 数据

sqlite wal 分析

本文将介绍 wal 原理，并源码剖析 checkpoint 过程，同时讨论下 wal 使用中的一些注意点。由于 sqlite 的复杂性，会省略掉一些细节，重点放在核心流程和 wal 并发的实现。

2023-01-03 16:43:02

sqlite wal 数据库

SQL Server居然也能调 C# 代码 ?

SQLSERVER 内嵌了 CLR，让 sqlservr 进程成了一种托管和非托管的混合环境，不知道是好事还是坏事，在我的分析旅程中这种混合环境下看过太多的堆破坏问题，但不管怎么说，托管的 C#，VB，F# 可以助 SQLSERVER 更加强大。

2023-01-03 11:22:23

C#代码 SQL Server

一分钟带你学会MySQL覆盖索引，让你的SQL更高效

在我们查询SQL时，我们不仅要考虑where条件是否匹配了索引，还要尽量考虑查询的字段是否可以通过索引直接获取，覆盖索引可以减少树的搜索次数，显著的提升SQL查询性能。

2023-01-03 08:36:34

理解Django中的数据库关系译文

处理好表关系是创建可靠数据模型的关键。

2023-01-03 08:06:00

Django 数据库模型

MySQL 查询重复数据，删除重复数据保留id最小的一条作为唯一数据

很多东西都是需要自己一步一步的去探究的，当然网上的建议也是非常宝贵的借鉴和资源，无论做什么开发我们都需要理解它的工作原理才能够更好的掌握它。

2023-01-03 07:44:53

MySQL 查询重复

MySQL8.0锁情况排查，你学会了吗？

本文将通过实验介绍MySQL8.0版锁该如何排查，以及找到阻塞的sql语句，实验的MySQL版本为8.0.26，隔离级别为RR。

2023-01-02 08:20:14

MySQL 锁数据库

再聊一下那SQL Server 行不能跨页的事

玩过 sqlserver 的朋友都知道，新一代的 sqlserver 版本已经用 varchar(max) 和 nvarchar(max) 替代了早期的 text 和 ntext，理论上这种类型最大可存储 2 的 31 次方 - 1，大概就是 2G，接下来我们像 nvarchar(max) 插入 1w 个字符，大概 20k 的数据，向上取整的话应该会用 3 个数据页来承载。

2023-01-01 13:50:42

一文简单了解并部署Zookeeper集群

Zookeeper从设计模式角度来理解，是一个基于观察者模式设计的分布式服务管理框架。是一个文件系统，负责存储和管理大家都关心的数据，然后接受观察者的注册；也是一种通知机制，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。

2022-12-31 08:36:12

部署 Zookeeper 集群

Elasticsearch查询及聚合类DSL语句宝典

如果match 查询数字，日期，布尔值或者not_analyzed 的字符串时，会精确匹配搜索值，不做分词解析；如果match 查询全文本，会对查询词做分词解析，然后搜索。

2022-12-30 09:12:55

查询 es 搜索值

SpringBoot+Mybatis-plus整合EasyExcel批量导入Excel到数据库+导出Excel

今天小编带大家一起整合一下EasyExcel，之所以用这个，是因为EasyExcel性能比较好，不会报OOM！

2022-12-29 08:49:40

SpringBoot Excel

简单实用！利用Redis轻松实现高并发全局ID生成器

无论我们需要什么格式的ID，其实只要我们把握住其中的核心：incrBy命令，根据其原子性的特性，就可以生成我们需要的全局ID。

2022-12-29 08:43:54

从Hash Join的执行计划的细节中能看到点啥

不过任何事情都是有利有弊，如果你的服务器的CPU资源十分紧张，那么过多的并行HASH JOIN可能会导致你的CPU资源经常出现不足，引发其他问题。如果存在这种情况，那么关闭并行HASH JOIN，让每个HASH JOIN变得略微慢一点，但是确保CPU资源不过载，也是一种策略。

2022-12-29 08:22:32

JOIN CPU 系统

图数据导入技术性能优化实践

图数据库已广泛应用于社交网络、精准推荐、金融风控、知识图谱等领域。数据导入功能作为大批量图数据应用的第一个且比较关键的环节，在开展图应用过程中非常重要。本文主要选取Neo4j，NebulaGraph，JanusGraph三种图数据库作为研究对象，深入对比分析各自在数据导入方面的特点，最后介绍在数据导入技术方面的解决方案。

2022-12-28 20:11:25

Redis网络模型有多强？

本文将从BIO开始介绍，经过NIO、多路复用，最终说回Redis的Reactor模型，力求详尽。本文与其他文章的不同点主要在于：

2022-12-28 14:14:04

我不认为PG的Double Buffering是更优秀的解决方案

PG消除DOUBLE BUFFERING，在技术发展上来说，是必须要做的事情，只不过因为历史欠债还是较多，这方面的改造工作量很大，需要一些时间来完成。

2022-12-28 08:41:40

PG 数据库技术

千万级数据查询：CK、ES、RediSearch 谁才是王炸？

本文从一个业务诉求触发，对“千万量级数据中查询 10W 量级的数据”介绍了不同的设计方案。

2022-12-28 08:29:12

CK ES RediSearch

使用POI把查询到的数据表数据导出到Excel中，一个表一个Sheet

把数据库里的数据导出到Excel中，一个表是一个sheet，不要一个表一个Excel。

2022-12-28 08:17:36

数据库数据导出

分库分表，可能真的要退出历史舞台了！

你可能会听到很多切到分布式数据库，又从分布式数据库切回到 MySQL 的案例，这属于想吃螃蟹但并没有吃到。目前来看，分布式数据库越来越稳定，生态建设也越来越好。而分库分表，则属于存量业务，终将会退出历史的舞台。

2022-12-27 19:07:52

分库分表数据库

美团一面：能不能通俗的解释下为什么要有意向锁这个东西？

在意向锁存在的情况下，事务 A 如果想申请行级读锁，就必须先申请该表的意向读锁，申请成功后才能继续申请某行记录的行级读锁。

2022-12-27 17:40:57

意向锁 MySQL InnoDB

为什么游戏行业喜欢用 PolarDB

游戏行业使用数据库的方式也与其他行业有较大区别, 是一种非常弱Schema 的使用方式。

2022-12-27 09:50:26

数据库方式

大型互联网系统数据库切换方案

对于系统而言，无异于换血操作，是一件相当危险的操作，那么如何平稳，或者说损失最小的情况下，将系统的数据库进行切换呢？这就是本文要分享的内容了。

2022-12-27 09:31:01

互联网系统数据库

Docker安装Canal、MySQL进行简单测试与实现Redis和MySQL缓存一致性

Canal 是用 Java 开发的基于数据库增量日志解析，提供增量数据订阅&消费的中间件。目前，Canal 主要支持了 MySQL 的 Binlog 解析，解析完成后才利用 Canal Client 来处理获得的相关数据。（数据库同步需要阿里的 Otter 中间件，基于 Canal）。

2022-12-27 08:56:28

面试官：MySQL主键为什么不是连续递增的？

在MySQL5.7之前，这个递增值是直接保存在内存里面的，当服务器重启后，MySQL会读取表里面的最大主键id，然后将最大值+1作为下次递增的值。

2022-12-27 08:39:54

MySQL 主键索引

关系型数据库设计三大范式

没有冗余的数据库未必是最好的数据库，有时为了提高运行效率，就必须降低范式标准，适当保留冗余数据。具体做法是：在概念数据模型设计时遵守第三范式，降低范式标准的工作放到物理数据模型设计时考虑。

2022-12-27 08:38:45

关系型数据库设计

Redis实战之Redisson使用技巧详解，干活！

总结下来，Jedis 把 Redis 命令封装的非常全面，Lettuce 则进一步丰富了 Api，支持 Redis 各种高级特性。

2022-12-27 07:39:28

Redis Redisson Lettuce

全链路灰度在数据库上我们是怎么做的？

当我们在探索服务治理的过程中，我们在对接其他微服务的时候，我们发现治理体系不同造成的困扰是巨大的，打通两套甚者是多套治理体系的成本也是巨大的。

2022-12-26 11:57:41

数据库治理

数据库应用需要什么样的云原生能力

和国外不同，我国的企业级应用大多数还是部署在私有云环境的，甚至还有一些像本文开头说的那家企业一样，如果为了享受云原生数据库的一些便利，还非得上一套复杂的云底座，那么就比较麻烦了。

2022-12-26 08:56:06

数据库云原生应用

聊一聊 MySQL 相关子查询

这一篇我们就来聊聊不相关子查询转换为相关子查询，以及相关子查询执行的那些事。

2022-12-26 08:13:54

子查询 MySQL

MySQL批量导入数据时，为何表空间膨胀了N倍

同事在客户现场利用DTS工具，从A实例将数据迁移到B实例过程中，发现几乎稍大点的表在迁移完成后，目标端表空间大小差不多都是源端的3倍，也就是说表空间膨胀了2倍。

2022-12-26 08:07:03

MySQL 批量数据

图文结合带你搞懂MySQL日志之Slow Query Log（慢查询日志）

慢查询日志都是使用mysqladmin flush-logs命令来删除重建的。使用时一定要注意，一旦执行了这个命令，慢查询日志都只存在新的日志文件中，如果需要旧的查询日志，就必须事先备份。

2022-12-26 00:48:38

MySQL 日志慢查询

多数据库Citus集群的维护译文

本文将介绍如何管理Citus集群的数千个数据库管理员采用的数百个数据库。本指南提供了一个完整且经过实战考验的解决方案。

2022-12-23 07:48:23

多数据库 Citus 集群

Redis实战之Lettuce使用技巧详解，真香！

Lettuce 相比老牌的 Jedis 客户端，功能更加强大，不仅解决了线程安全的问题，还支持异步和响应式编程，支持集群，Sentinel，管道和编码器等等功能。

2022-12-23 07:36:50

Redis Lettuce 技巧

搞定 Redis 数据存储原理，别只会Set、Get 了

一开始的时候，我只使用Ht_table[0] 这个散列表读写数据，Ht_table[1] 指向 NULL，当这个散列表容量不足，触发扩容操作，这时候就会创建一个更大的散列表 Ht_table[1]。

2022-12-22 08:57:29

Redis 数据存储

Redis实战之Jedis使用技巧详解

刚知道服务端的操作知识，还是远远不够的，如果想要真正在项目中得到应用，我们还需要一个 redis 的客户端，然后将其集成到项目中，让程序自动根据我们的业务需要自动处理。

2022-12-22 07:40:28

Jedis Redis 项目

InnoDB数据存储及事务两阶段提交原理解析

本文详细介绍MySQL InnoDB的数据模型、数据持久化策略、事务提交以及故障恢复原理。

2022-12-21 19:04:35

三台服务器使用Docker搭建Redis一主二从三哨兵，概念-搭建-整合Springboot

第一个就是我们本次的要搭建的，就是高可用的哨兵，主Redis挂掉，哨兵会进行投票进行故障转移！第二个就是分片集群，哨兵的一个缺点就是只能存在一个Master节点，写的效率太低。分片集群就是解决哨兵的问题，可以水平扩展，提高Redis的性能！

2022-12-21 09:50:41

微软已向企业发出警告：请尽快迁移至 Edge，明年 2 月仍依赖 IE11 的业务存在中断风险

使用 Microsoft Edge 更新来禁用 IE 的更改旨在提供更好的用户体验，并帮助组织将他们最后剩下的 IE11 用户过渡到 Microsoft Edge。提醒一下，IE11 自 2022 年 6 月 15 日起就不再接受支持”

2022-12-20 08:57:29

MySQL主从复制太慢，怎么办？

总结一下，MySQL 并行复制策略主要是有三种思想：按照库的级别粒度并行执行，用于决定分发策略的 hash 表里，key 就是数据库名。按照行级别，根据id、唯一索引、value、库名这些来计算hash值，做分组标示根据redo log 持久化原理，同一个commit组或者同时进入prepare或者commit表示可以同步执行。

2022-12-20 08:46:41

MySQL 主从复制

如何用好图数据库：TypeDB特性与优势译文精选

本文指导读者在使用图数据库时需要考虑的问题。你将了解到使用图数据库的益处、面对的挑战，以及使用数据库时需要考虑的问题。

2022-12-20 07:49:48

数据库 TypeDB 传统关系型

一文带你掌握 Redis

从官方的定义看，Redis 是一款开源的，遵守 BSD 协议，使用 C 语言开发的 key-value 存储系统。简单的说，它是一款跨平台的非关系型数据库，支持优先内存存储，并提供多种语言的 API 客户端。

2022-12-20 07:39:46

Redis BSD 协议

缓存失效了，怎么办？

在如今大数据的时代下，高并发高可用是所有软件开发都追求的目标，为了实现这一目标，缓存的使用是每一个高并发系统都会涉及到的，使用缓存可以保障系统的运行效率，提高系统的健壮性。

2022-12-19 11:31:57

缓存失效数据库

MySQL中这14个小玩意，让人眼前一亮！！！

通常情况下，我们在插入数据之前，一般会先查询一下，该数据是否存在。如果不存在，则插入数据。如果已存在，则不插入数据，而直接返回结果。

2022-12-19 08:23:24

MySQL 数据密码

Java实战：hutool-db实现多数据源配置

Hutool-db是一个在JDBC基础上封装的数据库操作工具类，通过包装，使用ActiveRecord思想操作数据库。

2022-12-19 07:21:35

Hutool-db 数据库 JDBC

你该知道的时序数据库技术

随着物联网技术的快速发展，物联网设备产生的数据呈爆炸式增长，数据的总量、数据类型越来越多、访问速度要求越来越快、对数据价值的挖掘越来越重视。物联网产生的数据通常都具备时间序列特征，时序数据库是当前针对物联网、工业互联网、应用性能监控场景等垂直领域定制的数据库解决方案，本文主要介绍物联网场景海量时序数据存储与处理的关键技术挑战及解决方案。

2022-12-18 19:38:31

时序数据库数据库

数据泄露事件频发，数据库敏感字段如何治理？

近年来，有关数据泄露相关的新闻事件屡见不鲜，不断地引发大众的讨论和担忧。各家企业都或多或少在承受相关的数据安全风险，这种可能性会给企业运行带来额外的风险，包括大众的质疑以及政府的处罚等。

2022-12-18 19:25:10

数据库数据泄露

如果查询条件没有索引字段的话，是加「行锁」还是加「表锁」？

如果 select … for update 语句的查询条件没有索引字段的话，整张表都无法进行增删改了，从这个现象看，好像是把表锁起来了，但是并不是因为上面这两个表级锁的原因。

2022-12-18 16:56:07

索引 MySQL 锁

数据泄露事件频发，数据库敏感字段如何治理？

近年来，有关数据泄露相关的新闻事件屡见不鲜，不断地引发大众的讨论和担忧。各家企业都或多或少在承受相关的数据安全风险，这种可能性会给企业运行带来额外的风险，包括大众的质疑以及政府的处罚等。

2022-12-18 08:30:53

数据泄露数据库敏感字

如何构建企业内的 TiDB 自运维体系

得物 App 从创立之初，关系型数据库一直使用的开源数据库产品 MySQL。和绝大部分互联网公司一样，随着业务高速增长、数据量逐步增多，单实例、单库、单表出现性能瓶颈和存储瓶颈。从选型和架构设计角度来看这很符合发展规律，一开始没必要引入过于复杂的架构导致资源成本和开发成本过高，而是逐步随着业务发展速度去迭代架构。

2022-12-16 18:37:37

浅谈大数据背景下数据库安全保障体系

在大数据背景下，数据库的安全保障管理更加复杂，为了能够更好地适应数据库管理要求，相关人员要充分发挥大数据技术优势。

2022-12-16 09:39:43

数据库大数据

上一页 1 ··· 52 53 54 55 56 ··· 341 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营