鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

从Sysstat到Metric：数据库可观测性的巨大进步

目前已经有一些数据库产品开始提供这方面的可观测性接口了，虽然接口还不够完善，提供的数据也没有Oracle丰富，起码已经看到我们的国产数据库厂商也已经关注到了这方的用户需求了。

2023-09-01 08:31:07

数据库 Sysstat Metric

浅谈数据库透明加密（TDE）

透明数据加密（TDE）是一种数据库端存储加密技术，全称为Transparent Data Encryption。这种技术对应用系统完全透明，通常由数据库厂商在数据库引擎中实现。在数据库引擎的存储管理层中增加一个数据处理过程，当数据由数据库共享内存写入到数据文件时对其进行加密，而当数据由数据文件读取到数据库共享内存时则对其进行解密。

2023-09-01 07:30:59

数据库透明加密系统

外卖骑手一面，也很不容易！

今天就分享一个重点在数据结构考察比较多的美团Java后端面经，从常见的数据结构->Java 集合>MySQL B+树->Redis 数据结构。所以，这是一场比较重基础的后端面试，问题也比较多，面试时长超过 1 小时了，还挺艰难的。

2023-08-31 22:17:15

Java MySQL B+树

如何避免系统预读失效和缓存污染的问题？

MySQL 的数据是存储在磁盘里的，为了提升数据库的读写性能，Innodb 存储引擎设计了一个缓冲池（Buffer Pool），Buffer Pool 属于内存空间里的数据。

2023-08-31 13:36:00

系统预读失效

Linux安装Redis详细教程

Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。Redis不仅仅支持简单的Key-value类型的数据，同时还提供List，Set，Zset，Hash等数据结构的存储。Redis支持数据的备份，即Master-slave模式的数据备份。

2023-08-31 08:56:24

详解 canal 同步 MySQL 增量数据到 ES

canal 是一个非常有趣的开源项目，很多公司使用 canal 构建数据传输服务( Data Transmission Service ，简称 DTS ) 。推荐大家阅读这个开源项目，你可以从中学习到网络编程、多线程模型、高性能队列 Disruptor、流程模型抽象等。

2023-08-31 08:32:52

canal 开源项目

使用 SQL 的方式查询消息队列数据以及踩坑指南

Pulsar-SQL 是一个非常有用的功能，只是我们使用过程中确实发现了一些问题，大部分都已经修复了；希望对后续使用该功能的朋友有所帮助。

2023-08-31 08:10:18

Pulsar-SQL 关系型数据库

兄弟，王者荣耀的段位排行榜是通过Redis实现的？

Redis是一款高性能的内存数据库，提供了丰富的数据结构和命令，非常适合实现计数器功能。在Redis中，我们可以使用字符串数据类型以及相关的命令来实现计数器。

2023-08-31 07:53:56

Redis 内存数据库

解读 IDC MarketScape 报告， Akamai 被评为全球公有云 IaaS 竞争者的成长之路！

Akamai被纳入了这份两年来首个面向全球公有云 IaaS 的 IDC MarketScape报告中，展示了Akamai的云计算服务的实力，它建立在Akamai遍及全世界的分布式边缘计算网络之上。

2023-08-30 10:24:46

公有云报告

为何向量数据库对LLM很重要？译文

大语言模型（LLM）目前在人工智能界唱主角。有必要了解为何向量数据库对LLM很重要。

2023-08-30 09:00:00

向量数据库大语言模型

MySQL Shell 8.0.32 for GreatSQL编译安装

折腾完这些，是不是感觉还是有点麻烦？没关系，我已经把这些工作都封装到docker镜像中了，包括Dockerfile以及自动编译脚本。下面简单介绍下怎么用。

2023-08-30 08:01:28

MySQL GreatSQL docker

PawSQL新功能精选，你都知道吗？

PawSQL Cloud，在线自动化SQL优化工具，支持SQL审查，智能查询重写、基于代价的索引推荐，适用于数据库管理员及数据应用开发人员。

2023-08-30 07:39:16

PawSQL 数据库

聊聊SQL中的递归查询

迭代公式是 UNION ALL 下面的查询语句。在查询语句中调用中CTE，而查询语句就是CTE的组成部分，即 “自己调用自己”，这就是递归的真谛所在。

2023-08-29 09:46:12

一文搞懂二叉搜索树、B树、B+树、AVL树、红黑树

我们假设B+树一个节点可以有100个关键字，那么3层的B树可以容纳大概1000000多个关键字（100+101100+101101*100）。而红黑树要存储这么多至少要20层。所以使用B树相对于红黑树和AVL可以减少IO操作

2023-08-29 08:31:13

B+树数据索引

面试提问：Redis 为什么这么快？

一般的，当我们插入数据的时候，数组的长度不会很长，但是当我们在不断的往内部插入数据的过程中，就会扩容，比如我们扩容是N倍，这个时候就会涉及到我们原有数据元素的移动，而这个过程，我们流称之为 ReHash 了。

2023-08-29 07:46:08

Redis 数据 ReHash

【NestJS系列】连接数据库及优雅地处理响应

TypeORM 是一个ORM框架，它可以运行在 NodeJS、Browser、Cordova、PhoneGap、Ionic、React Native、Expo 和 Electron 平台上，可以与 TypeScript 和 JavaScript一起使用。

2023-08-29 07:35:15

数据库 TypeORM NodeJS

dba+开源工具：自动修复MySQL主从同步复制的报错数据

总的来说，自动修复主从同步数据工具能够提高效率、降低风险、实时监控和响应、自动化运维以及快速故障恢复，可以极大地提升同步运行的稳定性和可靠性。

2023-08-29 07:22:06

MySQL 数据工具故障恢复

在MySQL中用UUID当主键，被组长给喷了！

由于 UUID 是由 MAC 地址、时间戳、随机数等信息生成的，因此 UUID 具有极高的唯一性，可以说是几乎不可能重复，但是在实际实现过程中，UUID有多种实现版本，他们的唯一性指标也不尽相同。

2023-08-28 12:07:06

Myloader导入更快吗？并没有......

在MySQL 8.0/GreatSQL 8.0.32中，采用myloader导入数据就不再是最优方案了，推荐采用GreatSQL的并行load data，或者MySQL Shell的util.loadDump/util.importTable导入，其本质也是采用并行的思路，导入效率更高，额外的binlog和内存开销也更小。

2023-08-28 08:24:07

myloader MySQL GreatSQL

从分布式数据库需要不需要备机谈起

分布式数据库自身具有高可用机制，比如Oceanbase在一些金融行业应用时是采用5副本机制的，一种典型的配置是2副本在主机房，2副本在备机房，第五副本在第三机房。

2023-08-27 22:33:04

数据库机制 Oceanbase

放弃数据库，改用Kafka！译文精选

本篇文章为诸君提供了一种“跳出框框”的记录系统的新玩法——为什么组织需要以不同的方式思考数据存储、使用 Kafka 作为记录系统的好处以及有哪些好的实现思路等，希望对诸君有所启发。

2023-08-27 21:51:50

Kafka 数据库数据存储

架构师必读：揭秘Redis五大数据类型及超实用应用场景！

String（字符串）类型是 Redis 最简单的数据类型之一，它不仅可以存储字符串，还可以存储整数和浮点数。在实际应用中，String 可以用来存储用户信息、计数器、缓存等。

2023-08-27 21:22:02

Redis 数据类

分布式事务数据库架构设计

随着互联网应用和大数据的快速发展，分布式系统的需求越来越迫切。在分布式系统中，数据存储和事务处理成为关键的挑战。为了确保数据的一致性和可靠性，设计一个高效的分布式事务数据库架构是至关重要的。

2023-08-27 16:11:35

数据库分布式事务数据库

聊聊分库分表的四种方案

MyBatis Sharding：MyBatis Sharding是一个基于MyBatis的分库分表中间件。它通过拦截SQL语句并重写为分片后的SQL，实现了自动分库分表的功能。

2023-08-26 20:08:15

分库分表 Spring

为海量文档自建专用 “网盘”，试过都说 “真香”

目前市面上有很多基于 SaaS 的 EDMS 解决方案，但为了完全控制自己的数据，我们也可以借助开源 EDMS 软件部署自己专用的文档管理系统。本文将介绍如何在 Linode 平台上，借助 PostgreSQL 数据库部署高可用的 Mayan EDMS。

2023-08-25 09:57:40

数据库方案

Oracle RMAN备份恢复实战：应对数据丢失的巨大挑战！

本文将介绍Oracle RMAN备份恢复的实战技巧，帮助您应对数据丢失的挑战，并确保数据库的安全性和可用性。

2023-08-25 09:39:38

数据库 Oracle

高并发下 MySQL Statement Cancellation Timer 的线程数暴涨

线上业务高峰期 CPU 飙升，抓取 thread dump 发现 MySQL Statement Cancellation Timer 的线程数比较多，接收到线上预警，分析一下原因。

2023-08-25 08:06:20

CPU MySQL 线程

实践中的MongoDB：数据建模和查询优化的技巧

通过合理的数据模型设计、索引选择和查询优化技巧，可以提高MongoDB系统的性能、可扩展性和稳定性。同时，定期监测和调整系统，保持系统的高效运行和持续优化。

2023-08-24 09:44:16

数据库性能

学习gorm系列：创建数据库连接

通过gorm建立数据库连接的时候，要依赖于具体连接哪种数据库，所以gorm项目下提供了多种数据库的驱动。这些数据库驱动遵守gorm提供的接口类型Dailector来创建连接。

2023-08-24 08:47:38

数据库 gorm 项目

简化部署过程，赶快尝试 Akamai Linode Marketplace 中全新上架的群集部署

集群部署自动为所有集群的复制和客户端 / 服务器连接配置 TLS 加密，确保每个部署的默认安全级别。

2023-08-23 09:00:00

五分钟技术趣谈 | 数据库之互联网常用架构方案一览及应用场景浅析

本文通过列举出当下互联网领域常见的数据库架构方案，结合数据库架构的设计原则，对各个方案场景初步浅析，帮助大家知晓各方案优劣及适用场景；并结合实践经验，给出各个方案后续典型的演化方向，供大家作为今后数据库架构选型参照。

2023-08-23 07:27:25

数据库互联网

分布式数据库架构：高可用、高性能的数据存储

在现代信息时代，数据是企业发展的核心。为了支持海量数据的存储、高并发访问以及保证数据的可靠性，分布式数据库架构应运而生。

2023-08-22 13:16:00

分布式数据库架构数据存储

Redis 如何实现分布式锁？

Redis 作为一个独立的三方系统，其优势是天生可以实现分布式锁。它实现分布式锁是通过 setnx 来实现的，然而只有 nx（not exists）可能会发生死锁的问题，所以我们最终实现死锁应该使用 set nx ex 的方式来实现。

2023-08-21 19:10:34

Redis 分布式锁

MySQL运行时的可观测性

这条SQL的运行进度展示，以及各个阶段的耗时，和PROFILING的输出一样，当我们了解一条SQL运行所需要经历的各个阶段时，从上面的输出结果中也就能估算出该SQL大概还要多久能跑完，决定是否要提前kill它。

2023-08-21 09:37:57

MySQL 工具 MariaDB

带你轻松玩转MySQL Shell for GreatSQL

MySQL Shell 是 MySQL 的一个高级客户端和代码编辑器，是第二代 MySQL 客户端。第一代 MySQL 客户端即我们常用的 MySQL 。

2023-08-18 14:39:02

MySQL 数据库

Kubernetes的演变：从etcd到分布式SQL的过渡译文

本文探讨了如何使用Kine将Kubernetes中的etcd替换为分布式SQL数据库。

2023-08-18 09:00:00

Kubernetes 数据库 SQL

数据库：当心 SQLRecon 滥用 Microsoft SQL Server

在我的职业生涯中，我有幸一睹世界上一些最大组织的面纱。根据我的经验，大多数垂直行业都依赖企业 Windows 网络。事实上，我见过去中心化零信任网络、企业 Linux、macOS 网络或 Active Directory 替代方案 (FreeIPA) 的次数一只手就能数得过来。

2023-08-16 15:13:36

数据库云计算网络安全

广告案例｜10亿数据、查询<10s，论基于OLAP搭建广告系统的正确姿势

这篇文章中，我们将会分享人群圈选查询在实时分析OLAP场景下的解决思路，同时介绍如何利用ByteHouse来加速此类查询。从数据表现上看，在10亿级用户测试数据下，ByteHouse的人群查询P99小于10s，展现了优异的性能。

2023-08-16 15:03:36

广告数据库

数据库 DB2 11.1 在 Linux 上部署实战

DB2最初于1983年发布，是IBM的主机系统（IBM System/370）的数据库管理系统。随着时间的推移，DB2逐渐扩展到其他平台，包括Windows、Linux、UNIX和IBM的大型机系统（IBM z/OS）。

2023-08-16 08:41:55

五分钟技术趣谈 | 数据库容灾体系建设分析

数据库容灾：建立一个异地的数据库，为了保护数据安全和提高数据的持续可用性，企业要从数据备份、故障预警等多方面考虑，将数据库的必要内容文件复制到不同的存储设备中，备份是系统建设中需要考虑的最重要的事项之一。

2023-08-15 14:54:02

数据库容灾

Django 和 SQL：数据库扩展好帮手

本文将介绍数据库管理工作中的两个重要概念，并通过循序渐进的指南告诉大家该如何构建面向生产环境的 Django 应用程序。

2023-08-15 13:53:54

SQL Server：查找死锁的 T-SQL

多个并发事务同时访问数据库资源，而这些事务需要访问的资源（如表、行、页等）相互冲突，从而导致彼此互相等待，形成死锁。具体来说，当一个事务正在访问某些资源时，会对这些资源进行加锁以保证数据的一致性。

2023-08-15 08:26:34

SQL Server 查找死锁

10种生成式人工智能颠覆传统数据库的方式译文

生成式人工智能不仅仅适用于聊天机器人，存储、结构化和查询数据的方式也正在被改变。以下是10种生成式人工智能颠覆传统数据库的方式。

2023-08-14 16:39:55

人工智能数据库

极简工作流，你学会了吗？

New 一个数据库和服务器二合一的项目，作为一个关系型数据库系统，它支持你通过 module 模式将应用程序的逻辑直接传到数据库中。简单来说，它让你用 Rust 编程整个应用程序，并将其部署为单个二进制文件，不需要微服务，不需要容器，也不用 K8s 和 Docker，就能实现数据上线。

2023-08-14 08:42:41

数据库服务器系统

跟哪吒学MySQL—DDL与DML语句

Data Definition Language，数据定义语言，用来定义数据库对象(数据库，表，字段)。Data Manipulation Language，数据操作语言，用来对数据库中表的数据记录进行增、删、改操作。

2023-08-14 08:32:42

MySQL 数据库

Kill掉MySQLd_Safe进程会影响MySQLd进程？

mysqld_safe 命令启动，kill 父进程(非会话首进程)，不会导致子进程退出；重新启动父进程，报错子进程已存在。可以使用mysqld_safe命令启动改造mysqld_safe脚本，实现【启、停mysqld_safe进程，不会影响mysqld进程】。

2023-08-14 08:31:38

systemd 服务脚本

生成式AI颠覆传统数据库的十种方式译文精选

数据库制造商正在改变我们存储信息的方式，以便更好地与人工智能模型配合使用。以下是随着人工智能的普及，数据库正在适应和改进的10种方式。

2023-08-11 16:23:38

AI 数据库人工智能

Pandas 的 Merge 函数详解

在日常工作中，我们可能会从多个数据集中获取数据，并且希望合并两个或多个不同的数据集。这时就可以使用Pandas包中的Merge函数。在本文中，我们将介绍用于合并数据的三个函数merge、merge_ordered、merge_asof

2023-08-11 11:19:52

数据集 Merge函数

SpringBoot3分库分表

按照业务拆分的方式称为垂直分片，又称为纵向拆分，它的核心理念是专库专用。在拆分之前，一个数据库由多个数据表构成，每个表对应着不同的业务。而拆分之后，则是按照业务将表进行归类，分布到不同的数据库中，从而将压力分散至不同的数据库。

2023-08-11 08:59:49

分库分表数据数据库

陪跑多年，Postgres终崛起封王！译文精选

几个月之后，Postgres 16正式版可能会闪亮登场，提及此，不免让人感到热血沸腾！我们也一起来回顾下Postgres是如何“走到”今天的吧！

2023-08-10 18:26:51

Postgres 数据库 Reddit

上一页 1 ··· 23 24 25 26 27 ··· 325 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营