鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

缓存失效了，怎么办？

在如今大数据的时代下，高并发高可用是所有软件开发都追求的目标，为了实现这一目标，缓存的使用是每一个高并发系统都会涉及到的，使用缓存可以保障系统的运行效率，提高系统的健壮性。

2022-12-19 11:31:57

缓存失效数据库

MySQL中这14个小玩意，让人眼前一亮！！！

通常情况下，我们在插入数据之前，一般会先查询一下，该数据是否存在。如果不存在，则插入数据。如果已存在，则不插入数据，而直接返回结果。

2022-12-19 08:23:24

MySQL 数据密码

Java实战：hutool-db实现多数据源配置

Hutool-db是一个在JDBC基础上封装的数据库操作工具类，通过包装，使用ActiveRecord思想操作数据库。

2022-12-19 07:21:35

Hutool-db 数据库 JDBC

你该知道的时序数据库技术

随着物联网技术的快速发展，物联网设备产生的数据呈爆炸式增长，数据的总量、数据类型越来越多、访问速度要求越来越快、对数据价值的挖掘越来越重视。物联网产生的数据通常都具备时间序列特征，时序数据库是当前针对物联网、工业互联网、应用性能监控场景等垂直领域定制的数据库解决方案，本文主要介绍物联网场景海量时序数据存储与处理的关键技术挑战及解决方案。

2022-12-18 19:38:31

时序数据库数据库

数据泄露事件频发，数据库敏感字段如何治理？

近年来，有关数据泄露相关的新闻事件屡见不鲜，不断地引发大众的讨论和担忧。各家企业都或多或少在承受相关的数据安全风险，这种可能性会给企业运行带来额外的风险，包括大众的质疑以及政府的处罚等。

2022-12-18 19:25:10

数据库数据泄露

如果查询条件没有索引字段的话，是加「行锁」还是加「表锁」？

如果 select … for update 语句的查询条件没有索引字段的话，整张表都无法进行增删改了，从这个现象看，好像是把表锁起来了，但是并不是因为上面这两个表级锁的原因。

2022-12-18 16:56:07

索引 MySQL 锁

数据泄露事件频发，数据库敏感字段如何治理？

近年来，有关数据泄露相关的新闻事件屡见不鲜，不断地引发大众的讨论和担忧。各家企业都或多或少在承受相关的数据安全风险，这种可能性会给企业运行带来额外的风险，包括大众的质疑以及政府的处罚等。

2022-12-18 08:30:53

数据泄露数据库敏感字

如何构建企业内的 TiDB 自运维体系

得物 App 从创立之初，关系型数据库一直使用的开源数据库产品 MySQL。和绝大部分互联网公司一样，随着业务高速增长、数据量逐步增多，单实例、单库、单表出现性能瓶颈和存储瓶颈。从选型和架构设计角度来看这很符合发展规律，一开始没必要引入过于复杂的架构导致资源成本和开发成本过高，而是逐步随着业务发展速度去迭代架构。

2022-12-16 18:37:37

浅谈大数据背景下数据库安全保障体系

在大数据背景下，数据库的安全保障管理更加复杂，为了能够更好地适应数据库管理要求，相关人员要充分发挥大数据技术优势。

2022-12-16 09:39:43

数据库大数据

谈谈从CAP定理到Lambda架构的演化

CAP 定理指出数据库不能同时保证一致性、可用性和分区容错性。但是我们不能牺牲分区容错性，因此必须在可用性和一致性之间做出权衡。管理这种权衡是 NoSQL 运行的核心焦点。

2022-12-15 17:15:42

数据库 NoSQL

数据库治理利器：动态读写分离

本文将介绍 MSE 服务治理最近推出数据库治理利器：无侵入实现数据库访问的读写分离能力。

2022-12-15 09:44:29

数据库利器

Nacos 2.2 发布，正式支持其他数据库

更新后 1.x 的 nacos-server 无法直接升级到 2.2.0 ,只能从 2.0.0 进行升级。这些修改并不会影响 1.x 的 nacos-client，还是可以使用 1.X 的客户端 2.2.0 的服务端。

2022-12-15 09:15:27

Nacos 数据库服务端

万级实例规模下的数据库故障自愈探索实践精选

随着运维规模越大，线上故障也就越多，DBA 对于每个故障的处理时效将会下降，如果没有强有力的工具能提高故障的排查和修复效率，那么线上的稳定性就得不到保障。因此我们的想法是，我们固然要不断提供更加丰富的工具，但无论工具再丰富，都需要人去主动使用，因此更重要的是改变以人为主、工具为辅的运维模式，引入自动化分析和自愈的手段来提升运维效率。

2022-12-15 07:53:34

数据库故障自愈

几种常见的 MySQL/PolarDB-MySQL 回收表空间方法对比

架构师和DBA在系统设计之初就要考虑满足未来几年内的业务需求，同时又能最大化地节省成本，这是比较合理的架构布局和容量规划的方法。

2022-12-14 10:16:45

数据库系统

MySQL中WHERE后跟着N多个OR条件会怎样...

不过要注意的是，改写后的SQL查询结果和原来并不是完全一致的，实际应用中，可能还要再做进一步筛选或者增加 LIMIT N 来控制。

2022-12-14 08:05:56

优化扩展分布式数据库的隔离级别译文精选

本文将解释分布式数据库的隔离级别，并概述它们之间的权衡。我们还建议选择最适合您需求的隔离级别。

2022-12-14 08:00:00

数据库分布式数据库隔离

MySQL的InnoDB引擎原来是这样的

为了保持数据的完整性，InnoDB支持外键约束。使用外键，插入、更新和删除将被检查，以确保它们不会导致相关表之间的不一致。有些生产环境不使用外键，以业务代码维护表数据间关系。

2022-12-14 07:32:40

InnoDB MySQL 引擎

用抽象解决复杂性 Serverless HTAP 数据库开启技术无感化时代原创

在近日举行的 PingCAP DevCon 2022 大会上，PingCAP 联合创始人兼 CTO 黄东旭提出“技术无感化”的概念，核心就是通过更高层次的抽象，降低软件的复杂性，使得未来开发者无需感知具体的技术，从繁重的运维工作中解放出来，在业务上解锁更多创新力与可能性。简单来说就是说通过用户体验的革新，让技术变得越来越简单！

2022-12-13 10:22:56

PingCAP Serverless HTAP

MySQL 统计信息不准导致的性能问题

MySQL优化器依赖于表的统计信息的准确性来选择最优的执行计划。

2022-12-13 10:05:13

MySQL 数据库

浅谈数据仓库架构设计

数据中台从企业的视角出发，要求企业在构建数据仓库到决策支持系统的过程中构建一个服务型的架构。

2022-12-13 09:54:52

执行计划没变，执行时快时慢是怎么回事？

SQL的性能又回到了从前，看样子加大WORK_MEM并没有有效的改善SQL性能。回过头来想想也是，哪怕因为排序缓冲超了一点，做了硬盘排序，也不可能有20秒的性能影响。

2022-12-13 08:36:42

D-SMART Oracle 数据库

当我准备用SpringEvent优雅的解耦时，连续两个Bug把我搞懵了

P6Spy是一个轻量级框架，只需简单配置，就可以无缝地拦截和记录数据库执行sql以及耗时，而无需对现有应用程序进行代码更改。其原理是包装原有的数据源，在SQL执行前后做一些功能增强。

2022-12-12 17:11:32

Redis 并发限流控制

令牌桶是一种用于控制请求速率的算法。它可以限制在特定时间内可以提交的请求数量，以避免超过系统的处理能力。

2022-12-12 09:07:06

Redis 并发限流

如何解决 Redis 数据倾斜、热点等问题

单台机器的硬件配置有上限制约，一般我们会采用分布式架构将多台机器组成一个集群，下图的集群就是由三台Redis单机组成。客户端通过一定的路由策略，将读写请求转发到具体的实例上。

2022-12-12 08:13:27

Redis 数据倾斜

缓存数据丢了，原来是Redis持久化没玩明白

本文主要分析了Redis AOF、RDB以及混合持久化的内存数据持久化的机制原理，同时分析了两种持久化方式的优点以及缺点。我想只有理解了中间件的特性机制原理，知道了特性的长处以及不足我们才能设计适合我们平台的缓存数据持久化策略，从而提升平台的稳定性。

2022-12-10 22:52:54

Redis 缓存数据

分库分表常见算法，你学会了吗？

分库分表是一种数据库设计技术，其目的是为了提高数据库的性能和扩展性。它通过将数据库的表拆分到多个数据库中来实现这一目的。

2022-12-09 09:21:10

分库分表算法

信创成果持续深化，恒生电子多层次助力金融信创稳步推进

金融行业信创建设势在必行

2022-12-08 18:05:29

金融科技信创云原生

如何避免数仓模型 “烟囱式” 建设?

本文主要了解了数据中台的模型设计。从确⽴设计⽬标，到通过⼀系列步骤，将⼀个个分散的、杂乱的、烟囱式的⼩数仓逐步规整到⼀个可复⽤、可共享的数据中台。

2022-12-08 10:16:58

分布式数据库：如何保证数据在分布式场景下的高性能？

今天的内容较长，不过已经精炼很多了。我们从高可用性入手，介绍了 CAP 理论对于分布式模型评估的影响；而后重点介绍了一致性模型，这是核心，用来帮助你评估分布式数据库的特性。

2022-12-08 08:13:11

分布式数据库 CAP

聊聊 Flink SQL增量查询Hudi表

read.end-commit 增量查询结束时间不指定该参数则默认读取到最新的记录，该参数一般只适用于批读，因为流读一般的需求是查询所有的增量数据

2022-12-08 07:17:49

Flink SQL Hudi表流读

内存数据库Tair实战

LBS 生活服务，主要通过即时的功能来完成。它与 Redis Geohash的核心区别是 Geohash只能做点对点关系的邻近的查询，譬如它只能搜最近10km的人或者是离我最近的店。

2022-12-07 18:45:22

内存数据库 Redis

生不逢时的openZFS能用在数据库上吗

目前openZFS社区是十分活跃的，今年年初推出的2.1.7版本支持3.10-6.0的LINUX核心，与一直不够成熟的BTRFS相比，我还是更推荐openZFS。实际上我们的国产数据库厂商也可以试着考虑一下openZFS,利用这个开源项目为自己的数据库产品开发一个底层存储组件，用在自己的数据库一体机上。

2022-12-07 09:17:33

数据库 openZFS 组

手把手教你如何使用MyBatisPlus

url里面填写的 mybatisplus 是我的数据库名称，注意修改，username和password分别填写自己的数据库连接名称和密码。

2022-12-07 08:42:35

MyBatisPlu 数据库密码

MySQL遵循最左前缀匹配原则！面试官：回去等通知吧

MySQL 8.0.13 版本中，对于range查询（什么是range后面会提到)，引入了索引跳跃扫描（Index Skip Scan）优化，支持不符合组合索引最左前缀原则条件下的SQL，依然能够使用组合索引，减少不必要的扫描。

2022-12-06 09:03:31

MySQL 的自增主键一定是连续的吗？

InnoDB 引擎的自增值，其实是保存在了内存里，并没有持久化。第一次打开表的时候，都会去找自增值的最大值 max(id)，然后将 max(id)+1 作为这个表当前的自增值。

2022-12-06 09:00:11

MySQL 自增主键查询

把数据库该干的活交给OS可行吗

实际上早期的数据库也是十分依赖于操作系统的，我大学毕业后使用过的第一个数据库RMS就是一个基于openVMS的记录管理系统，其底层依赖于操作系统的基础IPC能力构建。后来随着数据库变得越来越复杂，需要支持的底层OS平台越来越多，数据库产品逐渐把一些以前OS干的事情由自己独立来干。

2022-12-06 08:45:33

数据库 OS 产品

Order By 的高级用法，你学会了吗

SQL的理论其实是集合论，常见的类似求数据的交集、并集、差集都可以使用集合的思维来求解。集合中的行之间没有预先定义的顺序，它只是成员的一种逻辑组合，成员之间的顺序无关紧要。

2022-12-06 08:37:43

高级用法 SQL 数据

MySQL插入时唯一键冲突的几种处理方式

当批量插入数据时，发现插入的这批数据中，有某些记录存在唯一键冲突，这种情况特别是在多线程进行数据插入时，会造成异常导致处理终止或者catch异常忽略部分数据。有什么好的办法对这些冲突的记录进行处理呢？

2022-12-06 08:18:59

MySQL 唯一键数据

MySQL索引详解，你学会了吗？

B+树索引是目前关系型数据库中最常用、最有效的索引之一，其索引结构是一种多路平衡树结构（与二叉树类似，B代表的不是Binary，而是Balance）。通过B+树索引能够快速的定位要要查找的数据所在的数据页，然后将页读入内存，在通过页字典槽快速寻找到数据行。

2022-12-06 07:53:33

MySQL 索引 B+树

几款常用Database的性能对比

市面上常见的有很多，但其中大厂用得比较多的主要还是这几个：mysql、oracle、MongoDB还有HBase。

2022-12-05 17:01:20

MySQL 数据库 Oracle

面试官：MySQL 中 varchar(n) 中 n 最大取值为多少？

我们这里字段类型是 varchar(65535) ，字符集是 ascii，所以代表着变长字段允许存储的最大字节数是 65535，符合条件二，所以会用 2 字节来表示「变长字段长度」。

2022-12-05 14:05:26

MySQL 最大取值存储

卸载掉Navicat，有免费的DBeaver就够了

DBeaver是一款免费和开源（GPL）为开发人员和数据库管理员通用数据库工具软件。

2022-12-05 13:52:14

DBeaver 数据库工具软件

微软加码Azure SQL数据库，为其提供128内核625GB内存配置

微软本周开始公开预览旗下的标准系列（Standard-series，之前名为Gen 5）配置的数据库和弹性池，弹性池现在可以扩展到128个vCores和625GB的内存，比以前最大80个vCores和415GB的内存有了一个飞跃。

2022-12-05 13:34:57

微软 Azure SQL

云数据库FinOps实战复盘

本文从云数据库成本挑战引入FinOps的概念，结合HBase成本优化项目阐述了FinOps的具体原则与实践案例。

2022-12-05 09:31:21

云数据库 FinOps

IntelliJ IDEA 2022.3正式发布，配置云同步&支持Redis好用到炸

IntelliJ IDEA 2022.3中最直观的感受是：可以通过设置来切换到新UI，目前这套UI还是preview预览版本，但依旧能给你焕然一新的感觉：不是微整，是换脸。

2022-12-05 09:11:41

配置云同步 Redis

让我们一起聊聊自治数据库

从我今天对Oracle自治数据库的分析，大家应该可以看出，自治数据库是一个全栈的解决方案，绝对不能只在数据库层面来实现，数据库产品提供了支撑自治数据库的基础能力，而云才是实现自治数据库的关键。

2022-12-05 09:10:21

自治数据库 Oracle

Redis 7.0 源码调试环境搭建与源码导读技巧

Redis 源码目录还有两个重要的文件，redis.conf 和 sentinel.conf，分别用于配置 Redis 实例运行和哨兵配置。

2022-12-05 08:41:39

Redis 调试环境源码

MySQL 全表扫描成本计算

计算读取一个数据页的平均成本，关键是要知道主键索引已经加载到 Buffer Pool 中的叶子结点数量。InnoDB 通过在内存中维护一个哈希表（buf_stat_per_index->m_store）来记录这个数量。

2022-12-05 08:35:06

MySQL 计算读取

如何保证Mongodb和数据库双写数据一致性？

很多小伙伴看到双写数据一致性问题，首先会想到的是Redis和数据库的数据双写一致性问题。有些小伙伴认为，Redis和数据库的数据双写一致性问题，跟Mongodb和数据库的数据双写一致性问题，是同一个问题。

2022-12-05 08:24:32

mongodb 数据库数据

向量化如何提高数据库性能译文

尽管数据库向量化是一个严峻的工程挑战，但这将为StarRocks等实时分析引擎提供数量级的性能提升。

2022-12-05 08:00:00

数据库向量化数据库性能

上一页 1 ··· 36 37 38 39 40 ··· 325 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营