直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库运维

1516内容

关注

数据库运维话题针对数据库的软件安装、配置优化、备份策略选择及实施、数据恢复、数据迁移、故障排除、预防性巡检等多个话题，分享使用技巧以及实践应用等内容。

共 1516 条

针对数据库变更的持续集成与交付译文

持续集成和持续交付的流程为组织带来了各种巨大的好处。本文针对数据库变更管理会造成交付瓶颈的问题，讨论了如何将数据库的变更，带入与应用代码相同的交付管道，以及市场上能够配合此类实践的各种可用工具。

2021-06-04 09:00:00

数据库集成工具

实时监视同步数据库变更，这个框架真是神器

我们数据库中的数据一直在变化，有时候我们希望能监听数据库数据的变化并根据变化做出一些反应，比如更新对应变化数据的缓存、增量同步到其它数据源、对数据进行检测和审计等等。而这种技术就叫变更数据捕获(Change Data Capture)。

2021-06-03 21:54:33

数据库框架缓存

JDBC中Statement接口实现查询数据、添加数据

在JDBC技术中，不同的数据库需要不同的驱动程序，先加载驱动程序，接着数据库的连接后，再使用SQL语句来执行数据库。本文给大家介绍的是如何使用Statement接口实现查询查询数据、添加数据，接下来，小编带大家一起来学习!

2021-06-03 10:01:28

JDBC Statement 接口

这个世界，又多了一点抽象！

OpenTracing诞生于2016年11月，CNCF接受了它，成为自己基金会的第三个项目。但是google并不认为这个东西是标准，所以推出了自己的OpenCensus规范。

2021-06-02 18:46:13

监控日志 Prometheus

读写分离水太深，你把握不住，让叔来——命令查询权责分离模式

多年以前，那时我正年轻，做技术如鱼得水，甚至一度希望自己能当一辈子的一线程序员。但是我又有两个小愿望想要达成：一个是想多挣点钱;另一个就是对项目的技术栈和架构选型能多有点主动权。

2021-06-02 11:28:53

查询权责分离

面试官：谈谈你对索引的认知系列之B+树

B+树是B-树的一个升级版，也是一种多路搜索树，相对于B树来说B+树更充分的利用了节点的空间，让查询速度更加稳定，其速度完全接近于二分法查找。

2021-06-02 10:23:06

索引 B+树数据

OceanBase开源，11张图带你了解分布式数据库的核心知识

蚂蚁集团自研数据库OceanBase已经开源，这对国产分布式数据库来说，是一个重磅消息。一直以来OceanBase作为商业数据库，披露的技术细节并不多,以后又多了一个可以拿来研究的优秀分布式数据库。

2021-06-01 12:45:19

数据库分布式 OceanBase

数据库表设计太劣质，被领导疯狂diss

在大家开发的时候，很多时候不是说，有人告诉你已经完全的设计好数据库了，也没有专门的人去管理数据库表设计这块的内容，而阿粉的朋友就是这么悲催，接手了公司一个同事的一个比较重要的功能，而阿粉的朋友也没有重新进行设计，于是就出现了这样的一幕。

2021-05-29 08:07:29

数据库用户 OS

你知道一行SQL代码能做什么？

最近在知乎上看到一个问题：一行代码可以做什么?答题者数万计，都是一些非常“高端”的操作，就在想一行SQL代码能做什么呢?

2021-05-28 07:39:17

SQL 代码操作

数据库被删之反思

数据库被删后，第一时间采取的措施是想办法恢复，但由于binlog未开启以及定时备份数据库脚本也没有，最后无法恢复，只得经理采取一些措施来解决这个问题了。

2021-05-24 09:08:50

数据库工具技术

盘点分库分表中件间Mycat中的坑

公司最近在搞服务分离，数据切分的工作，因为订单和订单项表的数据量实在过大，而且每天都是以50万的数据量在增长，基于现状，项目组决定采用分库的方式来解决当前遇到的问题。

2021-05-20 07:32:59

分库分表数据量

MongoDB高可用方案之主从复制

MongoDB 是当前比较流行的文档型数据库，其拥有易使用、易扩展、功能丰富、性能卓越等特性。主节点会记录写有关的操作，读操作不记录。这些操作记录在local数据库中的oplog.admin和slave两个集合。slave记录从节点信息。

2021-05-20 06:49:45

MongoDB 高可用数据库

人人都在谈的图数据库到底是个啥？

图数据库，如果是刚接触的人，可能会被其字面意思所误导。其实，图数据库并不是指存储图片、图像的数据库，而是指存储图这种数据结构的数据库。那么图又是什么呢？

2021-05-19 10:44:42

数据库架构技术

10分钟了解啥是数仓

随着互联网及物联网等技术发展，越来越多的数据被生成，如何有效利用这些数据就成为了企业决胜的法宝了。大型公司会基于数据做出BI、推荐系统、决策支持、统计分析、报表等业务。

2021-05-17 20:13:50

数仓操作型数据库

四本书、一个专栏，揉成这篇MySQL之一

当客户端与 MySQL 建立连接之后，一条 SQL 语句经过 TCP 从客户端传输到 Server ，Server 会先将语句进行词法分析与语法分析，这个工作是分析器做的。

2021-05-17 14:10:29

MySQL SQL Server

后期数据库主从架构的痛点，真的痛

读写分离是什么?读写分离的作用就不讲了，如果有不了解的同学可以自己去搜索资料进行了解。一开始的场景肯定都基于主库去做增删改查的操作，等后面压力慢慢上来后才会考虑加数据库的从节点，通过读写分离的方式来提高查询的性能。

2021-05-17 12:12:49

数据库架构分离

主要开源数据库优势

根据DB-Engines的研究，最近开源数据库的流行程度已经超过商业数据库。

2021-05-16 14:27:17

开源数据库开源数据库

基于Mybatis手撸一个分表插件

事情是酱紫的，阿星的上级leader负责记录信息的业务，每日预估数据量是15万左右，所以引入sharding-jdbc做分表。

2021-05-14 13:30:17

Mybatis 分表插件

数据库环境标准化管理的初步规划

一般来说，业务能够稳定运行，大家主要聚焦的是线上环境的管理，相反对于其他环境的管理不够重视，而现实情况是这些环境的管理更需要标准化，通过统筹管理减少一些潜在隐患，才能在一定程度上减少线上环境的隐患。

2021-05-12 07:35:30

数据库环境标准化

在项目中使用C3P0作为数据库连接池，被技术总监怼了

数据库连接是一项非常关键的、有限的、昂贵的资源，这一点在多用户的网页应用程序中体现得尤为突出。

2021-05-12 07:32:58

数据库 C3P0 项目

为什么BATJ公司要用HBase？原创

Apache HBase 是 Hadoop 的大数据存储数据库，一个分布式、可伸缩的大数据存储，是依赖 Hadoop。

2021-05-11 06:57:15

HBase BATJ 公司

.NET之生成数据库全流程

本文主要是回顾下从项目创建到生成数据到数据库(代码优先)的全部过程。采用EFCore作为ORM框架。

2021-05-10 09:22:44

.NET 数据库项目

分库分表中间件的高可用实践

分库分表中间件在我们一年多的锤炼下，基本解决了可用性和高性能的问题(只能说基本，肯定还有隐藏的坑要填)，问题自然而然的就聚焦于高可用。本文就阐述了我们在这方面做出的一些工作。

2021-05-08 18:50:57

分库分表中间件

深度解析PolarDB数据库并行查询技术

本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。

2021-05-07 09:25:34

数据库工具技术

索引扫描时，对同一个叶子块访问多次的原因初探

在观察索引扫描会按何种次序进行索引块的访问时，我发现了一种现象，即会有部分叶子块被访问两次或更多。以下是我自己对这种现象的重现，以及对产生该现象原因的初步判断。但截至目前，我并未找到有官方文档对相关内容的介绍。

2021-05-06 21:49:56

索引扫描次序

一文学会效率提升技巧

我们平时在跑数据的时候可能会将数据结果存储在txt文件中，不知道大家平时是怎么处理txt文件中的数据的，相信各位同学都有自己的方法，用python的pandas包或者把数据塞进数据库再用sql等等。

2021-04-30 07:33:35

效率提升技巧

一个诡异Bug，我差点背上P0事故!

这一周线上碰到一个诡异的 Bug。线上有个定时任务，这个任务需要查询一个表几天范围内的一些数据做一些处理，每隔十分钟执行一次，直至成功。

2021-04-30 07:09:48

临时表在SQL优化中的作用

临时表，顾名思义就只是临时使用的一张表，一种是本地临时表，只能在当前查询页面使用，新开查询是不能使用它的，一种是全局临时表，不管开多少查询页面均可使用。

2021-04-29 08:11:11

SQL 优化作用

关于数据库资源交付的通用设计和改进

对于安装部署来说，涉及的流程较为繁杂，而且随着后续的维护管理，流程会产生变动，在以往的代码层维护中，会容易产生难以适配，流程不稳定的情况，导致安装部署的交付效率和预期存在较大的差距。

2021-04-28 21:45:37

数据库交付设计

高频HIVE-SQL笔试题详解

在上期的SQL题目中，我们以求连续活跃为例，讲述了lead 、lag错位相减的用法。但若不采用错位相减的话，其实也可以实现这一目的。本次我们就先讲述一下最大连续活跃天数的第二种解法，然后再讲述另一常见面试SQL题目。

2021-04-28 08:03:15

一款非常牛的国产NewSQL分布式数据库开源

近日，由浪潮技术团队开发的 NewSQL 分布式数据库 ZNBase 正式开源。

2021-04-27 10:17:42

数据库工具技术

幻读：听说我是被MVCC干掉的？原创

我是幻读，听说有人认为我是 MVCC 解决的，为了让大家更全面地理解我，只能亲自来解释一下。

2021-04-27 08:25:52

MVCC 数据 MySQL

聊一下SQL高效查询建议

为什么别人的查询只要几秒，而你的查询语句少则十多秒，多则十几分钟甚至几个小时?与你的查询语句是否高效有很大关系。

2021-04-27 07:52:18

疫情推动数据安全转移到DbaaS

在过去一年多，很多企业采用在家工作和混合工作场所办公模式，他们需要远程访问和更严格的安全性，这给数据供应商带来巨大的机遇，这些供应商近几年已经推出数据库即服务系统。

2021-04-25 14:54:53

数据库安全系统

数据库的并发操作与一致性

要定义并发, 时间并不是一个影响因素: 如果两个操作不知道对方(的开始和结束以及结果), 无论物理时间上他们何时发生, 我们都称这两个操作是并发的。

2021-04-24 16:58:03

数据库工具技术

一篇带给你ClickHouse集群搭建

ClickHouse是一个列导向数据库，它的系统在生产环境中可以应用到比较大的规模，因为它的线性扩展能力和可靠性保障能够原生支持shard+replication这种解决方案。它还提供了一些SQL直接接口，有比较丰富的原生client。

2021-04-23 08:59:35

ClickHouse 集群搭建数据库

盘点索引设计规范那些事

5.6版本之前，一个sql只能使用到一个表中的一个索引，5.6以后，虽然有了合并索引的优化方式，但是还是远远没有使用一个联合索引的查询方式好。

2021-04-22 05:43:22

索引设计 SET

扩展 Spark SQL 解析，你知道吗?

大家好久不见了，最近生活发生了很多变故，同时我也大病了一场，希望一切都尽快好起来吧。今天跟大家分享下Spark吧，谈谈如何修改Spark SQL解析，让其更符合你的业务逻辑。好，我们开始吧...

2021-04-20 23:16:06

Spark SQL 语法

SQL中如何用快照，恢复被误删的数据？

数据库快照是数据库(称为“源数据库”)的只读静态视图。在创建时，每个数据库快照在事务上都与源数据库一致。在创建数据库快照时，源数据库通常会有打开的事务。在快照可以使用之前，打开的事务会回滚以使数据库快照在事务上取得一致。

2021-04-20 08:33:29

SQL 快照数据

树结构之MongoDb 使用的到底是 B 树，还是 B+ 树？

关于 B 树与 B+ 树，网上有一个比较经典的问题：为什么 MongoDb 使用 B 树，而 MySQL 索引使用 B+ 树?

2021-04-19 10:03:33

MongoDb B 树 B+ 树

SQL-Hive中常用的表格操作

今天我们来讲讲Hive中常用的表格操作指令及相关效果。Hive系列文章预计10-20篇，主要讲数据分析中最基础的SQL技能。

2021-04-18 18:13:42

SQL Hive 表格

惊呆，一条SQL，Oracle炸了...

一条 SQL 就能让 Oracle 挂了，真的是不敢相信啊，前几天生产上确实出现了这样一个故障，我们来一起做一个事件回放。

2021-04-16 07:04:53

SQL Oracle 故障

聊聊幂等性如何保证的

幂等概念来自数学，表示对数据源做N次变换和1次变换的结果是相同的。在工程中幂等性用来表示用户对于同一操作发起的一次请求或者多次请求的结果是一致的，不会因为多次点击而产生了副作用。

2021-04-14 17:18:27

幂等性数据源 MySQL

ElasticSearch 如何使用 ik 进行中文分词？

本篇文章则着重分析 ElasticSearch 在全文搜索前如何使用 ik 进行分词，让大家对 ElasticSearch 的全文搜索和 ik 中文分词原理有一个全面且深入的了解。

2021-04-12 08:17:12

ElasticSear 分词中文

使用uuid作为数据库主键，被技术总监怼了一顿！

本篇文章主要从实际程序实例出发，讨论了三种主键ID生成方案的性能差异，鉴于笔者才疏学浅，可能也有理解不到位的地方，欢迎网友们批评指出!

2021-04-12 07:32:01

关于MongoDB 概念解析，你懂吗?

一个mongodb中可以建立多个数据库。MongoDB的默认数据库为"db"，该数据库存储在data目录中。MongoDB的单个实例可以容纳多个独立的数据库，每一个都有自己的集合和权限，不同的数据库也放置在不同的文件中。

2021-04-12 06:00:01

MongoDB 数据库存储

又谈SQL-to-SQL翻译器

在转换过程中，我们引用了DSL，来承接前面的SQL解析，以及后续的SQL生成，于是，自然的将转换分成了2段，即输入转换(SourceMapper) 和输出转换(SinkMapper)而定义转换与否，以及转换动如何完成，我们可以轻松的通过java自带的 Function 接口来实现。

2021-04-08 20:14:41

SQL 流程设计

移动端接入数据库故障自愈的初步实现

对于节假日，难得的假期，尤其是外出的时候碰上几个数据库报警，那些报警又属于不得不处理的时候，真是让人上火，所以也想了一些办法来尽可能杜绝和避免这种情况。

2021-03-27 22:00:37

数据库故障移动端

一个数据开发人员使用的辅助工具

这是为数据开发人员使用的辅助工具，用于数据库之间的表同步，说同步并不严谨，因为不是实时更新的，更确切的说法是复制，可以方便的从一个数据库复制表到另一个数据库，以下遇到同步的词请理解为复制。

2021-03-26 14:26:47

数据库工具开发

6亿数据秒级查询，ClickHouse太快了！

ClickHouse 在数据分析技术领域早已声名远扬，最近由于项目需求使用到了 ClickHouse 做分析数据库，于是用测试环境做了一个单表 6 亿数据量的性能测试。

2021-03-26 07:58:34

数据秒级查询

上一页 1 ··· 3 4 5 6 7 ··· 31 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营