直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1388 条

青铜到王者，快速提升你 MySQL 数据库的段位！

MySQL 由浅到深。MySQL 体系结构、MySQL 备份恢复、MySQL 高可用集群、MySQL 优化。

2017-07-25 15:52:24

MySQL 体系结构高可用架构

我必须得告诉大家的MySQL优化原理

说起MySQL的查询优化，相信大家收藏了一堆奇淫技巧：不能使用SELECT *、不使用NULL字段、合理创建索引、为字段选择合适的数据类型..... 你是否真的理解这些优化技巧？是否理解其背后的工作原理？在实际场景下性能真有提升吗？我想未必。因而理解这些优化建议背后的原理就尤为重要，希望本文能让你重新审视这些优化建议，并在实际业务场景下合理的运用。

2017-07-25 15:50:24

SQL优化之基于SQL特征的改写

前言今天老K继续与大家分享第九期。周末老K宅在家观战了两局精彩的“人狗”大战。老K既算不上科技迷，也算不上围棋迷，不过对此颇有感触：阿尔法狗不过是通过左右互博的方式不断学习围棋，然而依赖其最优的学习算法（学习方法）却能再短短的数月之内达到人类围棋水平的最顶端；而李世石在却是依赖其已有的经验结合人类特有的灵感下出“神之一手”，人类终究还是可以战胜拥有超强计算能力的阿尔法狗。这些不禁让老K想起了自己在

2017-07-25 13:30:05

oracle 数据库

与技术谈一场永不分手的恋爱

找到一份合适的工作，就像在工作的八小时之内有了一个心仪的恋人。老张我呢，原来在上学那会儿，不是特别爱学习，本人长得呢也特别帅（现在做了技术可惜了哈哈！）所以特招漂亮女孩的喜欢，当然自己也特别喜欢和她们谈恋爱啦，那感觉老甜蜜了呢。也算得上是情感专家。但是最后都没啥好结果，弄得我今后都不再相信爱情了。于是我开始反思自己，到底是哪里出了问题，刚开始谈恋爱的时候，两人都感觉特别好，可是随着时间地流逝，感情

2017-07-21 16:32:01

数据库新特性 mysql5.7

清算/报表/日终跑批程序之性能优化案例（一）

前言不知不觉，技术人生系列·我和数据中心的故事来到了第五期。小y又和大家见面了！前几期主要发了一些TroubleShooting的案例分享，其实小y最擅长的是性能优化，所以从这期开始，小y会陆续的分享更多的数据库性能优化案例。进入正题，如果您的日终跑批/清算/报表等程序时快时慢，或者从某一天以后就一直变慢，作为运维DBA或开发的您，会怎么下手？还有，除了解决问题外，你要如何解答领导最关心的一个问题

2017-07-21 11:12:13

数据库 oracle

InnoDB--------独立表空间平滑迁移

迈向 MySQL 生态的第一步先定个小目标，每天一小步，玩转InnoDB 独立表空间平滑迁移

2017-07-20 23:11:45

MySQL数据库“十宗罪”（十大经典错误案例）

各位技术老铁们，福利来了！今天给大家说说《数据库中十大经典错误案例》老张我在刚开始学习数据库的时候，没少走弯路。经常会遇到各种稀奇古怪的 error 信息，遇到报错会很慌张，急需一个解决问题的办法。跟无头苍蝇一样，会不加思索地把错误粘到百度上，希望赶紧查找一下有没有好的处理问题的方法。我想这个应该是刚从事数据库的小白，都会遇到窘境。今天就给大家列举 MySQL 数据库中，最经典的十大错误案例，并附

2017-07-20 16:48:51

mysql 数据库经典错误案例

数据库优化之降龙十八掌

技术老铁们，工作累了，我们就一起来放松一下！老张我呢是个金庸迷，在金庸小说中，降龙十八掌无愧巅峰外功，它的威力之大可想而知。而今儿，老张要给大家介绍18招式，来优化我们的 MySQL 数据库，让它跑起来更快，更稳定！之前老有学生问我，张老师该如何优化我们的 MySQL 数据库呢？这个问题太泛泛了，不是很具体！因为数据库的优化要从多个角度去考虑，通过不同的维度模型去排查问题。老师整理了下思路，大概可

2017-07-19 16:54:08

mysql 数据库数据库优化

【揭秘】数据库面试葵花宝典，让你面试一次过

大家可以叫我老张，网名superZS！一直从事数据库行业10余年，工作于某数据库服务公司，兼数据库资深讲师，就面试中大家遇到的比较困惑的数据库问题，和刚进入数据库领域的同学们，我在这里给大家做一个详细的总结，希望对大家在工作或者面试中有所帮助，老师会倾囊相授，道行尚浅，大家相互学习！让我们努力学习技术，为了拿到高薪，追到心仪的姑娘，而奋斗吧！葵花宝典Question 1：你目前接触的mysql版本

2017-07-18 16:12:43

mysql 数据库高薪

MongoDB Hot Backup 测试及痛点

Percona MongoDB Hot Backup 测试及痛点前言Part1:写在最前Percona MongoDB 支持Hot Backup，解决了MongoDB官方版本只能使用mongodump的情况。mongodump在小库中还好，量上来后，备份恢复都是痛苦的。本文就MongoDB hot backup 备份中的一个bug进行复现和解决。实战Part1:限制在Percona MongoDB

2017-07-18 14:48:32

boost filesystem mongodb

Lamp 安装 MySQL 遇到的问题汇总

CentOS 在安装mysql 时遇到的问题汇总

2017-06-15 14:59:07

MYSQL CENTOS LAMP

利用Prometheus和Grafana监控MySQL

一、 Prometheus 是一个开源的服务监控系统和时间序列数据库。：官方GitHub地址为：https://github.com/prometheus/prometheus 官方地址：https://prometheus.io/

2017-06-13 11:53:48

MySQL Grafana Prometheus

MongoDB误删表恢复

一、场景描述公司某工程师执行db.giveget_card.drop()，误将线上表删除。幸好每天都有做备份，这个时候就体现了备份的重要性了，哈哈哈。。。二、模拟故障过程备份数据大小：rs_test01:PRIMARY>useycsb switchedto&nb

2017-06-05 20:55:31

mongodb oplog mongorestor

如何实时查看mysql当前连接数?

如何实时查看mysql当前连接数? 1、查看当前所有连接的详细资料: ./mysqladmin-uadmin-p-h10.140.1.1processlist2、只查看当前连接数(Threads就是连接数.): ./mysqladmin-uadmin-p-h10.140.1.1

2017-05-29 01:13:36

mysql 连接数如何实时

MySQL高可用架构之MHA

可以看这篇文章的理论部分，写的不错：http://www.educity.cn/wenda/399310.html操作可参考：http://www.178linux.com/156981、关于MHAMHA(Master HA)是一款开源的MySQL的高可用程序，它为MySQL主从复制架构提供了automating master failover功能。MHA在监控到master节点故障时，会提升其中

2017-05-23 15:04:05

mysql表碎片的查询自己回收

在MySQL中，我们经常会使用VARCHAR、TEXT、BLOB等可变长度的文本数据类型。不过，当我们使用这些数据类型之后，我们就不得不做一些额外的工作——MySQL数据表碎片整理。每当MySQL从你的列表中删除了一行内容，该段空间就会被留空。而在一段时间内的大量删除操作，会使这种留空的空间变得比存储列表内容所使用的空间更大。当MySQL对数据进行扫描时，它扫描的对象实际是列表的容量需求上限，也

2017-05-12 11:07:33

mysql 查询表碎片

MySQL生僻字插入失败的处理方法

最近，业务方反馈有个别用户信息插入失败，报错提示类似"Incorrect string value:"\xF0\xA5 ..... " 看这个提示应该是字符集不支持某个生僻字造成的。下面是在虚拟机里复现的场景：step1、模拟原始表结构字符集环境：use test;CREATE TABLE `t1` ( `id` int(10) NOT NULL AUTO_INCREME

2017-05-11 15:55:55

MySQL 插入生僻字

在CentOS 7上使用RPM包安装MySQL 5.7

shell> wget https://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.18-1.el7.x86_64.rpm-bundle.tarshell> tar xvf mysql-5.7.18-1.el7.x86_64.rpm-bundle.tarshell> sudo yum install mysql-communit

2017-05-11 14:16:08

mysql RPM mysqld

Linux命令：MySQL系列之九--MySQL隔离级别及设置

Read Uncommitted（读取未提交内容）在该隔离级别，所有事务都可以看到其他未提交事务的执行结果。本隔离级别很少用于实际应用，因为它的性能也不比其他级别好多少。读取未提交的数据，也被称之为脏读（Dirty Read）。 Read Committed（读取提交内容）这是大多数数据库系统的默认隔离级别（但不是MySQL默认的）。它满足了隔离的简单定义：一个事务只能看见已经提交事务所做的改变。这种隔离级别也支持所谓的不可重复读（Nonrepeatable Read），因为同一事务的其他实例在该实例处理其间可能会有新的commit，所以同一select可能返回不同结果。 Repeatable Read（可重读）这是MySQL的默认事务隔离级别，它确保同一事务的多个实例在并发读取数据时，会看到同样的数据行。不过理论上，这会导致另一个棘手的问题：幻读（Phantom Read）。简单的说，幻读指当用户读取某一范围的数据行时，另一个事务又在该范围内插入了新行，当用户再读取该范围的

2017-05-10 14:23:28

READ 隔离级别 UNCOMMITTED

Linux命令：MySQL系列之八--MySQL事务相关内容

MySQL,ODBC   数据库事务多事务同时执行：彼此之间互不影响的方式进行并行；事务之间交互，通过数据集。 START TRANSACTION; 启动事务命令   数据库只有启动了事务才允许回滚撤销等操作。且数据的engine引擎必须是innodb，才支持事务 ROLLBACK 回滚事务，mysql只要没有提交开启了事务都可以进行回滚操作。 COMMIT：事务提交，事务提交后无法进行回滚操作。如果没有明确启动事务： autocommit能实现自动提交，每一个操作都直接提交；所以建议：明确使用事务，否则所有操作都被当成一个事务来处理，并关闭自动提交。                 否则会浪费mysql很多IO操作，每写一条语句都执行提交至持久性存储，很浪费资源

2017-05-10 11:30:43

START TRANSACTION SAVEPOINT

oracle如何修改单个用户密码永不过期

如果你想修改某个用户的密码让其永不过期，则需要新建一个profile，修改该profile的过期规则为无限期。

2017-05-04 16:42:03

oracle 用户密码

解决Linux下MySQL启动错误Starting MySQL.Manager of pid-file quit without updating file.[FAILED]

刚装完MySQL，启动时报如下错误：StartingMySQL.Managerofpid-filequitwithoutupdatingfile.[FAILED]解决Linux下MySQL启动错误Starting MySQL.Manager of pid-file quit without updating fil

2017-04-30 22:02:16

Linux MySQL 启动错误

一键自动化部署（定制rpm包）

部署--前篇上午将MySQL多实例部署完成，由于有公司特定一些需求，需要源码安装，现在需要批量部署，如果一台台部署，就太过麻烦，而且浪费时间，这个时候自动化部署就体现出价值了我们将MySQL制作定制化rpm包，然后放到我们的yum仓库中，在将yum所有客户端，都指向yum源，之后就是

2017-04-29 19:59:16

yum仓库一键自动化部署定制rpm包

Zabbix监控MySQL小记

Zabbix监控MySQL小记

2017-04-28 09:14:10

MySQL 小记 Zabbix

最近为公司制定的备份解决方案

对于差钱的公司来说，备份只能靠运维人员自己折腾了

2017-04-20 10:07:33

samba backup tar

XML技术-Schema约束-Dom4j-Xpath详解

XML之DTD约束、Schema约束，以及XML解析技术之Dom4j和Xpath技术详解

2017-04-18 16:05:41

Symantec NetBackup备份学习实践

记在南京某公司从事系统集成已有半年之久，在这半年期间学习了各方面的的知识体系。由于最近公司项目需要，部门领导给我开小灶培训学习NBU原理体系结构，自己也在之后捣鼓了几天，对NBU有了更深一步的了解，在此深深的感谢我的部门领导对我的循循教导。NBU全名Netbackup是赛门铁克收购veritas公司的一款产品，该产品功能强大，据称堪称备份界的鼻祖。Netbackup的体系结构：Nbu master

2017-04-18 01:12:33

Symantec Netbackup

基于XtraBackup的备份有效性检查脚本

生产环境的MySQL是通过crontab的方式，定时调度热备脚本备份数据。目前是通过XtraBackup软件实现热备。关于热备脚本方面，请查看我原先的博客《使用shell实现mysql自动全备、增备&日志备份》：http://linzhijian.blog.51cto.com/1047212/1891745 ，这里不再展开说明。&

2017-04-17 11:56:35

备份有效性 xtrabackup

使用JConsole监控

1.介绍JConsole图形用户界面是符合Java管理扩展（JMX）规范的监视工具,可以监测有关在Java平台上运行的应用程序的性能和资源消耗的信息。启动JConsolejconsole[options][connection...]connection =pid|host:po

2017-04-16 13:59:39

Oracle jconsole

MySQL主从复制的工作原理

mysql 主从复制原理主从形式 mysql主从复制灵活一主一从主主复制一主多从---扩展系统读取的性能，因为读是在从库读取的；多主一从---5.7开始支持联级复制--- 用途及条件 mysql主从复制用途实时灾备，用于故障切换读写分离，提供查询服务备份，避免影响业务主从部署必要条件：主库开启binlog日志（设置log-bin参数）主从se

2017-04-15 13:01:49

mysql 了解九爷带你

Linux下Mongodb安装和启动配置

MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的数据结构非常松散，是类似json的bjson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。它的特点是高性能、易部署、易使用，存储数据

2017-04-14 10:42:31

单机版MongoDB的zabbix监控

最近公司新上了几个mongodb的项目（单机版MongoDB)，需要坐下监控。之前有一个监控模板，但是效果不好。于是重新去google了一把，有了如下记录。单机版的参考https://github.com/oscm/zabbix/tree/master/mongodb实验环境：CentOS6.8 X86_64Percona-server-mongodb-3.2.9步骤：1、将mongo

2017-04-07 00:21:56

DB zabbix Mongo

RHEL6.4下搭建apache和subversion（SVN）

rhel6.4系统下搭建apache+svn，实现可通过svn客户端和http方式访问svn服务

2017-04-06 17:25:23

zabbix自动发现oracle表空间并监控其使用率

监控需求 Oracle表空间使用率实时监控，当表空间使用率达到95%时触发告警机制。Oracle表空间分为系统默认表空间和用户创建的表空间，而表空间又有自动扩展和非自动扩展两种类型，用户（DBA）在创建表空间时可以根据应用需求指定是否开启表空间自动扩展。那么在这里我们需要分析一个监控策略，就是当zabbix监控到某个表空间使用率达到95%，那么就让触发器触发警告（Warning）信息，

2017-03-24 17:19:40

oracle 表空间监控

MongoDB慢日志查询

MongoDB system.profile前言Part1:写在最前说到MongoDB的慢日志分析，就不得不提到profile分析器，profile分析器将记录的慢日志写到system.profile集合下，这个集合是一个固定集合。我们可以通过对这个集合的查询，来了解当前的慢日志，进而对数据库进行优化。Part2:整体环境MongoDB3

2017-03-23 18:48:37

mongodb 慢查询

Mysql 慢日志分析工具Mysqldumpslow

mysqldumpslow是mysql自带的用来分析慢查询的工具，当然不止这一种工具，还有percona-toolkit是percona公司出的一组命令行工具的集合，用来执行各种通过手工执行非常复杂和麻烦的mysql相关任务，包含以下内容：检查master和slave数据一致性/记录有效的归档/服务器信息汇总/分析和统计日志,为了省事这块使用mysq

2017-03-21 19:08:19

Mysql 日志分析慢

京东发布MySQL Group Replication官方文档中文版

MySQL Group Replication（简称MGR）是MySQL官方于2016年12月推出的一个全新的高可用与高扩展的解决方案。MySQL组复制提供了高可用、高扩展、高可靠的MySQL集群服务。高一致性，基于原生复制及paxos协议的组复制技术，并以插件的方式提供，提供一致数据安全保证；高容错性，只要不是大多数节点坏掉就可以继续工作，有自动检测机制，当不同节点产生资源争用冲突时，不会出现错

2017-03-16 11:08:27

MySQL Group Replication

SQLT导入测试数据，及SQL Profile的使用

  性能分析过程中，经常会遇到生产库出现SQL的性能问题，但是，我们没有办法在生产库上做很多动作，需要将这个SQL的对应的表结构信息，统计信息导入到测试库进行测试（没有真实的测试数据，只有统计信息）

2017-03-15 15:58:13

performance oracle SQLT

mysql从库Retrieved_Gtid_Set事务数比Executed_Gtid_Set事务数少的异常情况

今天从库crash重启后出现很有趣的现象：可以发现：Retrieved_Gtid_Set值显示从库没有接收到部分事务，丢失了部分事务。但是从Executed_Gtid_Set显示从库没有丢失事务。&nbsp

2017-03-08 14:32:58

MySQL 从库 Executed

Dr.Elephant mysql connection error

This is the first time I try to use english to write my blog, so don't jeer at the mistake of my grammar and spelling.Because of multi threaded drelephant will cause JobHistoryServer’s Loads very high

2017-03-07 12:20:27

mysql dr elephant

MongoDB unique index

MongoDB unique index实战Part1:写在最前MongoDB的 unique index索引这里有个注意事项，主要体现在对NULL值的处理上，本文加以复现。整体环境：MongoDB3.2.5Part2:集合内容PRIMARY>db.helei.find() {"_id":ObjectId(&qu

2017-03-03 11:06:17

index unique mongodb

巧用Zabbix自定义监控Mysql性能状态

环境是Centos6.5 x86_64系统Zabbix版本：3.0.4Mysql Server 版本：5.6.29 二进制安装zabbix_agentd.conf的配置文件如下：[root@iZuf67iz9o3i4wixgtwybnZalertscripts]#cat/usr/local/zabbix/etc/zabbix_agentd.conf&

2017-03-02 12:57:53

Mysql 监控状态

MySQL-MongoDB开源监控利器之PMM

最近要对数据库的监控体系进行改进，发现Percona 公司的一款开源的监控工具Percona Monitoring and Management(PMM) 对于MySQL的监控指标各项值比较全面准确，现在公司内部的开发测试环境进行了部署体验。主要的架构图如下：源于官方可以看到主要是由客户端的代理程序node_exp

2017-03-01 11:39:55

MySQL PMM Docker

Mariadb初始登陆报错 ERROR 1045 (28000) 的解决办法

mariadb无法登录，报错 ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO)

2017-03-01 11:33:46

ERROR 登录报错 mariadb

Saltstack+Shell自动化分发脚本

Saltstack+Shell自动化分发脚本

2017-02-24 14:42:22

shell 自动化 Saltstack

Weblogic "./startWebLogic.sh" Error 解决

Weblogic "./startWebLogic.sh" Error 解决

2017-02-24 09:53:24

Weblogic Oracle

系统内存耗尽的案例分析

近日遇到一个RAC节点hang导致节点被重启的问题，最后经过分析，发现在系统运行一段时间后，系统内存就会耗尽，原本256G的内存，最后只剩几百M。最后，查看meminfo，发现了问题，PageTables占用了168G的内存, 加上SGA和PGA的使用，刚刚好250G左右。 PageTables是内存表，是不共享的，在内存很大的情况下，如果很大process访问内存的话，就会每个process都copy一份PageTables，最终导致大量内存自耗的情况

2017-02-23 14:48:04

MySQL 分区表原理及数据备份转移实战

MySQL 分区表原理及数据备份转移实战 1、分区表含义分区表定义指根据可以设置为任意大小的规则，跨文件系统分配单个表的多个部分。实际上，表的不同部分在不同的位置被存储为单独的表。用户所选择的、实现数据分割的规则被称为分区函数，这在MySQL中它可以是模数，或者是简单的匹配一个连续的数值区间或数值列表，或者是一个内部HASH函数，或一个线性HASH函数。分表

2017-02-22 18:39:44

key alter primary

Oracle里收集与查看统计信息的方法

Oracle数据库里的统计信息是这样的一组数据：它存储在数据字典里，且从多个维度描述了Oracle数据库里对象的详细信息。CBO会利用这些统计信息来计算目标SQL各种可能的、不同的执行路径的成本，并从中选择一条成本值最小的执行路径来作为目标SQL的执行计划。Oracle数据库里的统计信息可以分为如下6种类型：表的统计信息索引的统计信息列的统计信息系统统计信息数据字典统计信息内部对象统计信息表的统计

2017-02-20 21:47:47

Oracle 统计信息

Linux平台安装Mongodb

Linux平台安装MongoDB方法一：MongoDB提供了linux平台上32位和64位的安装包，你可以在官网下载安装包。下载地址：http://www.mongodb.org/downloads，选择相应平台版本即可。下载完安装包，并解压tgz（以下演示的是 64 位 Linux上的安装）。curl-Ohttps://fastdl.mongod

2017-02-10 10:20:21

安装 linux mongodb

上一页 1 ··· 7 8 9 10 11 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营