鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1386 条

MySQL删除单列重复或多列同时重复值并保留一条

在生产环境中，我们有的列是不允许出现重复值的，亦或是某两列不允许同时重复，但由于前端未做限制，或者没限制住，出现了单列重复值，或者两列本应组成唯一组合却也出现重复，这两种情况都是不允许的。现在由于前端应用限制不住，要做删除操作后，添加唯一索引，从数据库层面进行限制，以下是处理过程：mysql> select * from aixuan1;+----+------+-------+| id |

2016-07-05 18:34:36

mysql删除重复数 sql删除重复数据只保 mysql删除重复数据

天兔(Lepus)监控邮件推送安装配置

好吧，我承认官网的邮件配置教程我又没看懂，这里记录下我的配置方法[root@HE3]# vi /usr/local/lepus/test_send_mail.py#!/usr/bin/envpython #-*-coding:utf8-*- fromdatetimeimport* importsys path='./inclu

2016-07-01 17:43:43

lepus邮件 lepus安装

Mysql主从不同步问题处理案例

在使用Mysql的主从复制架构中，有两个比较头疼的问题：1、主从数据不同步后如何处理2、主从同步延迟问题如何解决本文将根据实际案例来分析下问题1，至于问题2多数文档介绍的办法是启用多线程复制来解决，言归正传，这里的问题1还可以细分成两种情况。1、Slave_IO_Running和Slave_SQL_Running在YES情况下，主从数据不同步如何处理？2、Slave_SQL_Runni

2016-06-13 17:40:12

mysql master slave

在CentOS6.8平台使用最新版源代包码编译安装MySQL 5.7.13

首先到MySQL官网http://www.mysql.com/下载最新版源代码安装包，点击下载。拉到最下面，选择下载社区版。进而选择MySQL 社区服务器版可用的发行版本，平台选择源代码包。拉到最下面选择通用linux的tar格式的压缩包下载需这里提示需要登录MySQL账号来下载，但也可以无需登录直接下载。得到下载地址 http://cdn.mysql.com//Downloads/M

2016-06-12 10:57:19

源代码 centos 新版

Python实现MySQL DBA小工具一例

我们知道MySQL所有的运行状态统计信息都能从“show global status”语句的结果集中查看，该结果集保存的是从MySQL启动到当前时间之间各状态值的“总数”，对我们的分析不友好。在我们日常维护和优化中，我们需要持续的跟踪某些状态值的的变化（增量或者是平均值）；或者是在调整某些参数后，观察某些状态值的变化是否符合我们预期等等。基于以上这些需求，作者用Pyth

2016-06-06 15:10:04

mysql dba 小工具

OpenVPN使用用户名密码验证(文本/MySQL)

在使用OpenVPN的过程中，最安全的就是通过证书形式认证比较安全，但是不易于管理，因此大部分都是采用用户名密码的形式来做认证。OpenVPN的安装与配置详见http://fengwan.blog.51cto.com/508652/14044351.使用文本的形式来做认证只需要在OpenVPN的配置文件中添加script-security3 username-as-common-nam

2016-06-06 14:07:53

利用MySQL官方源安装5.6版程序，以及降级安装后无法启动的问题

前两天安装MySQL，用的是官方的yum源安装，安装好后发现 5.7版本内存占用还蛮高的，默认5.6版安装完成后启动占用内存大概400M+ ，5.7版本默认安装完成后内存占用竟然占到800M+ 简直翻了一倍。可能5.7上有很多新功能和新特性，但是现阶段我觉得我还远用不到，那么就降级安装5.6版本的吧。由于系统上已经有了官方 yum源的配置，那么就通过yum来安装5.6版本的MySQL吧

2016-05-28 17:56:36

mysql yum 降级

mysql 修改data目录后无法使用脚本启动

一、公司Mysql环境#1. 目前公司Mysql只做了主从#2.Mysql数据库版本：Percona-Server-server-56-5.6.20-rel68.0.el6.x86_64.rpm二、Mysql从库的问题Mysql从库一直都用命令

2016-05-24 16:40:54

zabbix应用-监控mysql slave 主从状态

线上服务的监控已经基本搞定了，现在就剩下mysql 主从的状态没有检测，这里要想用zabbix 监控，还得写一个获取主从状态的脚本，然后设置一个key，创建模板套用这个key 获取mysql 的主从状态是否正常。1.这里把我的脚本贴一下，脚本要给可执行权限#!/bin/bash user=zabbixagent passwd=zabbixagent port=

2016-05-13 15:09:01

Corosync+Pacemaker+MySQL+DRBD（二）

上接Corosync+Pacemaker+MySQL+DRBD（一）http://9124573.blog.51cto.com/9114573/1768076 ⑶布署corosync+pacemaker ◆安装软件包 pacemaker依赖corosync，安装pacemaker包会连带安装corosync包&

2016-04-29 22:19:43

drbd corosync pacemaker

利用XtraBackup做mysql不停机重做主从复制

不停机做mysql主从同步，可以使用mysqldump，但是这个效率比较低，利用XtraBackup来实现这个，效率比较高！

2016-04-29 18:04:55

mysql 主从 Xtra

【MySQL】一次扩展平台引发的字符集调整

公司app（安卓）应用扩展ios平台（安卓客户端已经运行一年），由于ios自带emoji表情字符集，api会出现问题，mysql数据库更换utf8mb4，原字符集utf8。

2016-04-19 18:33:39

mysql 数据库客户端

Oracle Study之-AIX6.1构建Oracle 11gR2 RAC(2)

Oracle Study之-AIX6.1构建Oracle 11gR2 RAC(2)一、修改系统内核参数[root@aix209 app]#chdev -l sys0 -a ncargs=256sys0 changed[root@aix209 app]#lsattr -El sys0 -a ncargsncargs 256 ARG/ENV list size in 4K byte blocks Tr

2016-04-19 17:31:28

HA专题: Corosync+Pacemaker+drbd实现MySQL高可用

HA专题: Corosync+Pacemaker+drbd实现MySQL高可用大纲前言实验拓扑实验环境实验步骤安装前准备工作配置DRBD配置MySQL配置Corosync+Pacemaker测试我遇到的问题总结前言上篇文章我们介绍了drbd的相关原理、编译安装、简单的实现. drbd虽然可以保证数据的可靠性但是我们上次的实现还有很多的缺陷，这次我们将drbd定义为HA集群的一个资源，可以

2016-04-13 19:19:26

linux mysql 存储

Oracle Study之-AIX6.1构建Oracle 10gR2 RAC(4)

Oracle Study之-AIX6.1构建Oracle 10gR2 RAC(4)一、安装CRS补丁在安装CRS之前，需要安装补丁p6718715_10203_AIX64-5L，否则在安装时会出现“无法发现node”的错误。[root@aix203 /]#cd /home/oracle/p6718715_10203_AIX64-5L/补丁解压后，只需要以root身份运行“root.sh”即可：[r

2016-04-01 10:50:57

MySQL存储日志并使用Loganalyzer作为前端展示

MySQL存储日志并使用Loganalyzer作为前端展示为什么要使用日志在生产环境中我们可能需要一个较为完整的日志系统来查看运行中主机服务的状态和所作出的操作，我们可以在较大型的网络架构中使用ELK来实现对日志的收集、检索、前端显示，但是中小型架构中使用rsyslog足以对所有服务器的日志进行收集和检索来达到实时分析数据流量的目的。本文目标使用rsyslog将两台主机的日志信息存储到MySQL数

2016-03-30 22:34:49

mysql lamp rsyslog

MySQL生产库全库备份脚本

创建一个单独的备份用户backup，不要用root创建备份目录：mkdir -p /databackup/fullbackupmysql>grantSELECT,RELOAD,SHOWDATABASES,SUPER,LOCKTABLES,REPLICATIONCLIENT,SHOWVIEW,EVENT,FILEon&n

2016-03-29 15:09:31

mysql mysql备份脚本全库备份

NFS共享MySQL使用DNS轮询实现Web负载均衡

NFS共享MySQL使用DNS轮询实现Web负载均衡前言：今天学习了NFS，遂结合前面学习的LAMP+Bind做一个实验，实现两台Web服务器采用同一个MySQL数据库和相同的网页文件，对LAMP和Bind不了解的可以去查看我以前写的博客：AnyISalIn的文章实验拓扑图实验环境主机名IP地址实现storage.anyisalin.com192.168.2.5NFSns.anyisa

2016-03-29 12:12:11

基于flume的日志管理系统实现

Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。我们选用flume对内部多个系统的日志进行信号的采集、管理和查询，目前仅实现了信息管理功能，进一步会对报警、统计等功能进行开发。

2016-03-07 15:31:05

ansible的roles介绍和实战

roles 用于层次性、结构化地组织playbook。roles 能够根据层次型结构自动装载变量文件、tasks以及handlers等。要使用roles只需要在playbook中使用include指令即可。简单来讲，roles就是通过分别将变量(vars)、文件(file)、任务(tasks)、模块(modules)及处理器(handlers)放置于单独的目录中，并可以便捷地include它们的一

2016-03-03 17:21:22

tasks roles handlers

Percona-mysql MHA高可用实战方案

前言MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司youshimaton(现就职于Facebook公司)开发，是一套优秀的作为MySQLy高可用环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作，并且在进行故障切换过程中，MHA能在最大程度上保

2016-03-03 10:18:06

ansible的条件判断、迭代执行、tags

在ansible中支持条件判断，这使我们操作更加灵活使用when进行条件测试示例1：将 testservers 组中的其中一台主机上的 httpd 服务卸载掉，另外主机不卸载[root@node1ansible]#ansibletestservers-mshell-a'rpm-qhttpd'

2016-03-02 17:02:46

corosync+drbd+mysql实现的高可用

要求：一、能够在同一网段内直接通信二、节点名称，要和uname的结果一样，并保证可以根据节点名称解析到节点的IP地址，配置本地/etc/hosts三、SSH互信通信四、保证时间同步环境准备配置：test1,192.168.10.55配置1、配置IP地址[root@test1~]#vim/etc/sysconfig/network-scripts/ifcfg-et

2016-02-26 14:16:34

heartbeat corosync

基于pt-query-digest的慢查询日志持续追踪

percona-toolkit被称为MySQL DBA的“瑞士***”，其强大性不言而喻。而其中的慢查询分析工具“pt-query-digest”相比官方的“mysqldumpslow”提供了很多额外的属性，例如灵活的过滤器，基于库和表的分析排序等等。今天分享一例基于“pt-query-digest”和邮件自动追踪MySQL慢查询日志的小脚本，同时避免对同类型的sql语

2016-02-25 15:19:36

mysql慢查询 mysql 慢查询追踪 pt_query_di

【解决】MySql 5.6 运行崩溃错误

【解决】MySql 5.6 运行崩溃错误最近弄了一台云主机，配置是20G磁盘空间，1G运行内存的Linux服务器。在上面安装了LAMP（RHEL7.2+Apache2.4+MySql5.6+PHP5.6），然后搭建wordpress网站，可是网站运行没多久，就出现了连接不上数据库。到服务器上使用：ps -aux |grep mysql，发现MySql服务并没有运行，很纳闷怎么运行好好的，就自己停止

2016-02-20 14:30:00

MySql 运行崩溃

MySQL主主互备结合keepalived实现高可用

试验环境：master：192.168.1.210（CentOS6.5）slave：192.168.1.211（CentOS6.5）VIP：192.168.1.208MySQL主主互备模式配置step1：Master服务的/etc/my.cnf配置[mysqld] basedir=/usr/local/mysql datadir=/var/lib/m

2016-02-12 23:11:52

Mysql热备xtrabackup的使用

InnoDB 有个商业的InnoDB Hotbackup，可以对InnoDB引擎的表实现在线热备。而 percona出品的Xtrabackup，是InnoDB Hotbackup的一个开源替代品，可以在线对InnoDB/XtraDB引擎的表进行物理备份。mysqldump支持在线备份，不过是逻辑备份，效率比较差。当数据量比较小的时候，mysqldump还可以胜任，当数据量大的时候，恢复时间却让人无法忍受，于是开源工具xtrabackup就应运而生了，xtrabackup属于物理备份，效率很不错。

2016-02-01 17:57:58

mysql 数据库 xtrabackup

CentOS 5.11下Oracle 11G R2 Dataguard搭建

Datagard算是Oracle企业版的一种容灾方案，在企业中广泛应用，我就将搭建过程记录下来以作备用。主机名数据库版本实例名IPdb1Oracle 11G R2&nbsp

2016-01-22 12:08:27

oracle dataguard

Zabbix错误提示MySQL server has gone away解决

相信细心的同学在使用Zabbix的过程中，会遇到[Z3005] query failed: [2006] MySQL server has gone away 这个错误提示，虽然出现错误提示，但实际并不会影响Zabbix Server的正常使用。那么，这个问题能不能解决呢？本文将带你彻底解决此问题的出现。

2016-01-10 17:08:08

错误提示 Zabbix

zabbix监控oracle 12c

zabbix监控oracle 12c前言某公司需要监控Oracle 12C，采用orabbix是zabbix监控oracle数据库的插件，修改一些地方就可以监控了。一.安装配置mkdir /opt/orabbixcd /opt/orabbixmv conf/config.props.sample conf/config.propscp init.d/orabbix /etc/init.

2016-01-07 16:29:11

zabbix oracle 12c

Rsyslog介绍以及结合loganalyzer进行日志分析

1.syslog介绍：日志服务在CentOS 5上默认为syslog，而6上全部升级为rsyslog。Rsyslog是syslog的增强版，提供了很多高级的特性。syslog由两个功能程序构成，klogd和syslogd，klogd记录Kernel产生的日志信息，而syslogd是普通的日志信息。除了一些高级特性，Rsyslog和syslog的整体框架基本一致。2.Rsyslog的特

2016-01-03 20:23:03

日志分析日志服务器 rsyslog

【原创】mysql 错误缓冲堆栈

MySQL 错误缓冲堆栈

2015-12-25 12:10:25

MySQL 存储函数

MySQL5.7多实例自动化部署脚本

一、安装说明------------------------------------------------------mysql5.7.10_onekey_install.sh自动化部署脚本支持mysql5.7.10初始化安装，多实例创建，且使用经过优化后的my.cnf配置文件和mysql.server启动脚本，该SHELL脚本在CentOS6.5_x86_64操作系统测试通过。部署示意图如下：

2015-12-22 18:10:31

自动化部署配置优化 mysql5.7.10

【原创】REDIS与MYSQL实现标签的对比

REDIS与MySQL标签实现分析

2015-12-16 10:17:49

CentOS6上mongodb连接数无法突破1000的解决办法

问题描述：生产环境发现CPU满负荷运行，MongoDB的连接数始终突破不了1000。解决方案：1、查看mongodb的日志，报下面的错误：WedNov2115:26:09[initandlisten]pthread_createfailed:errno:11Resourcetemporari

2015-12-15 16:25:33

ulimit 最大连接数 nproc

简单使用packetbeat

在前面两篇文章中记录了使用logstash来收集mysql的慢查询日志，然后通过kibana以web的方式展示出来，但在生产环境中，需求会更复杂一些，而且通过logstash写正则，实在是个费时费劲的事。例如在生产环境中会有要求分析某个时间段mysql或者mongodb的慢查询日志情况；还有I/O吞吐量；这个时间段内经常执行的查询语句，http访问情况等信息；然后将分析出来的结果以图表的形式展现出

2015-12-14 17:15:42

packetbeat elasticsea

MySQL5.6.26升级到MySQL5.7.9实战方案

MySQL5.6.26升级到MySQL5.7.9实战方案前言某大公司升级方案，由于公司经常安全扫描，每个版本都有自身的BUG，为了安全到一定时间都会升级到新的版本。本案例采用单机环境升级方案，在单机中搭建主从方案。1.单机环境IP:172.16.0.111系统：SUSE 11M

2015-12-11 12:41:13

MYSQL5.7 mysql升级

【原创】Oracle实现PGSQL的generate_series

Oracle 实现PGSQL的GENERATE_SERIES功能

2015-12-09 13:47:07

ORACLE POSTGRESQL

logstash推送mysql慢查询日志

本文将将介绍通过logstash用来收集mysql的慢查询日志，然后推送给elasticsearch，并创建自定义的索引，最终通过kibana进行web展示。环境介绍：操作系统版本：centos6.664bitMysql版本：mysql5.6.17与mysql5.1.36Logstash版本:logstash-2.0.0.tar.gzElasticsearch版

2015-12-03 14:40:36

mysql slowlog logstash

DRBD+Heartbeat+MySQL高可用

一、规划系统 CentOS 64bitDRBD版本 9.0.0Heartbeat版本 3.0.6MySQL版本 5.6.27DRBD

2015-11-16 12:24:10

【原创】MySQL5.7 虚拟列实现表达式索引

MySQL5.7 实现表达式索引

2015-11-13 11:31:23

索引 MySQL5.7 generated c

【原创】MySQL5.7 JSON类型使用介绍

MySQL5.7 JSON类型简单使用介绍

2015-11-10 15:17:37

MySQL备份方案（综述及脚本）

1.环境说明系统为centos 6.5需要安装mutt和msmtp并可以发送邮件需要安装python 2.6.6需要安装xtrabackup2.备份方案功能模块介绍备份：&

2015-10-29 14:25:36

mysql innodb xtrabackup

saltstack 添加计划任务

前面己经说过如何安装saltstack，在平时己经体验了它的强大，下面来说一下平时常用的cp模块及cron与sls文件的书写一、salt.modules.cp1、复制文件[我使用最多的] 格式：salt.modules.cp.get_file(path,dest,saltenv='base',makedirs=False,te

2015-10-24 18:22:28

两套mysql备份脚本

一套mysql逻辑备份脚本，以及一套基于xtrabackup的全量 + 增量支持自动恢复的脚本

2015-10-19 10:10:16

mysql备份脚本

shell脚本：监控MySQL服务是否正常

监控MySQL服务是否正常，通常的思路为：检查3306端口是否启动，ps查看mysqld进程是否启动，命令行登录mysql执行语句返回结果，php或jsp程序检测（需要开发人员开发程序）等等；方法1：监听3306端口#!/bin/bash #writtenbymofansheng@2015-10-15 port=`netstat-nlt|grep3

2015-10-15 17:21:02

linux mysql shell

阿里云RDS实例CPU超过100%

问题：收到报警说是RDS实例的CPU满负荷,实例偶尔出现卡住的现象分析：cpu消耗过大有慢sql造成,慢sql包括全表扫描，扫描数据量太大，内存排序，磁盘排序，锁争用等通常这种情况都是由于sql性能问题导致的，查看云监控发现查看慢查询SQL运行报告发现好多慢查询语

2015-10-11 00:07:50

阿里云RDS RDS实例CPU超过1 mysqlcpu超过1

MySQL中AES_ENCRYPT('密码','钥匙')函数可以对字段值做加密处理

MySQL中AES_ENCRYPT('密码','钥匙')函数可以对字段值做加密处理 AES_DECRYPT(表的字段名字,'钥匙')函数解密处理例，表结构：现在插入一条数据，对passwd密码字段加密。INSERTINTOcredit_card(cid,NAME,email,passwd)&nbsp

2015-10-10 17:07:31

MariaDB 10.0.X中，动态列支持 JSON 格式来获取数据。

MariaDB 10.0.X中，动态列（Dynamic Columns），可以支持 JSON 格式来获取数据。为了兼容传统SQL语法，MariaDB 10和MySQL5.7支持原生JSON格式，即关系型数据库和文档型NoSQL数据库集于一身。使用说明：###表结构createtableassets( item_namevar

2015-09-12 22:51:46

json mongodb 动态列

Python[10] mongodb模块

今天和大家分享一个python入库mongodb的脚本。。。涉及到python和mongodb，那么安装相应的模块四必不可少的，最简单的安装方法，或者非pip不可了。#pipinstallpymongo==3.0.4顺便也记录下源码安装的方式#wgethttps://pypi.python.org/packages/source/p/py

2015-09-06 23:47:22

上一页 1 ··· 9 10 11 12 13 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营