鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1386 条

Python[10] mongodb模块

今天和大家分享一个python入库mongodb的脚本。。。涉及到python和mongodb，那么安装相应的模块四必不可少的，最简单的安装方法，或者非pip不可了。#pipinstallpymongo==3.0.4顺便也记录下源码安装的方式#wgethttps://pypi.python.org/packages/source/p/py

2015-09-06 23:47:22

zabbix监控mysql的Discovery模板

环境：centos6.6zabbix-2.4.5mysql-5.6.24 zabbix没有自带对mysql的监控模板，网上许多模板也都是固定的监听某端口，不够灵活，如果mysql的端口很多记不清楚的话，我们就应该以lld（low level discovery）方式监控mysql。步骤：一、客户端1、监控内容的json化在客户端里，需要把监控的内容json化展示，然后服务

2015-08-20 22:29:05

mysql zabbix discovery

mongdb备份恢复

一、物理备份（拷贝文件）#!/bin/sh DATE=`date+%Y%m%d` DEL_DATE=$(date-d'-30days'"+%Y%m%d") HOST=10.10.17.27 PORT=27000 USER=admin PASSWORD=123456 DATA_DIR="/data/mongodb/navy_db/db" B

2015-08-20 09:21:00

mongdb备份恢复

zabbix企业应用之如何快速查看异常流量

最近机房总流量总是异常，然后我是不断的接到短信与电话报警，收到后通过cacti查看还是十分的麻烦与浪费时间，为了解决这个问题，我自己写了一个脚本，从数据库里获取所有主机监控数据，然后打印出流量超过10m的主机信息，这样能快速帮我判断异常流量主机。脚本是使用python编写，使用MySQLdb从zabbix数据库里获取流量数据，经过流量判断后在把数据写入到excel里。使用前需要安装MySQLdb、

2015-08-19 14:46:25

zabbix 流量查看 zabbix 异常流量 zabbix 快速查看

Oracle 学习之性能优化（四）收集统计信息

emp表有如下数据。SQL>selectename,deptnofromemp; ENAME DEPTNO ---------------------------------------- SMITH &nbsp

2015-08-18 23:22:39

Oracle 统计信息

重操旧业障碍多

客户要做在一个测试环境下部署一套oracle 11g rac，用的是虚拟机，要知道，以前我做的全是真实场景。目前还没有兄弟替我完成这个任务，只好挽起袖子亲自上阵了。全部精力放在做快消品O2O上，很久没接触系统，弄起来比较生疏。在部署过程中，遇到很多障碍，特记录于此。◆连接虚拟机实例（proxmox）客户给的是一个web方式登录，以浏览器的方式，管理虚拟机，再通过java，弹

2015-08-17 01:55:15

oracle 浏览器服务器

MySQL Study之--MySQL关闭自动commit（autocommit）

MySQL Study之--MySQL关闭自动commit（autocommit）对于mysql来讲，在事务处理时，默认是在动提交的（autocommit），以下方法可以自动关闭autocommit；案例分析：1、在mysql登录环境下修改[root@mysql2 soft]# mysql -u root -pEnter password:Wel

2015-08-11 16:59:37

【我的技术我做主】oracle调优笔记(揭开传言的面纱)

【我的技术我做主】oracle调优笔记(揭开传言的面纱)一、oracle的不解之缘别人高考报志愿，都是因为热爱那门专业，所以选择了大学的专业。还有些人报志愿是看到了未来长远的发展比较好，所以选择了大学的专业。而我呢高考志愿是如何选择的呢？家里人没啥文化，父母全是普通的老百姓，自然也没有人帮我参考报啥专业。于是和母亲商量上网查查吧，哪个专业比较好？搜着

2015-08-09 17:02:27

oracle sql 开发

LVS+keepalived+DRBD+heartbeat+mysql

IP地址规划：LVS：10.1.1.23主LVS+keepalived 10.1.1.22备LVS+keepalived主mysql：10.1.1.5DRBD+heartbeat 10.1.1.6DRBD+heartbeat 10.1.1.7VIP（heartbeat） 10.1.1.10V

2015-08-06 17:59:03

zabbix企业应用之监控mysql 5.6版本

最近很多人都问我如何为什么使用我之前博客的模板不能监控了，经过沟通发现对方的mysql版本是5.6，在进行命令行查看数据的实话，使用mysql -uxxx -pxxx -Pxxx的时候，会如下报错Warning:Usingapasswordonthecommandlineinterfacec

2015-07-23 14:40:04

zabbix监控mys zabbix moni zabbix监控mys

编译OpenSIPS使用连接源码安装的MySQL

因项目的需求，低版本的MySQL在性能上不能满足我们的需求，现在需要更换为高版本的MySQL 5.5.44.新版本的MySQL 5.5.44在性能上，比起CentOS 5.11自带的低版本的MySQL 5.0.95，至少要高一倍以上。MySQL 5.5.44的安装，我们这边就不采用源码安装而是直接使用编译好的版本。yum-yinstallgccgcc

2015-07-01 14:50:05

使用log miner 分析oracle日志

当我们不小心误操作致使数据库数据丢失、改变时，需要对数据库对象做基于时间点的恢复，找到我们需要的数据，这个时间点不能认为精确确定，我们可以通过对oracle日志进行分析，而获得无操作的精确时间点。oracle db提供了一个分析日志包logmnrlogminer 工具的使用 -------对redo log 进行挖掘，找出在某个时间点所作的DDL

2015-06-29 17:06:59

MySQL Study之--Mysql启动失败“mysql.host”

MySQL Study之--Mysql启动失败“mysql.host”系统环境：操作系统：RedHat EL55DB Soft： Mysql 5.6.4-m7通过源码包安装mysql后，在启动mysqld时出现错误：[root@rh55 mysql]# bin/mysqld_safe &[1] 15846[root@rh55 mysql]# 150610 17:04:36 my

2015-06-10 18:02:55

基于ansible role实现LAMP平台批量部署

前言作为运维人员，当面对几十台或上百台服务器需要修改某个参数或部署某个平台，你将从何入手呢？ansible的出现很好的解决了这一困扰，ansible基于Python开发，集合了众多运维工具（puppet、cfengine、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。本文带来的是基于Ansible Role实现LAMP平台批量部署。ansible简

2015-06-10 11:29:16

role 批量部署运维自动化

解密Oracle备份工具-exp/imp

解密Oracle备份工具-exp/imp无论是运维工作者还是数据库管理员，数据的备份和还原是我们日常工作的重点，制定合理的备份策略，使用合适的备份工具是每个IT人必备的技能，今天就给大家介绍Oracle的备份工具exp和imp。ORACLE数据库有两类备份方法。第一类：为物理备份，该方法实现数据库的完整恢复，但数据库必须运行在归挡模式下（业务数据库在非归挡模式下运行），且需要极大的外部存储设备，例

2015-06-08 16:52:05

Oracle Study之--AMD CPU安装Oracle 11gR2 RAC错误

Oracle Study之--AMD CPU安装Oracle 11gR2 RAC错误系统环境：操作系统： RedHat EL55 Oracle ： Oracle 11gR2 Grid + Oracle1、错误现象[root@syl1

2015-05-27 19:30:31

Oracle 数据库 RAC

PL/SQL中如何让程序每隔几秒插入一条数据

PL/SQL中如何让程序每隔几秒插入一条数据

2015-05-25 17:38:44

数据 PL/SQL 插入数据

MySQL基础建设之硬盘篇

MySQL基础建设之硬盘篇随着业务的不断增长，之前的环境越来越乱，由此欲重建整个MySQL数据库基础环境主要目的是要考虑数据冗余、性能、平衡目的是让机器的性能最大的发挥，同时比较好维护一、硬件选型1.节点统计目前已将各库进行分隔，但由于每台机器都过老过保，业务稳定但是硬件问题多多，出于节约成本，将机器数合并至两台数据库上2.数据量统计出于规划硬盘空间，需将每

2015-05-16 10:03:47

mysql 优化压力测试

Oracle Study之--NLS_DATE_FORMAT

Oracle Study之--NLS_DATE_FORMAT系统环境：操作系统：RedHat EL6 数据库： Oracle 11gR2在RMAN中设置时间格式时，报错：Oracle中 NLS_DATE_FORMAT的设置方法分类：Oracle中 NLS_DATE_FORMAT的设置

2015-05-13 19:44:21

Oracle FORMAT NLS

通过MySQL的UDFs和Trigger操作Memcached

通过MySQL的UDFs和Trigger操作MemcachedUDFs是User Defined Functions的缩写，表示MySQL的用户定义函数，应用程序可以利用这些函数从MySQL 5.0以上版本的数据库中访问Memcached写入或者获取的数据。此外，MySQL从5.1版本开始支持触发器，从而可以在触发器中使用UDFs直接更新Memcached的内容，这种方式降低了应用程序设计和编写的

2015-05-04 16:48:57

mysql Trigger memcached

mysql中的数据导入与导出

视频汇总首页：http://edu.51cto.com/lecturer/index/user_id-4626073.html为了普及mysql的基本知识，特意弄了这个章节，主要是发现第一次接触的人都不知道怎么弄，或者看不懂，所以这里就详细说下吧============================================================数据导入1.mysqlimport

2015-05-04 12:18:03

mysql 知识数据导入导出

mysql高可用方案之Keepalived+主主复制

环境规划:node1: 192.168.1.250 node2: 192.168.1.251vip: 192.168.1.201数据库: mysql-5.6.23mysqldba技术群 378190849武汉-linux

2015-04-30 12:28:57

mysql 高可用 Keepalived

mysql性能测试工具之tpcc-mysql

官网下载地址:http://imysql.com/wp-content/uploads/2014/09/tpcc-mysql-src.tgz1.用bzr客户端下载软件包[root@tong1 ~]# yum install bzr -y[root@tong1 ~]# bzr branch lp:~percona-dev/perconatools/tpcc-mysql[root@tong1 ~]#

2015-04-23 11:32:42

mysql 性能测试 tpcc-mysql

使用Logstash收集MongoDB日志并通过Zabbix报警

一应用场景描述在有些情况下，仅仅通过Zabbix去监控MongoDB的端口和各种状态还不够，MongoDB的日志监控也是很重要的。例如Mongos连接后端的Shard报SocketException错误等。二使用Logstash分析MongoDB日志要记录慢查询首先需要开启慢查询记录功能usejd05; db.setProfilingLevel(1,50) {&nbs

2015-04-23 10:22:17

zabbix mongodb logstash

Oracle Study之--DBCA建库错误

Oracle Study之--DBCA建库错误系统环境：操作系统： RedHat EL54Oracle ： Oracle 11gR2故障现象：在安装好11gR2软件后准备通过dbca创建数据库,执行dbca的时候包如下错误:[Oracle@primary ~]$dbcaOracle Net Services Configuration:## An unexpected

2015-04-20 21:42:29

Oracle DBCA 建库

MySQL子查询的优化

一、MySQL子查询的位置当一个查询是另一个查询的子部分是，称之为子查询（查询语句中嵌套含有查询语句）。子查询也是使用频率比较高的一种查询类型。因此，优化子查询，对于整个系统的性能也有直接的影响。从查询出现在SQL语句的位置来看，它可以出现在目标列中，

2015-04-19 12:38:14

MySQL 优化数据库

mysqldiff对比主从表结构是否一致

mysqldiff该工具是官方mysql-utilities工具集的一个脚本，可以实现主从服务器表结构是否一致。数据校验需要使用Percona的pt-table-checksum工具。安装：#tarzxvfmysql-utilities-1.5.4.tar.gz #cdmysql-utilities-1.5.4 #python

2015-04-17 13:10:41

mysql 主从表 mysqldiff

cobar实现mysql分片及分片集之内双节点之间的高可用

首先看节点规划：IP:192.168.0.99 Host:mgs02 Role：cobar&nbsp

2015-04-15 13:16:55

mysql 分片 cobar

mysql执行sql及慢查询监控

【前言】mysql可以记录用户执行的sql：记录到文件、表格mysql可以定义执行多少时间以上得sql属于慢查询，也会根据配置，记录相关信息到文件、表格【背景说明】公司想监控记录每天执行了哪些sql，哪些sql是慢查询，然后去优化sql【技术说明】其实只要搞清楚了mysql怎样记录执行sql的怎样记录慢查询的即可接下来就是写代码去梳理成报告，我这里使用的是python【最终效果如下】【技术细节】1

2015-04-02 21:28:32

mysql 日志 log

Oracle字符串截取和拼接应用

今天有人问了个关于Oracle字符串截取和拼接的问题，让我帮他写出SQL，看了下问题描述还比较清晰就试着解决下，利用午休时间把功能实现了，问题看似不难，但思路一定要清晰，不然就乱了，关键大量应用了Oracle的substr 和instr函数，下面贴出问题和脚本：问题：sql中一个字段值为：1788987565327、768374872394903、21437238740213483874629、2

2015-04-02 14:35:34

字符串截取拼接 su

LAMP平台的的构建、加速及压力测试

准备工作环境：RedHat 5.8 （我这里用的是redhat5.8的版本，可以根据自己的情况灵活进行选择其它的发行版，但是编译环境和依赖的库一定要具备）软件：apr-1.4.6.apr-util-1.5.4httpd-2.4.12libmcrypt-2.5.8mcrypt-2.6.8mhash-0.9.9.9pcre-8.33php-5.4.38xcache-3.0.1mysql-5.5.41-

2015-04-01 10:32:04

WEB 运维 LAMP

浅析MySQL事务隔离级别对其性能的影响

浅析MySQL事务隔离级别对其性能的影响 MySQL对事务的隔离级别共分为四个级别，分别是：1.READ UNCOMMITTED 读未提交2.&n

2015-03-26 16:30:03

MySQL 数据库事务

运维故障解析：C++库问题导致LAMP运行异常，Floating Point Exception

  今天收到同事RTX消息，反应开发机器PHP无法执行异常，报Floating point exception。第一次碰到这种怪问题，第一反应先查下这个报错是怎么回事？一查，搜到的结果是：同一个程序在一台高版本Linux上运行时没有问题,而在另一台低版本机器上运行报Floating Point Exception时,那么这极有可能是由高版本gcc链接造成的。什么意思呢？就是用高版本GCC编译的程序在低版本GCC库环境下是无法运行的。奇怪了，机器以前运行都正常，不应该存在这种情况啊。后来发现在这台机器上，除了PHP外，mysql和apache运行也报同样的错误。

2015-03-25 22:14:53

c++ Linux mysql

Oracle Study之--Oracle RAC重建控制文件

Oracle Study之--Oracle RAC重建控制文件系统环境：操作系统： AIX5.3Cluster： Oracle 10gR2 CRSOracle： Oracle 10gR2在RAC环境下重建控制文件和在单实例上类似，只是有些步骤需要注意：[oracle@aix211~]$catmkln.sh ln&

2015-03-23 18:34:27

Oracle RAC 控制文件

mysql存储引擎优化参数

MySQL配置参数优化本文来自道森学习笔记，版权归 http://wubx.net/所有MyISAM存储引擎优化涉及参数如下：Key_buffery_sizeConcurrent_insert = 2 | WAAYSBulk_insert_buffer_size=8MMyisam_recover_options=FORCEMyisam_recover_threads=1My

2015-03-19 10:48:04

mysql调优 innodb优化 myisam优化

Percona5.6自身已支持杀死慢SQL

还在为慢SQL而烦恼吗？如今Percona5.6解决了这个问题，这个补丁是由Twitter提供。通过max_statement_time参数控制（单位毫秒），默认为0，不限制，假如你定义了超过5秒的慢SQL，由DB自动杀死，那么就要设置setglobalmax_statement_time=5000;下面通过截图，看例子：可以看到，DML/DDL语句

2015-03-16 18:24:11

mysql kill slow

Oracle Study之--Oracle TimeZone升级

Oracle Study之--Oracle TimeZone升级http://tiany.blog.51cto.com/513694/1411882 Oracle 10gR2升级到Oracle 11gR2 当Oracle database从10gR2升级到11gR2之后，需要升级timezone version，以下详细介绍了timezone的升

2015-03-16 15:15:12

升级 Oracle timezone

MongoDB 日志切换（Rotate Log Files）实战

MongoDB 日志切换（Rotate Log Files）实战1. 在mongo shell下，执行logRotate命令： useadmin db.runCommand({logRotate:1})需要在mongos，mongod，config server运行。该方式的变种：a) 在unix s

2015-03-15 22:20:56

Rotate mongodb 日志切换

关于关联查询sql的一次优化过程及其他

本文中所述的离职模块：离职模块共分三个部分，分别为离职信息新增、审批中离职、已结束离职三个子模块。离职信息新增功能主要是针对被动离职，也即单位劝退、辞退或单方面解除合同的离职信息新增，此类离职一旦保存即可认为是已结束离职，所以不像审批中离职查询逻辑中十分清晰，已结束离职需要关联多表进行查询。在测试系统中进行测试时，我们发现直接执行已结束离职查询sql，在数据量为17条时，约1s，实际较慢，但尚可接受。该功能在正式系统上线后，离职数据约400条，用户简单在前端计时，约需十余秒等待，用户体验已经极差，需要从逻辑或数据库技术角度进行优化

2015-03-14 20:13:22

Mysql 索引 sql 优化

Oracle Study之--Logical Standby日志应用错误案例

Oracle Study之--Logical Standby日志应用错误案例系统环境：操作系统：RedHat EL54数据库： Oracle 11gR2一、错误现象：（在逻辑备库应用日志时）LOGMINER:session#=1(Logical_Standby$),preparerMS02pid=34OS&nbsp

2015-03-12 17:29:34

Oracle 错误案例日志应用

bootstrap+flask+mysql实现网站查询

之前那篇文章是flask+redis的，如果用flask+mysql怎么实现呢？创建数据库：CREATEDATABASE`web12306`DEFAULTCHARACTERSETutf8;创建表：CREATETABLE`web12306`(

2015-03-10 20:25:58

mysql 数据库文章

写一个监控平台的思路总结和实践

这几天一直在研究如何出图，经过几天的思考终于写出了一个简单的运维监控画图的雏形，下面就贴出来与大家分享,因为我的数据量比较小，所以我直接从客户端用脚本收集数据，发送给远程的mysql服务器，mysql服务器上面部署了,django,结合画图工具出图: 监控拓扑:下面给出代码展示:监控连接数：1、脚本收集远程入库入库:[root@mail

2015-03-06 11:22:47

mysql 服务器监控

运维自动化之ansible playbook一键化安装mysql主从

今天qq群里有朋友讨论使用ansible创建mysql主从的问题，正好我公司之前有需求，我就写了这个模块，现在分享给大家。一、各软件版本1、docker版本Clientversion:1.3.2 ClientAPIversion:1.15 Goversion(client):go1.3.3 Git&nb

2015-03-05 16:50:38

mysql ansible 自动创建主从

Spring(AbstractRoutingDataSource)实现动态数据源切换

一、前言近期一项目A需实现数据同步到另一项目B数据库中，在不改变B项目的情况下，只好选择项目A中切换数据源，直接把数据写入项目B的数据库中。这种需求，在数据同步与定时任务中经常需要。那么问题来了，该如何解决多数据源问题呢？不光是要配置多个数据源，还得能灵活动态的切换数据源。以spring+hiberna

2015-02-28 11:17:03

spring AbstractRou 多数据源动态切换

MySQL5.6 crash-safe replication一个坑

事情起因：唯品会一个DBA找到我，说他们的slave掉电，再重启服务器以后，同步复制就挂了，报1032和1062错误，首先排查了在从库上没有写操作，之后询问了他们的参数。这是他们的参数：sync_master_info=1 sync_relay_log_info=1 relay_log_info_repository=FILE

2015-02-27 17:34:57

crash slave mysql5.6

阿里云ECS的一次简单试用

第一次试用阿里云ecs服务器的过程,我觉得它很适合没用过云服务器的新手,推荐大家使用/试用。毕竟免费6个月,还是挺划算的。

2015-02-25 12:46:05

代理服务器数据中心 mysql密码

当root.sh与ORA-15031相遇

  错误ORA-15031的提示，还是很明显的，无法识别对应的voting磁盘，正常解决思路，就是检查磁盘是否正常挂载，权限是否正确等，需要逐项检查。

2015-02-15 17:00:13

root.sh ORA-15031 ORA-15018

MongoDB 使用副本集备份添加新的辅助副本成员

问题描述：在生产环境中，当辅助副本成员的读压力很大时，可通过添加新的辅助副本成员来缓解压力。为了能实现主副本成员不停机，并减轻主副本成员的压力，可在辅助副本成员上mongodump备份数据；为了实现新的辅助副本成员的快速恢复，可直接通过以NFS方式挂载辅助副本成员到做备份操作的辅助副本成员上；为了保证数据的一致性，在mongodump数据的时候使用—oplog参数，mongoresto

2015-02-13 17:17:06

mongodb 副本集 replset

将Uhost上的MySQL迁移到UDB

一应用场景描述最近我们部署在Ucloud的一台云主机由于底层硬件故障，Ucloud建议将这台云主机作动态迁移，但是由于这台服务器上部署有MySQL数据库，数据量太大，云主机迁移会很慢。所以我们需要先将这台云主机的MySQL迁移到UDB,然后切换程序里面的MySQL配置。二具体操作步骤1.将Uhost上的MySQL导出一份mysqldump -A --ignore-table=mys

2015-02-08 11:28:49

Oracle Study之--基于ASM的TSPITR（基于表空间的完全恢复）

Oracle Study之--基于ASM的TSPITR（基于表空间的完全恢复）系统环境：操作系统：AIX5.3-08数据库： Oracle 10gR2Understanding RMAN TSPITRIn order to use TSPITR effectively, you need to understand what problems it can solve for you,

2015-01-28 12:15:56

Oracle ASM TSPITR

上一页 1 ··· 10 11 12 13 14 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营