直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

数据库

1.5w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1388 条

expdp报ORA-04030 out of process memory错误

操作系统：AIX6.1Oracle数据库版本：11.1.0.7.01、使用expdp导出的时候，报ORA-04030:outofprocessmemorywhentryingtoallocate120048&

2013-12-10 23:34:27

expdp报ORA-0 expdp导出数据库导入导出

无归档,无备份，rm误删除所有数据文件恢复(四）

恢复的原理，请查看关于该恢复主题的第一篇博文：http://fly1116.blog.51cto.com/8301004/1337681恢复过程使用的fly.sh脚本，及其他脚本的简要介绍，请看关于该恢复主题的第二篇博文：http://fly1116.blog.51c

2013-12-09 22:17:55

oracle备份恢复无归档无备份

基于gevent和pymysql实现mysql读写的异步非堵塞方案

咱们经常使用的mysql库，MySQL-Python库是用C写的，很遗憾它是阻塞的，要实现异步的MySQL驱动必须用Python版本的MySQL驱动！现在社区里面有两个纯python实现的mysql驱动。一个是 myconnpy 另一个是PyMysql ~ 这两个mysql驱动文档相当的少呀，好在他们的用法和MySQldb相当的像，不然就要头疼的看代码了。。。实现的方式是用sock

2013-12-08 23:09:54

python geve python pymy python 堵塞

AMDU-- ASM文件转移工具

近日遇到一个问题，就是ASM diskgroup无法挂载，通过分析之后，发现有会快存在，但是由于没有备份，没有办法重建diskgroup并从backup恢复--所以所以所以....备份很重要啊！不然，哭！！是早晚的事情！

2013-12-02 11:32:30

asm 数据文件损坏 AMDU

MongoDB实战（12）Replica Sets + Sharding

MongoDB的Replica Sets与Sharding结合使用~~~~

2013-11-26 23:08:38

MongoDB实战（11）Sharding 分片（下）

这是一种将海量的数据水平扩展的数据库集群系统，数据分表存储在sharding 的各个节点上，使用者通过简单的配置就可以很方便地构建一个分布式MongoDB 集群。

2013-11-25 22:35:07

分片 MongoDB Sharding

MongoDB实战（11）Sharding 分片（上）

这是一种将海量的数据水平扩展的数据库集群系统，数据分表存储在sharding 的各个节点 上，使用者通过简单的配置就可以很方便地构建一个分布式MongoDB 集群。

2013-11-24 13:15:22

分片 MongoDB Sharding

Oracle利用存储过程返回结果集开发报表

在Oracle开发过程中，经常会遇到各种形式的报表展示，有些报表用sql语句直接是写不出来的，需要程序与sql配合着实现，但是这样写出来的报表查询速度慢，而且不利于维护，这里给大家分享一下UncleToo经常用的报表开发方式。

2013-11-21 19:31:04

Oracle 程序开发

Mongodb千万级数据在python下的综合压力测试及应用探讨

曾经在收集数据的项目中，用过mongodb的数据存储，但是当数据很大的时候，还是比较的吃力。很可能当时的应用水平不高，也可以是当时的服务器不是很强。所以这次能力比以前高点了，然后服务器比以前也高端了很多，好嘞 ~再测试下。（更多的是单机测试，没有用复制分片的测试～）！相比较MySQL，MongoDB数据库更适合那些读作业较重的任务模型。MongoDB能充分利用机器的内存资源。如果机器的内存资源

2013-11-21 01:40:57

pymongo python mong python pymo

RedHat 5.6_x86_64 + ASM + RAW+ Oracle 10g RAC （六）

十、常见报错1、报错1nodeNames = jason1,jason2,INFO: Query Returned: PRKC-1044 : Failed to check remote command executionsetup for node jason1 using shells /usr/bin/ssh and /usr/bin/rsh jason1: Connection refus

2013-11-20 09:30:02

RAW ASM RedHat 5.6_

MongoDB实战（7）索引与性能

关于MongoDB的索引操作，实例，以及慢查询设置和查询，方便我们优化性能！~~

2013-11-16 22:10:56

性能索引 MongoDB

基于python的REST框架eve测试与mongodb的数据操作

Eve是一款Python的REST API框架，用于构建和部署高可定制的、全功能的RESTful的Web服务。Eve是一个开源项目，遵循BSD开源协议，已在Python 2.6、2.7以及Python 3.3版本下进行了非常全面的测试。特色强调REST非常全面的CRUD操作可自定义的资源端点自定义多个项目端点筛选和排序分页HATEOASJSON和XML渲染条件请求数据完整性和并发控制多个添加操作数

2013-11-16 11:36:52

python eve eve restful python mong

MySQL数据“误”删“攻防”战

相信各位线上都可能遇到过或者听到过数据被应用程序“误”删，可能因为拼SQL导致谓词为永真删除或者更新了全部数据？或者虚惊一场？因此，面对这种情况我们要能：1.“攻”：如何防止这种情况发生2.“守”：如果发生了怎么办对于“攻”：因为我们是MySQL，主要拿MySQL举例：1.sql_safe_update：当设置为1时对于update：如果谓词没有索引并且没有limit会被拒绝对于delete：如果

2013-11-14 23:48:04

误删 mysql safe

循序渐进学Oracle之复杂查询(重点)

前言在实际应用中经常需要执行复杂的数据统计,经常需要显示多张表的数据,故必须要高度重视: 复杂的select语句!1-数据分组的重要函数: max、min、avg、sum、count(1)查询出所有员工中最高薪水和最低薪水者及其姓名的信息.(2)查询出所有员工的平均工资和工资总和(3)计算共有多少员工(4)查询出工资最高和最低的员工的名字、工作岗位(5)查询出工资高于平均工资的员工信息(6)查询

2013-11-13 23:13:34

复杂查询 Oracle多表查询循序渐进学Oracle

说说IOT和mapping table的那些事---几句话道出真相

作为培训师多年，当学员学完1Z0-043的第10章或11g相关章节时，经常搞不清IOT和mappingtable的那些事，就请让我几句话道出这俩位的真相：1）当你创建了一个IOT表，想在上面的其中一列（当然是非主键的其他列）建立位图索引（注意不是普通的b树），你必须建立一个mappingtable。----必需的，注意到没有mappingtable时的报错信息了吗？2）查user_objects，

2013-11-12 12:01:20

Oracle table napping

用Shell脚本在推出的RAC节点上批量部署32个Oracle11gR2 RAC备份恢复案例场景的方法PART1

本文前半段介绍：用PXE推送端主机，把原先处于裸机状态的三台一套 PXE被推送端主机批量推成Oracle 11gR2 RAC环境的方法。在每套推出的Oracle 11gR2 RAC环境中，都包含已自动安装并配置好的三台主机：一台共享磁盘主机和两台节点主机。每套推出的Oracle 11gR2 RAC环境中的两台节点主机都已自动挂接上该套环境内部的共享磁盘主机。两台节点主机各配备一个分布式虚拟磁带库，并且做好所有操作系统层面的配置：包括vip、scan-vip、ntp，各种rpm包和操作系统参数等。       本文后半段介绍：如何复用以上的PXE推送端主机作为部署平台，在每套推出的Oracle 11gR2 RAC环境中部署32个Oracle11gR2 RAC备份恢复案例场景脚本。脚本基于网络执行并批量部署；脚本同时支持下载到每一台Oracle11gR2 RAC节点主机本地运行。脚本能模拟和评测每一套环境每一个备份恢复场景的恢复结果。       本文中所提及的所有原创程序均提供下载和md5sum文件。读者使用这些程

2013-11-11 10:09:53

批量部署 Oracle脚本 RAC节点

主从不同步故障案例一

故障原因：开发人员在主库上修改了一张表的结构，加了一个字段，从库由于各种原因没有同步过去，导致主从同步失败。故障处理：1、查看在从库上查看同步状态：mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Waiting for maste

2013-11-08 11:55:20

故障案例主从不同步

pt-online-schema-change 工具使用

pt-online-schema-change 在线更新表结构

2013-11-03 11:46:20

mysql pt-online-s 在线更新表结构

批量查看mysql多从状态和修改多从主库指向

本脚本主要解决批量查看mysql多从状态和修改多从主库指向，并打印出执行结果。适用于主库没有做高可用或是做高可用但是V-IP没有漂移到新的主库上的问题。代码如下：#!/usr/bin/env python # -*- coding: utf-8 -*- import MySQLdb,sys,os,threading,time user = 'root' passwd = '1q2w3e4r' #

2013-10-31 11:32:46

高性能的MySQL（6）查询执行机制（下）

这是MySQL查询机制下，和之前的上是一部分，作为一个补充!

2013-10-28 19:46:19

mysql 查询机制

【视频教学：性能优化】Maclean Liu的Oracle性能优化讲座第一回《真正读懂Oracle SQL执行计划》

【视频教学：性能优化】Maclean Liu的Oracle性能优化讲座第一回《真正读懂Oracle SQL执行计划》

2013-10-25 15:18:12

oracle 性能优化 SQL优化

当事务遇到了IO

此讨论仅限于Innodb存储引擎； DBA与研发人员沟通的时候常常会说 “拒绝大事务，这事务太大啦，拆开”，“你要批量提交”；“什么，批量提交？这岂不是成了一个大事务？” 我根据自己的理解简单说明下,拒绝大事务，批量提交是针对不同“场景”的；大事务就意味着锁持有的时间比较长（尽管Innodb是行锁）：缺点: 1、造成锁等待，其他需要同样row的事务处于lock wait状态，加大

2013-10-24 22:33:35

MySQL IO 事务

Mysql+keepalived主主切换

Mysql+keepalived主主切换一，环境介绍网络结构：VIP :192.168.1.30MYSQL A:192.168.1.21MYSQL B:192.168.1.22二、mysql主主同步要实现mysql+keepalived主主切换，首先要实现的就是两台mysql服务器的主主同步，查看http://smalldeng.blog.51cto.com/1038075/1151900三，配置

2013-10-24 16:33:41

Mysql 切换 keepalived

mysql 高性能压力测试（总结了好久）

前言：根据业务需要，需测试mysql 性能和压力测试.这里我说下测试方法和测试过程以及测试中出错的问题估计很多人跟我一样要测试mysql 的性能压力，网上找了很多资料有很多，但是很乱，所以这里我做个总结，拿自己的真实服务器测试的。并且想测多少数据都能模拟出来！这里只介绍方法。MySQL从5.1.4版开始带有一个压力测试工具mysqlslap，通过模拟多个并发客户端访问mysql来执行测

2013-10-24 13:04:36

mysql 测试性能

使用Frigga实现WEB方式对服务的监控

小米开源的进程监控工具Frigga是一款使用简单、极具扩展的进程监控的框架。她基于开源的god，修改和添加了web界面和rpc接口，以满足大集群服务管理的需求。

2013-10-22 20:14:26

web 进程监控 Frigga

高性能的MySQL（5）索引策略一压缩，冗余，重复，索引和锁

主要介绍了压缩索引、冗余索引，重复索引，以及InnoDB索引和锁的一个实例！

2013-10-21 17:26:43

在Java中实现MongoDB的Group功能

在非关系型数据库MongoDB中，并没有任何现成的框架可以像SQL那样通过Group By就轻松实现数据库的分组功能。如果我们想要实现MongoDB的Group功能，就必须写原生态的NO-SQL 查询语句来实现Group功能，这样既费时又费力，而且很容易出错，本文提供了一个封装的接口来实现MongoDB的Group功能，让程序员从此不再为MongoDB的Group而发愁。

2013-10-18 17:12:41

MongoDB MongoDB Gou No-SQL

Linux下php5.3编译oracle客户端

因项目需要在linux下进行php5.3的oracle客户端编译，简要介绍一下步骤及走过的弯路。 1.下载Oracle客户端程序包，其中包含OCI、OCCI和JDBC-OCI等相关文件。 1.1下载文件地址 http://www.oracle.com/technetwork/database/features/instant-client/index-097480.html

2013-10-17 22:15:00

oracle 下载文件 blank

RHEL6U3安装64bit Oracle 11gR2

今天接到通知，下周去一个新客户那边部署新环境，问题是时间还很紧，让下周一就去，时间紧还不是大问题，问题是产品的中间件Weblogic跟数据库Oracle我都好久没玩了，没得办法，只能提前演练一下了，为了下次找起来更加方便，就把过程整理到本博客上面来，也可以方便其他童鞋的查询吧。谁要是跟我纠结时间这么紧，哪来的时间写博客的，我跟谁急哦！方便自己，也方便大家嘛！华丽分割线一.查看系统配置信息[ro

2013-10-17 13:39:05

oracle 数据库 RHEL

数据分布影响exp条件导出变慢的问题处理

oracle10.2.0.4AIX5.3夜间跑批的一个存储过程，逻辑大致为数据库内部先进行数据处理后插入空的导出表，数据处理全部完成后，按照每个表的字段A1进行where条件过滤导出。在数据处理过程中，由于无意义的嵌套循环，导致对一张表的数据重复的进行I/O读取。数据量大后，处理变慢，优化需求就提上来了。例如：CURSOR cur_a1 is select code from cura1; LOO

2013-10-17 00:17:40

oracle 数据库 sequence

高性能的MySQL（5）创建高性能的索引一哈希索引

哈希索引的介绍，实际使用情况，以及怎么模拟一个伪哈希索引。

2013-10-16 16:44:41

MySQL 哈希索引

RAC 11gR2模拟OCR和Votedisk损坏恢复过程

1）破坏前的ocr和votedisk信息检查检查ocr自动备份[root@rac1 ~]# ocrconfig -showbackuprac2 2013/10/13 09:45:30 /u01/grid/product/11.2.0/cdata/rac-cluster/backup00.ocrrac2 2013/10/13 05:45:29 /u01/grid/product/11.2.0

2013-10-13 16:05:47

votingdisk oracle rac 磁盘损坏恢复

python写的分析mysql binlog日志工具

因为数据库增删改突然暴增，需要查询是那些表的操作特别频繁，写了一个用来分析bin-log的小工具，找出增删改查的表，并按照操作次数降序排列，以下是代码：#for mysql5.5 binlog import os,sys #python binlog.py binglog-0001 '2013-07-01 00:00:00' '2013-07-02 00:00:00' def log_w(type

2013-10-10 17:00:42

工具日志分析

mysql —— 分表分区（1）

面对当今大数据存储，设想当mysql中一个表的总记录超过1000W，会出现性能的大幅度下降吗？答案是肯定的，一个表的总记录超过1000W，在操作系统层面检索也是效率非常低的解决方案：目前针对海量数据的优化有两种方法：1、大表拆小表的方式（主要有分表和分区两者技术）（1）分表技术垂直分割优势：降低高并发情况下，对于表的锁定。不足：对于单表来说，随着数据库的记录增多，读写压力将进一步增大。水平

2013-09-26 09:49:15

Mysql+Corosync+Pacemaker+DRBD构建高可用Mysql

本次实验主要介绍Mysql的高可用集群构建；其他的不多说了，下面直接开始安装配置一、环境介绍及准备1、本次配置有两个节点：nod1.allen.com(172.16.14.1) 与 nod2.allen.com(172.16.14.2)######在NOD1与NOD2节点执行如下命令 cat > /etc/hosts << EOF 172.16.14.1 nod1.allen.c

2013-09-20 09:04:15

软件服务器

mysql dba系统学习（20）mysql存储引擎MyISAM

mysql存储引擎MyISAM1，创建myisam表mysql> create table t (id int , name varchar(30) , msg varchar(100)) engine = MyISAM; mysql> show table status like "t" \G ; *************************** 1. row ********

2013-09-12 16:56:22

Oracle10g客户端链接服务端配置

Oracle10g客户端工具plsql链接服务端配置Oracle10g客户端工具比如plsql，在网络中链接服务端问题比较多中国菜刀，经常出现很多莫名其妙的问题。实际上不是plsql的配置，问题还是出在客户端配置上面，网上有很多的解决办法，并非真正的凑效，下面说一下有效的解决办法：安装客户端为企业管理器，默认方式安装吧。安装后需要配置，这个位置位置在：D:\oracle\product\10.2.

2013-09-07 07:13:29

LAMP平台详述

#######################################LAMP平台相关组件功能简述编译安装LAMP平台编译安装LAMP之以FastCGI方式与php整合使用ab命令进行压力测试#######################################LAMP平台相关组件功能简述一、httpd 作为一款web服务器本身它仅能处理静态请求和内容，例

2013-09-03 19:14:07

Mysql中字段类型不一致导致索引无效的处理办法

本文介绍了在Mysql中当表联接的字段类型不匹配时，用cast和convert进行类型转换使索引生效的办法。

2013-09-03 15:03:31

mysql类型转换 c

找回“消失”的InnoDB引擎

夜里重做主从复制，顺便调整了下从库的my.cnf。早上想起从库忘了重启，打完命令接着开启slave，居然报错Last_SQL_Errno: 1286Last_SQL_Error: Error executing row event: 'Unknown storage engine 'InnoDB''奇怪，怎么会报错不知道存储引擎InnoD

2013-08-29 10:33:46

storage Error InnoDB

heartbeat实现基于mysql服务自动切换

由于heartbeat自身可以通过dopd来判断心跳线宕机后，能实现自动切换，但是当一些服务宕机了，就无法实现自动切换了，常见的场景有mysqld服务，有的时候会出现连接不上mysqld服务，比如超过最大连接数的时候，当然还有其他的场景，所以就写了一个脚本来实现自动监控mysqld服务状态来实现heartbeat服务状态进行切换，heartbeat+mysqld+共享存储见前面博文

2013-08-22 19:05:10

heartbeat 监控mysql

MySQL 内存交换区引起的一场“血案”

MySQLPerformancemurder--SWAP故事情节：最近公司上了一个新的项目，关于搜索一块的项目。其程序会调用大量的SQL，包括各种条

2013-08-22 00:49:36

innodb_flus MySQL swap swap对mysql性

全面解析9i以后Oracle Latch闩锁原理

Latches 是一种低级别(low-level)的锁机制，初学IT的同学请注意低级不代表简单， C语言对比java语言要低级一些但C并不比java简单。在一些文章著作中也将latch称为spin lock 自旋锁。 latch用来保护共享内存(SGA)中的数据以及关键的代码区域。   一般我们说有2种latch： 1)Test and Set 简称TAS : TAS是计算机科学中的专指， test-and-set instruction 指令用以在一个原子操作(atomic 例如非中断操作)中写入到一个内存位置，并返回其旧的值。常见的是值1被写入到该内存位置。如果多个进程访问同一内存位置，若有一个进程先开始了test-and-set操作，则其他进程直到第一个进程结束TAS才可以开始另一个TAS。关于TAS指令更多信息可以参考wiki ，包括TAS的伪代码例子:   http://t.cn/zQgATRr    

2013-08-21 12:07:14

oracle 内部原理 latch

MySQL 冗余和重复索引

冗余和重复索引冗余和重复索引的概念：MySQL允许在相同列上创建多个索引，无论是有意的还是无意的。MySQL需要单独维护

2013-08-20 13:41:20

mysql重复和冗余索解决重复和冗余索引 pt-duplicat

Oracle 行迁移 & 行链接的检测与消除

什么是行迁移 & 行链接?# 以下描述来自Oracle 11gR2 Document1. 行链接The row is too large to fit into one data block when it is first inserted.In row chaining, Oracle Database stores

2013-08-15 08:58:12

Oracle 行链接行迁移

LDAP 与 MySql 连用的JPA事物问题

本事甚是喜欢JPA简单方便明了，所以在LDAP项目要加上MYSQL数据库，但LDAP没有与jpa连用的事物处理是一个很头疼的事，找到源码发现里面只有2种对组合事物的支持：ContextSourceAndDataSourceTransactionManager LDAP与JDBC的组合支持ContextSourceAndHibernateTra

2013-07-29 17:05:21

Mysql备份讲解（全备和增量备份）

煮酒品茶：时间有点长，date那一段可以快进。比较真实，我用的什么样子，你用了也啥样子。视频优酷真正沈核中.....Mysql 备份与恢复--煮酒品茶用官方的文档讲解mysqldump备份文件(MYISAM)INNODB?数据库备份(完全备份和增量备份)mysqldump --tab=/path/to/some/dir --opt db_name--tabmysqldump创建一个包含创建表的C

2013-07-29 10:38:17

恢复 mysql 增量备份

最新LAMP×××网站平台PHP5.5.1 + Apache2.4.6 + mysql5.6.12

记录一下，今天配置的这台网站服务器，大部分都是在官方找的最新版源码包。1.下载安装所需要的最新软件源码包，包括最新的apache、mysql、php以及相关库文件的源码包。httpd-2.4.6.tar.gz：http://mirrors.cnnic.cn/apache//httpd/httpd-2.4.6.tar.gzPHP-5.5.1.tar.gz : http://hk2.php

2013-07-26 02:43:17

网站服务器 target 最新版

ORACLE常见报错之：ORA-00845: MEMORY_TARGET not supported on this system

ORACLE常见报错之：ORA-00845: MEMORY_TARGET not supported on this system1、问题的提出报错如下：[oracle@night ~]$ sqlplus /nolog SQL*Plus: Release 11.2.0.1.0 Production on Thu Jul 25 15:39:40 2013 Copyright (c) 1982,

2013-07-25 16:20:18

ORACLE 常见报错

有关puppet agent端三种备份恢复方案探讨研究

在生产环境puppet使用过程中，有时候需要在agent端更新之前将上一个版本保存下来，便于恢复使用。如果备份恢复遗留了很多问题，这里做点探讨！仅限交流！

2013-07-25 09:38:32

puppet备份恢复

上一页 1 ··· 16 17 18 19 20 ··· 28 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营