Redis被bgsave和bgrewriteaof阻塞的解决方法

运维 系统运维 Redis
Redis 是一个性能非常高效的内存 Key-Value 存储服务, 同时它还具有两个非常重要的特性: 1. 持久化; 2. Value 数据结构. 这两个特性让它在不少场景轻松击败了 Memcached 和 Casandra 等.

Redis 是一个性能非常高效的内存 Key-Value 存储服务, 同时它还具有两个非常重要的特性: 1. 持久化; 2. Value 数据结构. 这两个特性让它在不少场景轻松击败了 Memcached 和 Casandra 等.

    Redis 的持久化在两种方式: Snapshotting(快照) 和 Append-only file(aof). 在一个采用了 aof 模式的 Redis 服务器上, 当执行 bgrewriteaof 对 aof 进行归并优化时, 出现了 Redis 被阻塞的问题, 此时, Redis 无法提供任何读取和写入操作.

    按字面理解, bgrewriteaof 是在后台进行操作, 不应该影响 Redis 的正常服务. 原理也确实是这样的, Redis 首先 fork 一个子进程, 并在该子进程里进行归并和写持久化存储设备(如硬盘)的. 按照正常逻辑, 在一台多核的机器上, 即使子进程占满 CPU 和硬盘, 也不应该导致 Redis 服务阻塞啊!

    其实, 问题就出在硬盘上.

    Redis 服务设置了 appendfsync everysec, 主进程每秒钟便会调用 fsync(), 要求内核将数据”确实”写到存储硬件里. 但由于子进程同时也在写硬盘, 从而导致主进程 fsync()/write() 操作被阻塞, 最终导致 Redis 主进程阻塞了.

    解决方法便是设置 no-appendfsync-on-rewrite yes, 在子进程处理和写硬盘时, 主进程不调用 fsync() 操作. 注意, 即使进程不调用 fsync(), 系统内核也会根据自己的算法在适当的时机将数据写到硬盘(Linux 默认最长不超过 30 秒).

【编辑推荐】

  1. Clojure世界:如何做性能测试
  2. Windows安全最高境界
  3. IE8安全新功能实测,到底给不给力?
责任编辑:赵宁宁
相关推荐

2018-08-29 08:43:11

2017-08-31 15:57:53

数据Oracle用户密码

2010-11-02 16:02:59

db2表空间

2009-02-27 15:04:00

2010-07-15 14:01:12

telnet乱码

2011-08-23 16:36:05

SQL Server 数据库被标记为可疑

2009-05-25 09:41:17

SQL Server 可疑日志

2009-08-18 13:52:57

Ubuntu用户名密码

2009-12-17 10:09:02

ssh超时断开

2023-04-06 15:21:34

IIoT自动化

2011-03-01 13:40:45

500 OOPS

2009-09-10 09:35:25

Linq语句

2010-10-13 17:22:12

MySQL查询乱码

2010-04-20 16:46:41

Oracle数据库密码

2009-07-03 18:14:27

Servlet线程安全

2011-03-22 10:05:58

2021-06-04 18:14:15

阻塞非阻塞tcp

2010-05-27 09:56:54

SVN文件冲突

2017-05-27 15:45:00

Windows 10Windows更新

2010-10-29 13:55:48

Oracle日志文件
点赞
收藏

51CTO技术栈公众号