直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

存储软件

2177内容

关注

内容覆盖存储系统、存储组件、存储虚拟化、对象存储等相关软件产品，为用户提供存储软件行业的业界动态、产品资讯、前沿技术、应用案例等内容，帮助用户构建高性能、高可用、高安全的存储系统，提高存储性能和利用率，简化存储管理。

共 2177 条

Golang 官方推荐使用的 Redis 客户端 Redigo

本文我们介绍了 Golang 官方推荐的操作 Redis 的三方库 redigo，它仅需使用 Do 函数执行 Redis 所有命令，它还提供了很多助手函数帮助我们更加方便操作 Redis。

2021-08-01 23:18:21

Redis Golang 命令

共享内存 & Actor并发模型到底哪个快？

共享内存利用多核CPU的优势，使用强一致的锁机制控制并发，各种锁交织，稍不注意可能出现死锁，更适合熟手。

2021-07-30 13:35:43

共享内存 Actor

SSD为什么不能当做内存用？

为什么 SSD 不能当做内存用?在回答这个问题之前我们先去某东上逛一圈。

2021-07-30 06:49:40

基于Redis的分布式锁和Redlock算法

在单进程的系统中，当存在多个线程可以同时改变某个变量(可变共享变量)时，就需要对变量或代码块做同步，使其在修改这种变量时能够线性执行消除并发修改变量。

2021-07-30 00:09:21

Redlock 算法 Redis

让 Hangfire 使用 MongoDB 存储

MongoDB 支持Hangfire库。通过使用这个库，您可以将所有作业信息存储在 MongoDB 中。要安装 Hangfire MongoDB Storage，请在 Nuget 包管理器控制台中运行以下命令。

2021-07-27 05:05:46

MongoDB 存储 Hangfire

MySQL存储底层技术：InnoDB底层原理解读

很多文章都是直接开始介绍有哪些存储引擎，并没有去介绍存储引擎本身。那么究竟什么是存储引擎?不知道大家有没有想过，MySQL是如何存储我们丢进去的数据的?

2021-07-23 13:34:50

MySQL 存储 InnoDB

MySQL高级进阶：关于InnoDB存储结构，一文深入分析讲解

在InnoDB存储引擎的索引里，存在一些数据存储结构的概念，这一节先了解一下InnodDB的逻辑存储结构，为索引的学习打好基础。

2021-07-23 13:22:49

InnoDB 存储结构

IO 异常输出排查指南

在嵌入式开发过程中，IO 操作是不可避免的，很多时候 IO 操作很正常，但有些时候可能因为某些原因导致异常输出，或者说不是你想要的输出(本来应该一直输出高电平，突然出现一个低电平)。

2021-07-15 23:16:09

IO 异常排查

SpringBoot集成Redis用法笔记

今天给大家整理一下SpringBoot集成Redis用法笔记，希望对大家能有所帮助!不需要等待磁盘的IO，在内存之间进行的数据存储和查询，速度非常快。当然，缓存的数据总量不能太大，因为受到物理内存空间大小的限制。

2021-07-11 07:05:28

Redis SpringBoot 用法

Redis 是怎么想的？用跳表来实现有序集合

干过服务端开发的应该都知道 Redis 的 ZSet 使用跳表实现的(当然还有压缩列表、哈希表)，我就不从 1990 年的那个美国大佬 William Pugh 发表的那篇论文开始了，直接开跳

2021-07-09 11:59:25

Redis 有序集合

消息的存储-RocketMQ知识体系之三

CommitLog是消息存储文件，所有消息主题的消息都存储在CommitLog文件中;该文件默认最大为1GB，超过1GB后会轮到下一个CommitLog文件。

2021-07-07 15:29:52

存储 RocketMQ 体系

在Kubernetes中手动恢复Rook存储集群

Rook将文件、数据块和对象存储系统引入到Kubernetes集群，与其他正在使用存储的应用程序和服务一起无缝运行。

2021-07-06 07:46:16

Kubernetes Rook 存储

Redis 实战篇：GEO 助我邂逅附近女神

经纬度是经度与纬度的合称组成一个坐标系统。又称为地理坐标系统，它是一种利用三度空间的球面来定义地球上的空间的球面坐标系统，能够标示地球上的任何一个位置（小数点后7位，精度可以到1厘米）。

2021-07-05 08:41:49

Redis GEO 系统

5张图带你了解Pulsar的存储引擎BookKeeper

Apache BookKeeper是一款企业级存储系统，最初由雅虎研究院研发，在2011年作为Apache ZooKeeper的子项目进行孵化，在2015年1月成为 Apache顶级项目。

2021-07-04 22:27:42

存储 BookKeeper 系统

自研高性能的Redis中间件

目前业界有很多Redis Proxy，比如鼎鼎大名的Codis。用别人的产品多少会感觉内心不爽。作为一个爱造的程序员，当然也要自己写一个Redis Proxy了。

2021-07-04 14:20:16

Redis 中间件高性能

Ceph分布式存储系统优化分析

本文介绍了Ceph分布式存储系统的发展历史和特点，并从内部优化机制、面向硬件设备和应用场景这3个方面梳理了现有的性能优化方法。

2021-07-04 07:07:06

Ceph 分布式存储架构

一个 Redis 的雪崩和穿透问题，小学妹画了个图，结果入职了

字符串 "Java" 在经过四个映射函数操作后在位图上有四个点被设置成了 1。当我们需要判断 “ziyou” 字符串是否存在的时候只要在一次对字符串进行映射函数的操作，得到四个 1 就说明 “Java” 是可能存在的。

2021-07-03 08:56:34

Redis 雪崩穿透

小林差点崩溃了，还好有主从复制

主服务器可以进行读写操作，当发生写操作时自动将写操作同步给从服务器，而从服务器一般是只读，并接受主服务器同步过来写操作命令，然后执行这条命令。

2021-07-01 18:55:39

主从复制 Redis

前端百题斩之我从浏览器控制台看到了五种存储方式

打开浏览器的开发者工具中的Application部分，可以看到浏览器支持五种存储方式：localStorage、sessionStorage、IndexedDB、WebSQL、Cookie。

2021-07-01 07:05:31

浏览器存储

图解 | 深入理解跳表及其在Redis中的应用

跳跃列表是一种数据结构。它允许快速查询一个有序连续元素的数据链表。跳跃列表的平均查找和插入时间复杂度都是O(log n)，优于普通队列的O(n)。

2021-06-30 17:55:34

Redis 应用跳表

一文彻底搞懂“内存管理” 原创

笔者面试过不少业务后台开发候选人，当问起内存管理的相关问题时，往往都会答出 JVM 的垃圾回收机制，并对 Serial、Parallel、CMS 等收集器如数家珍，侃侃而谈。

2021-06-30 08:45:02

内存管理面试

从零实现一个 K-V 存储引擎

写这篇文章的目的，是为了帮助更多的人理解 rosedb，我会从零开始实现一个简单的包含 PUT、GET、DELETE 操作的 k-v 存储引擎。

2021-06-30 07:19:36

统一缓存帝国 - 实战 Spring Cache

Spring Cache 是 Spring 提供的一整套的缓存解决方案。虽然它本身并没有提供缓存的实现，但是它提供了一整套的接口和代码规范、配置、注解等，这样它就可以整合各种缓存方案了，比如 Redis、Ehcache，我们也就不用关心操作缓存的细节。

2021-06-29 19:26:29

缓存 Spring Cach Spring

10+款Redis容器化技术选型对比，K8S并非万金油

在容器化技术方面，其实历史很久远了。虽然我们现在用的容器化技术，或者说 k8s，还有云原生的概念是近几年才火起来的，但是实际上就容器化技术的发展来说，其实是很早的了。

2021-06-29 07:19:06

Redis 容器化 K8S

大厂经典面试题：Redis为什么这么快？

Redis是基于内存存储实现的数据库，相对于数据存在磁盘的数据库，就省去磁盘磁盘I/O的消耗。MySQL等磁盘数据库，需要建立索引来加快查询效率，而Redis数据存放在内存，直接操作内存，所以就很快。

2021-06-27 22:48:28

Redis 数据库内存

缓存击穿！竟然不知道怎么写代码？？？

在Redis中有三大问题：缓存雪崩、缓存击穿、缓存穿透，今天我们来聊聊缓存击穿。关于缓存击穿相关理论文章，相信大家已经看过不少，但是具体代码中是怎么实现的，怎么解决的等问题，可能就一脸懵逼了。

2021-06-27 21:37:27

缓存雪崩穿透

Redis的Hashtable是如何扩容的

Redis中使用哈希表作为底层实现的是叫做字典的数据结构，字典又称为符号表、关联数组或映射(map)。是一种保存键值对的抽象数据结构。

2021-06-26 07:29:42

Redis Hashtable 数据

数据中台与其存储系统

数据中台就是一个组织的公共服务产品或平台，将数据加工封装成一个公共的数据产品或者服务的逻辑概念，方便前台业务或后台研发的应用，它不同于一般的简单大数据平台或者数据仓库。

2021-06-18 06:00:31

Redis分布式锁抽丝剥茧

最近首度应用"分布式锁"，现在想想，分布式锁不是孤立的技能点，这其实就是跨主机的线程同步。

2021-06-16 07:56:21

Redis 分布式锁

《吃透 MQ 系列》之 Kafka 存储选型的奥秘

从这篇文章开始，我将从微观角度切入，深入分析 Kafka 的设计原理。本文要讲的是 Kafka 最具代表性的：存储设计。

2021-06-15 15:33:36

存储选型系统

超强Redis数据类型与应用场景总结！！！

Redis大部分时间用来做缓存，因为速度快(内存数据库，单线程，单进程，Redis 6.0支持多线程，后面我们会详细讲Redis 6.0的新特性 )。

2021-06-15 09:20:08

Redis 数据类型

使用 Litmus 验证内存重排

perfbook 一书在讲 memory barrier 相关的概念时，都使用了一个叫 litmus 的工具，现在被集成在 herdtools[2] 中，安装好 herdtools 就已经有了 litmus，上面提到的所有读写重排/乱序的情况我们都可以进行测试。

2021-06-15 07:25:58

内存 Litmus 验证

在Spark中，什么叫内存计算?

由于计算的融合只发生在 Stages 内部，而 Shuffle 是切割 Stages 的边界，因此一旦发生 Shuffle，内存计算的代码融合就会中断。

2021-06-15 07:04:59

内存 Spark Stages

Redis使用不当，把应用搞挂了！

今年以来，运气都不太好。公司在大力发展，招了不少新同事。新来的同事在使用 Redis 时，写了一个 Bug，导致应用卡死。

2021-06-10 06:59:34

Redis 应用 API

分布式锁原来实现起来这么简单

阿粉最近迷上了 Redis，为什么呢?感觉 Redis 确实功能很强大呀，一个基于内存的 Key-Value 存储的数据库，竟然有这么多的功能，而阿粉也要实实在在的把 Redis 来弄一下，毕竟面试的时候，Redis 可以说是一个非常不错的加分项。

2021-06-10 06:57:39

Redis 存储数据库

阻塞和非阻塞的实现

我们可能都已经听过阻塞非阻塞的概念，本文以tcp中的connect系统调用为例子(基于1.12.13内核，新版的原理类似，但是过程就很复杂了，有时间再分析)，分析阻塞和非阻塞是什么并且看他是如何实现的。话不多说，直接开始。

2021-06-04 18:14:15

阻塞非阻塞 tcp

内存揭奥秘，总线解玄机

根据神秘声音的指示，他需要赶紧联系网卡找到自己大脑的另一半然后逃离这里。不料内存却告诉他，如果不赶紧把自己持久化存储起来，一旦计算机关闭他就会消失···

2021-06-04 16:14:19

内存数据化存储

NVMe 2.0规范发布：重大重组

NVM Express(NVMe) 规范系列定义了主机软件如何通过 PCI Express (PCIe)、RDMA、TCP 等多种传输方式与非易失性存储器进行通信。它是所有外形规格(U.2、M.2、AIC、EDSFF)的固态硬盘 (SSD) 的行业标准。

2021-06-04 13:05:09

妙手回春：内存泄漏诊断案例分析

虽然 Python 自带垃圾回收机制，替开发人员管理内存，并不意味着 Python 程序没有内存泄露之虞。实际上，Python 程序内存泄露问题时有发生——程序跑着跑着，占用内存越来越多，最后只能动用重启大法释放内存……

2021-06-03 21:13:03

内存 Python 管理

非常适合新手的Redis Cluster搭建过程

通过分片集群，Redis解决了写操作无法负载均衡，以及存储能力受到单机限制的问题，而且也具有故障迁移(主从切换)的功能，实现了较为完善的高可用方案。

2021-06-03 18:42:26

Redis 集群故障

谁说ODS层就是简单的数据同步？

ODS是用于支持企业日常的全局应用的数据集合，ODS的数据具有面向主题、集成的、可变的以及数据是当前的或是接近当前的特点。同样也可以看出ODS是介于DB和DW之间的一种过渡存储。

2021-06-03 08:13:30

ODS层数据同步

基于Redis的分布式锁和Redlock算法

在单进程的系统中，当存在多个线程可以同时改变某个变量(可变共享变量)时，就需要对变量或代码块做同步，使其在修改这种变量时能够线性执行消除并发修改变量。

2021-06-03 00:02:43

Redis Redlock 算法

老大让我设计亿级系统的Redis缓存...

缓存设计可谓老生常谈了，早些时候都是采用 Memcache，现在大家更多倾向使用 Redis，除了知晓常用的数据存储类型，结合业务场景有针对性选择，好像其他也没有什么大的难点。

2021-06-02 06:49:18

Redis 缓存设计.

解决甩锅的一大难题，就是留个凭证

在多个团队之间的一些业务关联上，内部可以 Rpc 的方式进行交互。某些业务其实不需要强关联，这个时候就会用消息队列进行解耦操作。比如下单后加积分，发短信通知的这类操作。

2021-06-01 13:00:52

数据库存储日志

管理数据存储策略的12种方法译文

数据存储系统对于很多组织来说通常难以管理，而随着存储容量的不断增长，其管理将变得更加困难。组织可以尝试采用一些新技术和实践，以帮助减轻存储管理负担。

2021-05-31 09:00:00

数据存储存储系统工具

IO多路复用之Select、Poll、Epoll

I/O多路复用(multiplexing)的本质是通过一种机制(系统内核缓冲I/O数据)，让单个进程可以监视多个文件描述符，一旦某个描述符就绪(一般是读就绪或写就绪)，能够通知程序进行相应的读写操作。

2021-05-31 06:50:47

Select Poll 系统

Go语言内存逃逸之谜

所谓逃逸分析就是在编译阶段由编译器根据变量的类型、外部使用情况等因素来判定是分配到堆还是栈，从而替代人工处理。

2021-05-30 19:29:12

内存 Go 语言

硬核！如何在容器中做时间漫游者

分布式数据库要实现全局一致性快照，很多方案使用时间做逻辑时钟，所以需要解决不同节点之间时钟一致的问题。

2021-05-27 16:27:27

时间容器数据库

宕机了，缓存数据没了。。。

试想一下，如果 Redis 每执行一条写操作命令，就把该命令以追加的方式写入到一个文件里，然后重启 Redis 的时候，先去读取这个文件里的命令，并且执行它，这不就相当于恢复了缓存数据了吗?

2021-05-27 05:29:29

缓存数据 Redis

日常Bug排查-系统失去响应-Redis使用不当

开发反应线上系统出现失去响应的现象，收到业务告警以及频繁MarkAndSweep(Full GC)告警。于是找到笔者进行排查。

2021-05-20 10:02:50

系统 Redis 技巧

上一页 1 2 3 4 5 6 ··· 44 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营