鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

存储

4984内容

关注

存储话题包括存储设备、数据管理、容灾备份、存储架构、存储软件、存储设备、超融合等内容，为用户提供行业动态、前沿技术、产品资讯、应用案例等相关内容，解决用户在数据存储过程中遇到的各种难题，提供存储性能和利用率，助力企业充分挖掘利用数据价值，加速数字化转型。

共 4984 条

Python的小数据存储，用什么格式更有逼格？

我们在编写代码的时候，经常会涉及到数据存储的情况，如果是爬虫得到的大数据，我们会选择使用数据库，或者excel存储。但如果只是一些小数据，或者说关联性较强且存在存储后复用的数据，我们该如何存储呢？

2019-11-26 09:56:48

Python 数据存储

IBM全新发布ESS3000存储，为AI/大数据等新型应用赋能

新发布的IBM ESS3000存储产品，专门针对大数据处理和人工智能分析等新型业务，采用了NVMe的全闪存，在一个标准2U机箱中提供了40GB读取和36GB写入的极致速度，具有非常高的性能表现，能够满足用户对于超算的要求。

2019-11-25 12:06:35

IBM存储 IBM 多云

如何维护超融合数据中心

超融合数据中心基础设施可以帮助企业和管理人员扩展计算资源，而无需将异构硬件集成到服务器机架中。在过去几年中，越来越多的企业希望通过超融合的产品来降低总体拥有成本，提高灾难恢复性能，并整合运营。

2019-11-25 11:02:43

数据中心 IT 技术

Redis 单线程还高并发？不冲突吗？

最近在看 UNIX 网络编程并研究了一下 Redis 的实现，感觉 Redis 的源代码十分适合阅读和分析，其中 I/O 多路复用(mutiplexing)部分的实现非常干净和优雅，在这里想对这部分的内容进行简单的整理。

2019-11-25 10:13:52

Redis 单线程 I

如何增强备份策略

无论企业的备份策略处于什么阶段，始终都有改进的空间。人们很容易将备份看作是简单地存储数据和文件的副本。虽然这是一个关键因素，但考虑在将来需要恢复和访问这些数据时会发生什么也很重要。

2019-11-22 14:10:32

存储备份数据

假如有人炸了支付宝的存储服务器...

外行人问题。网站都是有服务器的，服务器都是有实体的。那么支付宝的实体服务器所在地假如被一颗核弹/导弹等等炸了，那么大众存支付宝里的钱是不是也灰飞烟灭了呢?服务器实体的焚毁，数据也会消失不是么?

2019-11-22 10:41:13

支付宝存储服务器

一文看懂Redis的内存回收策略和Key过期策略

Redis 作为当下最热门的 Key-Value 存储系统，在大大小小的系统中都扮演着重要的角色，不管是 session 存储还是热点数据的缓存，亦或是其他场景，我们都会使用到 Redis。在生产环境我们偶尔会遇到 Redis 服务器内存不够的情况，那对于这种情况 Redis 的内存是如何回收处理的呢？

2019-11-22 09:36:00

Redis 数据存储

如何找到系统里的重复文件，快速释放磁盘空间？

不管是 Windows 电脑还是 Linux 电脑，在使用的过程中，或多或少都会留下很多重复的文件。这些文件不仅会占用我们的磁盘，还会拖累我们的系统，所以，很有必要干掉这些重复的文件。

2019-11-20 10:23:51

磁盘 Windows Linux

一文带你深入了解Redis的持久化方式及其原理

Redis 提供了两种持久化方式，一种是基于快照形式的 RDB，另一种是基于日志形式的 AOF，每种方式都有自己的优缺点，本文将介绍 Redis 这两种持久化方式，希望阅读本文后你对 Redis 的这两种持久化方式有更加全面、清晰的认识。

2019-11-20 10:07:07

Redis 数据系统

Kafka文件存储机制那些事

Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统，常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

2019-11-19 14:48:00

Kafka 文件存储

看大数据大佬手把手带你实现基于Zookeeper、Redis的分布式锁

在分布式系统中，分布式锁是为了解决多实例之间的同步问题。例如master选举，能够获取分布式锁的就是master，获取失败的就是slave。又或者能够获取锁的实例能够完成特定的操作。

2019-11-18 14:16:10

Zookeeper Redis 大数据

数据传输用上5G，存储不能停在4G

凭借超大带宽和超快的传输速度，5G将为海量数据的传输提供便利，为“大块头”数据文件提供“闪送”服务。

2019-11-14 09:45:59

5G 数据存储

以统一数据保护管理平台，为欣和数字化转型赋能原创

Commvault在全球范围内都与AWS保持着密切的合作，在降低数据管理复杂性、数据安全、无缝集成等多个角度都能够为客户提供高质量的服务。

2019-11-13 11:42:56

当 Redis 发生高延迟时，到底发生了什么

Redis 是一种内存数据库，将数据保存在内存中，读写效率要比传统的将数据保存在磁盘上的数据库要快很多。但是 Redis 也会发生延迟时，这是就需要我们对其产生原因有深刻的了解，以便于快速排查问题，解决 Redis的延迟问题

2019-11-12 14:41:41

Redis 程序员 Linux

详解 Redis 内存淘汰机制和持久化机制原理剖析Redis必备！

假设生产环境里面MySQL 数据库有 1000w 数据，Redis 中只存 10w 的数据，如何保证 Redis 中的数据都是热点数据?

2019-11-12 14:15:07

Redis 内存持久化

云原生的存储系统应该满足什么条件？

“云原生”(Cloud Native)一词在 2019 年被技术界广泛使用，但是却没有关于这个词一个特别明确的定义。主要的困惑在于，“云原生”与您的应用程序部署到的环境几乎没有关系，该术语同样适用于私有云和公共云。该术语更多的是指应用程序和体系结构的特征。

2019-11-12 09:47:34

Kubernetes Minio 存储

如何实现超高并发的无锁缓存？

有一类写多读少的业务场景：大部分请求是对数据进行修改，少部分请求对数据进行读取。

2019-11-11 15:33:34

高并发缓存数据

三大关键要素，实现高效的多云数据管理

多年来，面对不断增长的数据，IT管理人员一直努力压缩并在很大程度降低数据管理的成本和复杂性。现今，IT管理人员将数据视为最有价值的资产，开始寻求创新性的数据使用方式，从而获得数据洞察，为公司创造前瞻性机会。

2019-11-11 14:28:11

云计算数据 IT

云中的对象存储：是否需要备份?

云中没有正确备份的块存储可能会导致数据丢失，并且尽管云中的对象存储更具弹性，但需要格外小心。

2019-11-08 13:46:54

存储云计算系统

Veritas JaneZhu： “大道至简，数领未来”，为企业数字化转型全面赋能原创

数据保护、数据安全还有数据合规缺一不可，在确保数据安全、数据保护的基础上实现数据分析，那么合规将不会是一个大问题。因此数据分析意味着可以找到信息，如果企业能够很快的看到数据在哪，并知道他们拥有怎么样的数据，谁在使用这些数据

2019-11-07 16:44:25

灾难恢复测试策略是成功进行灾难恢复的关键

唯一确定灾难恢复计划是否有效的方法是灾难来临时对其进行测试。而企业需要确保其计划不会因频繁测试而变得乏味。

2019-11-06 11:20:39

灾难恢复策略测试

缓存穿透、缓存击穿和缓存雪崩实践

我们使用缓存的主要目是提升查询速度和保护数据库等稀缺资源不被占满。而缓存最常见的问题是缓存穿透、击穿和雪崩，在高并发下这三种情况都会有大量请求落到数据库，导致数据库资源占满，引起数据库故障。

2019-11-05 14:24:31

缓存雪崩框架

你居然还不知道MySQL存储引擎InnoDB分为内存架构、磁盘架构？

关于MySQL对于后端程序员的重要性不言而喻，而InnoDB也已经是MySQL默认的存储引擎。作为我们每天打交道的存储引擎，我们对它可能需要对它有更多的了解。这样对于很多灵异事件，才能从容应对。

2019-11-04 15:57:29

MySQL InnoDB 内存

如何避免即将出现的重大云存储问题

当企业将业务和应用程序迁移到云平台时可能会遇到一些问题：确定要迁移的应用程序、迁移的顺序以及将哪些应用程序重新配置为云原生。一旦进入云平台，他们可能会遇到数据问题：预算持平或下降，并且数据量呈指数增长。

2019-11-01 16:23:52

存储云存储数据

架构师必备，了解分层架构中缓存那点事儿

无论是CDN缓存加速，还是CPU的三级缓存，又或者是在如今互联网时代流量红利所带来的高并发结构客户端，而不得不使用缓存架构。

2019-10-30 16:24:34

分层架构缓存

聊聊原子变量、锁、内存屏障那点事

突然想聊聊这个话题，是因为知乎上的一个问题多次出现在了我的Timeline里：请问，多个线程可以读一个变量，只有一个线程可以对这个变量进行写，到底要不要加锁?可惜的是很多高票答案语焉不详，甚至有所错漏。

2019-10-30 09:56:56

内存屏障变量

优秀云存档数据服务

对于企业来说，云存档服务必不可少，因为并非所有数据都必须(或应该)保持在企业内部或云中易于访问。而这就是云存档技术适用的领域：它为很少访问的数据提供了一种低成本的云计算选项，但是仍然需要无限期地存储。

2019-10-29 14:15:25

云存档数据服务技术

希捷发布16TB希捷酷鹰人工智能（SkyHawk AI）监控硬盘

希捷将打通终端、边缘、核心的数据，以统一的数据保护、数据编排及数据管理，实现跨平台的统一数据体验。而针对安防领域，希捷将通过统筹整合希捷酷鹰人工智能(SkyHawkAI)监控硬盘、希捷酷鹰硬盘健康管理(SkyHawk Health Management)等产品与技术，聚焦数据，引领安防领域的不断发展与突破。

2019-10-29 10:56:13

IBM Spectrum Virtualize：优化性能与扩展，释放存储管理难题原创

作为软件定义存储的一种选择,IBM Spectrum Virtualiz以成熟度高、开放性强的虚拟化技术，优化了存储性能与扩展能力。它能够虚拟所有的存储硬件资源，将其抽象为软件层以更高效的分配资源，当某个应用负载需要配置具有特定数据保护机制的存储，你只需要从管理界面选择配置，它将自动分配。借助IBM Spectrum Virtualize，用户可以轻松实现多平台之间的数据管理，简化部署，提高效率。

2019-10-29 10:36:34

IBM存储 IBM 存储

Redis中8种数据结构的底层数据结构源码详解

Redis中的Key与Value在表层都是一个redisObject实例, 所以该结构有所谓的"类型", 即是ValueType. 对于每一种Value Type类型的redisObject;其底层至少支持两种不同的底层数据结构来实现. 以应对在不同的应用场景中, Redis的运行效率, 或内存占用等。

2019-10-29 08:59:16

Redis 底层数据

继全球AI排行榜夺魁后，虎贲T710再迎高光时刻

紫光展锐首席执行官楚庆曾多次提到，紫光展锐致力于成为推动全球技术创新的开拓者。在AI领域，紫光展锐拥有完整的战略布局，全面推进AI在工业、商业、医疗、家居、教育等领域的应用

2019-10-28 10:37:08

聊聊关于Redis中16个默认数据库的知识

Redis是一个字典结构的存储服务器，一个Redis实例提供了多个用来存储数据的字典，客户端可以指定将数据存储在哪个字典中。

2019-10-28 10:29:49

Redis 数据库分布式锁

Redis内存爆炸增长？你需要知道这一套Redis内存分析方法

Redis是当前比较热门的NOSQL数据库之一，和Memcache一样，数据都是缓存在计算机内存中。完全开源免费，遵守BSD协议，是一个高性能的key-value数据库。通过在内存中读写数据，大大提高了数据读写速度，可以说Redis是实现网站高并发不可或缺的一部分。

2019-10-24 08:43:46

Redis 内存 NOSQL

稳了！用Redis实现“附近的人”功能

针对“附近的人”这一位置服务领域的应用场景，常见的可使用 PG、MySQL 和 MongoDB 等多种 DB 的空间索引进行实现。

2019-10-23 09:48:46

Redis MySQL MongoDB

Redis集群都有哪些模式

Sentinel(哨兵)进程是用于监控redis集群中Master主服务器工作的状态，在Master主服务器发生故障的时候，可以实现Master和Slave服务器的切换，保证系统的高可用。

2019-10-23 09:20:11

Redis 集群主从复制

Redis集群的5种使用方式，各自优缺点分析

Redis 多副本，采用主从(replication)部署结构，相较于单副本而言最大的特点就是主从实例间数据实时同步，并且提供数据持久化和备份策略。

2019-10-22 10:48:48

Redis 集群架构

灾难恢复计划需要提前规划服务连续性

行业专家Trevor Pott在一篇文章中指出，大多数灾难恢复(DR)系统不如人意。他指出，现在市场上有很多灾难恢复系统。但这些系统或者无法达到要求，或者价格十分昂贵。

2019-10-21 16:17:39

存储灾难恢复系统

资深架构师分享：大型网站多级缓存的分层架构

这种说法带有片面性，甚至是一知半解，但是作为专业人士的我们，需要对缓存有更深、更广的了解。

2019-10-21 09:32:48

缓存架构分层

IBM Spectrum Scale：简化管理，打通数据中心与云之间的连接原创

借助IBM Spectrum Scale强大的可扩展性，用户可以在企业内部和云端架构之间进行灵活管理，并基于业务优先级管理工作负载和资源，将运营孤岛转变成共享服务环境，提高 IT 的可扩展性、利用率和服务级别。

2019-10-19 10:34:41

IBM存储 IBM 存储

6个常见的高并发缓存问题，你知道几个？

一般来说，现在的互联网应用网站或者APP，它的整体流程可以用我们这个图里展示的来表示，用户请求开始，从这个界面是最里面的浏览器和APP，到网络转发，再到应用服务，最后到存储，这纯属可能是数据库文件系统，然后再返回到界面呈现内容。

2019-10-17 16:02:44

高并发缓存浏览器

CPU怎么保证内存访问冲突？一致性？

内存一致性模型(memory consistency model)就是用来描述多线程对共享存储器的访问行为，在不同的内存一致性模型里，多线程对共享存储器的访问行为有非常大的差别。

2019-10-16 00:06:08

CPU 内存存储

IDC认为超融合的价值主张正在转变

对戴尔科技集团来说，其在超融合行业的实力有目共睹，这样的结果自然是不让人意外，不过让小编意外的却是，IDC在这份报告中说，超融合的价值主张正在转变。

2019-10-15 14:53:54

支撑现代分布式存储系统的算法

随着应用程序处理的数据量不断增长，扩展存储变得愈发具有挑战性。每个数据库系统都有自己的方案。为了从这些方案中做出正确的选择，了解它们是至关重要的。

2019-10-15 10:59:43

分布式存储系统

云存储的未来发展方向

一位行业领先的云存储专家讨论了云存储的当前状况，以及有效的云存储如何采用人工智能，并讨论了云存储的未来方向，其中包括对文件可选性的关注。

2019-10-14 15:14:17

存储云存储人工智能

KeyDB——据说是比Redis快5倍的中间件，为啥这么快？

KeyDB项目是从redis fork出来的分支。众所周知redis是一个单线程的kv内存存储系统，而KeyDB在100%兼容redis API的情况下将redis改造成多线程。

2019-10-14 09:50:52

KeyDB Redis 中间件

快手推出RTA技术，助力广告主实现流量价值最大化

快手RTA技术从研发、测试到正式推出，已经率先满足了金融行业的产品需求，且得到金融类头部客户测试和正向验证。

2019-10-12 13:58:50

万万没想到，Redis多线程版本竟然比原生版本快那么多

如果我告诉您有一个 Redis 的分支版本，它的性能比原生的 Redis 快 5 倍，而且延迟却降低近 5 倍，你会不会想了解一下这个项目?

2019-10-12 08:53:26

Redis 多线程版本

从源码解密Spark内存管理

我们都知道spark之所以比mapreduce计算的快，是因为他是基于内存的，不用每次计算完都写磁盘，再读取出来进行下一次计算，spark直接把内存作为数据的临时储存介质。所以mapreduce就没有强调内存管理，而spark需要管理内存。

2019-10-10 16:20:23

spark 内存管理

搞懂高可用缓存架构，总结五大缓存问题解决方案

缓存雪崩指的是由于数据没有被加载到缓存中，或者缓存数据在同一时间大面积失效(过期)，又或者缓存服务器宕机，导致大量的请求都到达数据库。

2019-10-09 16:18:36

缓存架构雪崩

现代数据中心需要重新引入磁带存储

对于许多IT专业人士来说，磁带媒体和磁带库似乎是传统IT人员使用的比较原始的存储技术。事实上，磁带存储技术对组织而言可能具有重大价值。几乎每个数据中心都在经历爆炸性的数据增长，而磁带存储可以有效顺应这一趋势。

2019-10-08 11:31:01

磁带存储数据中心

上一页 1 ··· 37 38 39 40 41 ··· 100 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营