直播训练营

鸿蒙开发者社区

WOT技术大会

AIGC创新中国行

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 2024年软考 PMP项目管理软考资讯

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO题库小程序

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

账号设置退出

存储软件

2177内容

关注

内容覆盖存储系统、存储组件、存储虚拟化、对象存储等相关软件产品，为用户提供存储软件行业的业界动态、产品资讯、前沿技术、应用案例等内容，帮助用户构建高性能、高可用、高安全的存储系统，提高存储性能和利用率，简化存储管理。

共 2177 条

边缘计算探索：处理器，算法与内存

人们对于人工智能和物联网的最初设想是，在云端有一个异常强大的数据中心，而物联网各个节点负责采集数据交给云端，云端在根据数据分析并做决策后再把结果发还给终端。在这种模型中，云端负责智能计算，而终端节点负责数据采集以及决策执行。

2018-05-11 08:10:11

边缘计算处理器内存

Spark的误解-不仅Spark是内存计算，Hadoop也是内存计算

市面上有一些初学者的误解，他们拿Spark和Hadoop比较时就会说，Spark是内存计算，内存计算是Spark的特性。请问在计算机领域，MySQL,Redis,SSH框架等等他们不是内存计算吗？依据冯诺依曼体系结构，有什么技术的程序不是在内存中运行，需要数据从硬盘中拉取，然后供CPU进行执行？

2018-05-10 09:51:39

Spark 内存 Hadoop

spark 自己的分布式存储系统 - BlockManager

BlockManager 是 spark 中至关重要的一个组件，在 spark的的运行过程中到处都有 BlockManager 的身影，只有搞清楚 BlockManager 的原理和机制，你才能更加深入的理解 spark。今天我们来揭开 BlockaManager 的底层原理和设计思路，

2018-05-10 09:34:21

spark 存储系统

软件定义存储的真实成本

软件定义的采用率正在不断增加，这使得软件定义存储(SDS)成为企业关注的焦点。采用软件定义存储(SDS)的主要驱动因素之一是节约成本。在理想情况下，通过降低资本支出，并大幅降低专有存储区域网络(SAN)和网络附属存储(NAS)的运营成本，软件定义存储(SDS)可降低存储成本。

2018-05-09 10:59:55

软件定义存储

闪存阵列的垃圾回收及“写断崖”

随着成本降低和技术进步，闪存越来越多的被企业级数据中心作为存储介质使用。相比传统的磁盘介质，闪存的优势显而易见：速度快，耗电低，省空间。特别在速度方面，闪存具有压倒性的优势。

2018-05-09 10:45:29

闪存阵列回收

详谈软件定义存储如何约会区块链？

互联网解决了信息随时分享，移动互联网解决了信息随地分享，物联网解决了信息随物分享，而构建在三者基础之上的区块链解决了数字价值的随时随地随物地转移。

2018-05-09 10:25:45

软件定义存储

有趣的闪存：通过实践分析意外内存泄漏

在这篇文章中，我们将对闪存进行分析。我的实验目标是一台别人“捐赠”过来的Netcomm N300路由器，在进行了深入研究之后，我可以通过修改设备闪存的读入操作并从未认证的Web接口获取目标Web服务器的内存数据。

2018-05-09 09:35:13

闪存泄漏数据

容器云应该采用什么样的部署方式？

在开发测试环境我们还是建议使用容器化环境。在生产根据实际的情况和业务场景选择合适的部署方式。数据库什么的可能就不是很合适，虽然也支持，可以部署，但从运维、安全、组件稳定性等方面考虑，非容器化部署可能更合适。

2018-05-09 09:01:19

容器云部署方式

3个小技巧教会你搭建简单的云存储NAS服务器

随着各类智能移动终端的普及，随之产生的个人数据也越来越多，比如手机录的视频，单反拍摄的照片，电脑下载的高清电影等等，怎么在各种设备间，方便的阅览和传输这些内容成了一个问题。

2018-05-08 09:21:34

云存储 NAS 服务器

设计建设分布式存储集群，集群网络该如何规划？

按照分布式存储的范式，存储系统的管理和业务分属两个网段，互相独立，互不影响，数据传输只在业务网段上进行，管理与业务通过服务器通信，无法通过网络互访。

2018-05-08 08:57:36

分布式存储集群

Linux内存的分配和释放是怎么回事儿？

当出现多个程序共同使用相同的文件映射(共享库)时，它们可以共享磁盘高速缓存中的同一空间，从而节省物理内存的使用量，这种技术就是”共享映射”技术。

2018-05-08 08:46:47

Linux 内存释放

Kafka的存储机制以及可靠性

kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。所谓的分区其实就是在kafka对应存储目录下创建的文件夹，文件夹的名字是主题名加上分区编号，编号从0开始。

2018-05-07 10:20:38

Kafka 存储机制

Accordion :一种HBase内存压缩算法

人们对基于HBase的产品的读写速度要求越来越高。在理想情况下，人们希望HBase 可以在保证其可靠的持久存储的前提下能并拥有内存数据读写的速度。为此，在HBase2.0中引入Accordion算法。

2018-05-07 09:48:49

Accordion HBase 内存

分离式or超融合，分布式存储建设时应该采用何种部署模式？

数据中心内部系统的核心要求是“稳定可靠”，一是指系统在运行过程中有能力提供连续可靠的服务，长时间无故障运行；二是指当故障发生之后，有能力快速定位，及时排查，故障范围不蔓延。

2018-05-07 09:34:39

分离式超融合存储

云存储定价：顶级供应商的价格比较

对于企业来说，估测云存储的定价可能非常复杂。并且，对行业领先的云计算供应商提供的价格进行比较，以确定价格最低的云存储更为复杂。

2018-05-04 09:50:35

云存储供应商价格

全闪存阵列市场的七大趋势

分析师将最新的全闪存阵列市场调查数据与一年前收集的数据进行比较时，总结了影响企业在2019年购买决策的全闪存阵列市场发展的七个重要趋势。

2018-05-04 09:33:57

全闪存阵列趋势

小白科普：全闪存阵列，存储分层和存储缓存如何叠加？

全闪存阵列目前在市场上有充分的理由引起大家的关注。它们可以在IOPS和亚毫秒级延迟方面实现巨大的应用性能提升。虽然对于希望解决性能瓶颈的任何IT组织来说，装满SSD驱动器的机箱可能非常具有诱惑力，但这会带来很大的成本。

2018-05-03 09:05:02

全闪存阵列存储

Redis是如何存储对象和集合的

在项目中,缓存以及mq消息队列可以说是不可或缺的2个重要技术。前者主要是为了减轻数据库压力，大幅度提升性能。后者主要是为了提高用户的体验度，我理解的是再后端做的一个ajax请求(异步),并且像ribbmitmq等消息队列有重试机制等功能。

2018-05-03 08:53:41

Redis 存储对象

突破性技术,有望为MRAM带来大幅提升

过去的十年里，闪存革新了数据存储和系统技术。但是闪存在性能、功率和使用寿命等方面也存在一些比较严肃的问题。而且它不会像其他半导体技术那样不断缩小工艺尺寸，所以厂商不得不采用大尺寸的3D制造。

2018-05-03 08:11:38

MRAM 存储器元件

MySQL数据库Raid存储方案

作为一名 DBA，选择自己的数据存储在什么上面，应该是最基本的事情了。但是很多 DBA 却容易忽略了这一点，我就是其中一个。之前对 raid 了解的并不多，本文就记录下学习的 raid 相关知识。

2018-05-02 08:48:58

Raid 存储 MySQL

为什么存储密码字符数组比字符串更合适？

因为任何可以访问内存的人能以明码的方式把密码dump出来。另外你还应该始终以加密而不是普通的文本来表示密码。因为字符串是不可变，因此没有任何方法可以改变其内容，任何改变都将产生一个新的字符串，而如果使用char[]，你就可以设置所有的元素为空或者为零。

2018-05-02 08:40:36

存储密码字符

DAS,NAS,SAN和ISCSI存储架构介绍

SAN和NAS经常被视为两种竞争技术，实际上，二者还能够很好地相互补充，以提供对不同类型数据的访问。SAN针对海量、面向数据块的数据传输，而NAS则提供文件级的数据访问功能。

2018-04-28 09:20:19

数据存储安全性：存储专业人员需要了解的内容

传统上，存储和安全在IT部门中是相互独立的学科。虽然在数据中心中这两个团队会有一些重叠的关注点，并且在一些项目上一起工作，但它们在很大程度上是截然不同的。

2018-04-28 08:45:33

数据存储安全性

聊一聊数据存储的七个技巧

提高存储性能的道路并非始于全闪存投资。它始于对整个存储网络的仔细检查。一旦完成，还要考虑许多其他存储性能和数据存储效率增强选项，其中包括某些类型的闪存存储部署。哪些产品是选用于数据中心最好的工作方式，一些IT部门甚至可能甚至不需要升级他们的存储系统。

2018-04-27 09:22:21

数据存储技巧

Redis数据存储优化机制详解

Redis提供了很多关于优化内存的方法，上面这些配置的值都是默认配置，实际要根据我们具体的需求场景来调节，并要做大量的测试，以达到最优的效果。同时必须对Redis这些数据结构有很好的理解。

2018-04-27 09:03:57

Redis 数据存储

相对于OLTP，列式存储到底好用在哪里？

列式存储（Column-oriented Storage）并不是一项新技术，最早可以追溯到 1983 年的论文 Cantor。然而，受限于早期的硬件条件和使用场景，主流的事务型数据库（OLTP）大多采用行式存储，直到近几年分析型数据库（OLAP）的兴起，列式存储这一概念又变得流行。

2018-04-26 11:10:56

OLTP 列式存储

管理数据命根子的数据库种类越来越多，有哪些您不了解的内幕呢？

数据是企业的命根子。数据种类增多，数据量增大，应用需求多样化，导致数据库的种类也不断增多。除了以前说的交易类、事务处理类、嵌入类等常用的分类方法以外，根据不同应用需求而出现的新型数据正在不断发展壮大。

2018-04-26 10:23:31

管理数据数据库

聊一聊如何运维分布式存储

在面对分布式存储的时候，分为两种角度，一种是客户侧，一种是运维侧，客户是上帝，所以不谈上帝的操作，专注于运维侧的系统构建。

2018-04-25 09:01:02

运维分布式存储

Linux存储入门：简易数据恢复方案--分区和LVM实战

数据恢复，经常是突发事故响应中关键而又耗时的一步。多数情况下，工程师往往并非专司数据恢复，操作环境往往是生产环境，趁手工具难以部署，执行操作要遵循种种约束，加之业务中断的压力。

2018-04-25 08:36:48

Linux 存储 LVM

隐藏在云数据迁移中的6个瓶颈

收集、组织、格式化和验证数据会给企业带来比迁移更大的挑战。以下是云迁移规划阶段需要考虑的一些常见因素，以便避免出现一些耗时而昂贵的问题。

2018-04-24 11:06:18

云迁移数据迁移数据库

从一份Gartner报告谈容器原生存储

笔者接触存储产品比较早。从最初的HP MSA、EVA、XP、IBM DS8800等高端硬件存储，到GPFS、vSAN、Gluster等软件定义存储。而近两年，笔者随着阅历和见识的增加，在看待技术方案上，比以前理性和客观。所以给客户的建议，也往往更加中肯一些。

2018-04-24 09:17:15

容器原生存储

聊聊容器存储接口CSI的那些事儿

CSI（容器存储接口）是要定义一个行业标准，使存储供应商（SP）能够一次开发一个插件，并在多个容器编排器（CO）系统中工作。

2018-04-24 09:05:09

容器存储接口

SSD闪存颗粒详解：只认原厂、黑片/白片千万别碰

2017年以来，固态硬盘行业频频曝出山寨和黑芯等问题，很多山寨厂商为了获取更大利益采用黑片固态硬盘，但消费者却不知道什么是黑片固态硬盘。

2018-04-23 09:48:37

SSD 闪存颗粒

Filecoin: 一个去中心式存储网络

Filecoin DSN是一个建立在激励机制上，可审计、可查证的去中心化存储网络。客户向矿工支付代币来获取数据存储和检索数据服务，矿工提供存储空间和传输带宽来获得回报。矿工们只有当网络能够查证他们在正确提供服务的时候才能获得报酬。

2018-04-23 09:35:52

去中心式存储网络

MySQL体系结构和存储引擎概述

MySQL数据库由后台进程以及一个共享内存区组成。共享内存可以被运行的后台线程所共享。需要注意的是，数据库实例才是真正用于操作数据库文件的。

2018-04-23 09:25:24

MySQL 结构存储

关于Hbase多版本存储的一个注意点

所谓的version其实就是同一条数据插入不同的时间戳来实现的，在hbase底层的存储是基于时间戳排序的，所以每次我们查到的数据都是最新的版本，除非我们指定了要读取特定的时间范围的数据。

2018-04-20 09:24:08

Hbase 存储注意点

R语言基础-数据的存储与读取

如果一个文件不在工作目录里则必须给出它的路径。用setwd()设置工作路径，用getwd()查看目前的工作路径。工作目录的设定也可以通过“文件”菜单的“改变当前目录。。。”来完成。

2018-04-20 09:06:11

R语言数据存储

亿级数据分析性能杀手锏 - 列式存储

我们的用户不会那么轻易的放过“折磨”我们 IT 工程师的机会，就仅仅围绕月份来做统计，可能还会加上，产品类型，地区等等维度。这样一来，就更加麻烦了，眼珠子恨不得贴到屏幕上，一分一秒的看着时间的流逝，可惜了青春啊~

2018-04-19 09:10:17

数据分析列式存储

探讨容器中如何使用块存储

块存储是将裸磁盘空间通过划逻辑盘，做Raid，或者LVM（逻辑卷）等方式逻辑划分出N个逻辑的硬盘，然后采用映射的方式将这些逻辑盘挂载到主机。主机的操作系统认为这些磁盘均为物理硬盘，跟直接拿一块物理硬盘挂载到操作系统没有区别。

2018-04-19 08:58:17

容器块存储

闪存存储特性以及数据库相关优化思路

闪存存储当前越来越多的应用于企业级环境，特别是提升数据库性能方面。本次分享主要介绍闪存的特性，闪存的劣势及其解决机制，以及采用闪存存储时数据库的一些优化思路。

2018-04-19 08:29:26

闪存存储数据库

Spark streaming中持久保存的RDD/有状态的内存

以spark streaming为例，就是希望有个数据集能够在当前批次中更新，再下个批次后又可以继续访问。一个最简单的实现是在driver的内存中，我们可以自行保存一个大的内存结构。这种hack的方式就是我们无法利用spark提供的分布式计算的能力。

2018-04-18 08:54:28

RDD 内存 Spark

利用Alluxio构建计算-存储解耦架构

计算-存储紧耦架构是一种在数据存储的节点上进行计算的架构，这种架构解决了计算引擎的数据需求，但维持这种紧耦结合的架构需要一定代价，这往往超出了其带来的性能提升。

2018-04-18 08:47:17

Alluxio 构建存储

Hadoop 3中的磁盘管理大招解密

DataNode 使用基于轮询的策略写入新块。但是，在长期运行的集群中，由于 HDFS 中大规模文件删除或通过磁盘热交换特性添加新 DataNode 磁盘等事件，DataNode 仍然可能创建了显著不平衡的卷。

2018-04-18 08:24:24

磁盘管理解密

大数据之谜Spark基础篇，核心RDD特征分析讲解

RDD(Resilient Distributed Datasets)弹性分布式数据集，是分布式内存的一个抽象概念。我们可以抽象的代表对应一个HDFS上的文件，但是他实际上是被分区的，分为多个分区撒落在Spark集群中的不同节点上。

2018-04-17 09:03:01

Spark RDD 大数据

1分钟区分云存储和云硬盘，最后一张图直接答案

云硬盘和云存储表面看起来是非常接近两种云计算服务，就像一对兄弟。但实际上，它们无论在应用场景，还是设计目标上，都有根本性的区别。如果要说它们是兄弟，那也是远房表亲。

2018-04-17 08:36:22

云存储云硬盘 IAAS

细说Oracle数据库与操作系统存储管理二三事

说到存储管理，是操作系统中最重要的资源之一。因为任何程序和数据等都需要占有一定的存储空间，存储管理会直接影响到系统的性能。

2018-04-16 09:21:04

Oracle数据库操作系统存储

时序数据库技术体系 – InfluxDB TSM存储引擎之数据写入

InfluxDB因为其特有的双LSM引擎而显得内部结构更加复杂，写入流程相比其他数据库来说更加繁琐。但只要理解了它的数据文件内部组织格式以及倒排索引文件内部组织格式，相信对于整体的把握也并不是很难。

2018-04-16 08:44:51

InfluxDB TS 时序数据库存储

对象存储走红各厂商打响狙击战？

存储圈真是个神奇的领域，各种新鲜名词层次不穷，前有块存储、文件存储，后有混合存储、统一存储，如今对象存储又大火，各个行业也顺应趋势纷纷换成对象存储。那么，到底如何理解对象存储？

2018-04-16 08:26:02

对象存储可扩展性软件定义

分布式存储与传统SAN、NAS相比，有什么优势与劣势？

受限于前端控制器的对外服务能力，纵向扩展磁盘数量无法有效提升存储设备对外提供服务的能力。同时，前端控制器横向扩展能力非常有限，业界最多仅能实现几个控制器的横向。因此，前端控制器成为整个存储性能的瓶颈。

2018-04-13 09:01:58

存储的瓶颈--大型网站技术演进思考

我觉得大型网站是技术和业务的结合，一个满足某些用户需求的网站只要技术和业务二者有一方难度很大，必然会让企业投入更多的、更优秀的人力成本实现它，那么这样的网站就是所谓的大型网站了。

2018-04-13 08:44:40

存储大型网站

上一页 1 ··· 23 24 25 26 27 ··· 44 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区

教育

51CTO学堂精培企业培训 CTO训练营