思华科技曹敬涛:云计算时代下的存储策略分析

原创
云计算
云计算时代对存储有了更高的要求,那就是在保存数据的同时要保证数据的安全,一是全时段全环境下的数据安全保障,支持用户计划内和计划外的各种突发情况;另一个是云时代的存储规模呈指数倍增长,对系统的运维造成很大挑战;最后是在保证数据安全及性能的情况下,能够最大限度的降低整体能耗,实现节能环保。

【51CTO.com原创稿件】当今,云计算几乎改变了整个 IT 产业的格局,各种类型的企业纷纷拥抱云计算,迎来了市场收获期。为了更深入地解读国内云计算产业政策,展示我国云计算国家标准研制工作的成果,报告云计算标准化工作的重要进展,中国电子技术标准化研究院主办、51CTO承办的“第七届中国云计算标准和应用大会”于1月5日在北京隆重闭幕。会议历时2天,参会规模达1500人次。

作为国内云计算领域的重要会议之一,本次大会吸引了国内外多家知名企业的共同参与。在4日上午的主论坛、4日下午和5日上午的分论坛中,来自产、学、研、用各领域的高端人士进行了全方位的实践分析,为与会嘉宾带来了精彩纷呈的知识共享!

上海思华科技股份有限公司产品总监曹敬涛在会上带来《软件定义存储助力云计算》的主题演讲。

近年来,云计算在各个行业中得到飞速发展和广泛应用,各大互联网公司走在云计算浪潮的前端,各传统行业的企业也开始在自己的生产环境和业务系统中尝试使用云计算、大数据等技术来改善业务形态,为客户提供更好的服务。

曹敬涛在演讲中提到:“支付宝的年度账单和网易云音乐的年度报告在朋友圈刷屏,这些数据离不开云计算和大数据提供的精准化分析,数据作为云计算和大数据的原材料扮演重要角色,软件定义存储可以使这部分数据更好更安全地保存。”

[[217375]]

上海思华科技股份有限公司产品总监 曹敬涛

思华科技成立于2000年,专注于大视频解决方案和云计算产品的研发和服务。思华作为大视频领域的***,长期以来为联通、电信、移动及广电运营商提供互动电视、IPTV和移动视频的软件平台,为数亿终端用户提供稳定可靠的服务。2010年以来思华积极布局云计算领域,在上海、西安、美国硅谷等地设有研发中心,自主研发云存储、大数据、桌面云及容器云等核心技术产品。思华现已拥有13项发明专利,104项软件著作权,42项软件产品登记证书。

目前,思华主要有两大产品体系,一是视频云平台,包含视频管理类的iCMS系列,视频分发的CDN产品,视频大数据类的CloudData系列,以及视频结构化的IdxTime系列。第二个产品体系是云计算平台,包括超融合云平台ExpressVM系列——可以为用户提供便捷的虚拟化服务,容器云Miaoyun系列,以及云存储MegaBric系列,还有桌面云xView系列。思华通过这两大产品体系为用户提供一站式的大视频以及云计算解决方案。

曹敬涛在分析云时代对存储的新要求时提到,“云计算时代对存储有了更高的要求,那就是在保存数据的同时要保证数据的安全,一是全时段全环境下的数据安全保障,支持用户计划内和计划外的各种突发情况;另一个是云时代的存储规模呈指数倍增长,对系统的运维造成很大挑战;***是在保证数据安全及性能的情况下,能够***限度的降低整体能耗,实现节能环保。”

存储智能感知:保障数据安全

曹敬涛提出了智能感知的概念,也就是能够在多个维度鉴定存储集群的状态,对于可预测的故障进行提前干预,***限度保证数据安全。智能感知体现在以下四个方面,***是硬件感知,支持不同硬件、不同厂家,感知硬件健康状态、提前进行集群操作;第二是数据感知,可以知道数据的不同格式,包括资产属性、脆弱性,安全性等;第三是健康感知,包括系统/服务登陆、访问、编辑情况,资源使用情况等硬件状态;第四是压力感知,包括资源利用率,带宽利用率,空间利用率等等。

数据根据访问频率可以分为冷数据、热数据和温数据三大类。冷数据是如归档磁带库、光盘等介质存放的数据,间隔较长时间才能被读取,占数据总量的18%到25%。热数据,如安防监控视频、影视、图片、评论、日志等,在需要时能随时查阅,但不需要较高的性能,这部分占15%到28%;而温数据占50%至67%,它平时很少被访问,但是在需要时要能够在约定的时效内提供服务。

数据的存储成本分为四类,分别是硬件采购成本、运维成本、电力能耗成本和硬件损耗成本。其中,电力能耗成本占总成本的45%,远高于硬件采购成本。由此可见,电力成本在存储整体成本中,占据了相当大的比重,只有降低电力能耗,才能为客户带来***的投资回报率。

思华智能集群存储MegaBric 大幅降低存储成本

曹敬涛在演讲中重点讲解了基于软件定义存储的MegaBric产品。MegaBric有几个关键的技术点,一是智能回收站,能够保证数据不被物理删除;二是WORM技术,能够保障数据不被非法篡改;三是智能节电技术,对数据占比较大的温数据进行智能的磁盘断电,可以做到对每块磁盘的单独断电,此外还有按需加电和智能巡检,即在需要时对磁盘进行加电,快速为业务系统提供数据,在数据长时间不被访问时进行定期巡检,保证磁盘正常运转,保障数据安全。曹敬涛表示:“思华的智能节电技术能够为企业节省65%到87%的能耗成本。”

除降低能耗以外,提升单位磁盘容量的存储性能也是降低存储成本的重要手段之一。MegaBric能够基于海量小文件进行存储性能优化、网络优化和磁盘读写优化。目前本地文件系统、分布式文件系统,主要针对大文件而设计,而元数据管理、数据布局、条带设计、缓存管理也都侧重于大文件。小文件情况下的存储性能较低。为解决这一问题,MegaBric运用专业的文件系统——MEXT专利技术,在元数据以及数据分布上进行针对性设计,IOPS性能与同类产品相比提升50%以上。网络优化方面,支持RDMA网卡,吞吐性能提升3倍以上。IO优化方面,采用差异化、精细化的IO调度策略,采用全新的脏数据刷新机制,降低读写延迟,做到每次IO的实时计算和实时控制。

曹敬涛:现任上海思华科技股份有限公司产品总监,主要负责云计算及软件定义存储产品相关工作,主导定义和研发了公司分布式智能存储MegaBric和超融合存储ExpressIO两大存储产品线。曹敬涛长期从事CDN和存储相关工作,对Linux内核以及存储相关技术拥有丰富经验。

【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】

责任编辑:查士加 来源: 51CTO
相关推荐

2018-01-16 11:49:58

思华科技软件存储

2018-01-19 16:52:31

思华科技软件存储

2018-03-21 18:14:47

网络

2018-04-11 09:07:36

云计算

2013-08-08 10:14:52

云存储云计算

2013-08-14 11:16:52

2011-08-12 09:32:05

云计算

2010-04-02 13:18:47

云计算

2017-10-23 19:08:57

2011-07-28 17:32:21

2020-06-18 10:47:20

研华科技

2010-03-23 17:05:50

云计算

2021-11-11 17:43:00

数字化

2012-11-07 15:47:58

云计算云安全

2015-03-10 10:22:07

2012-04-27 08:37:09

2012-06-06 16:56:13

2015-06-26 16:39:29

HGBC云平台四川建华科技华为

2017-11-20 15:47:15

数据云计算对象存储

2017-03-08 10:29:06

HBase大数据存储
点赞
收藏

51CTO技术栈公众号