原来是这个原因,HPC才真正走向普及

企业动态
随着计算技术的发展,尤其是开放架构和开源的日渐成熟,CPU从单核向多核演变,以及GPU在加速计算方面的给力表现, 推动着HPC不断向平民化演进,应用领域也迅速扩展。

 

 

 

[[209531]]

文末有福利!

欢迎各位客官下载最新《戴尔助力高性能计算走向普及》白皮书

[[209532]]

 

高性能计算

(High Performance Computing,HPC)

早已不是阳春白雪,

正在以令人惊讶的普及程度,

近年来在多个行业领域迅速铺开。 

这一切,戴尔功不可没。

 

并且在全球HPC市场排名中,

戴尔一直位居前列。

 

 

行业应用落地加快HPC普及

[[209533]]

 

全球第三方权威调研机构IDC在2015年有关HPC的报告显示:全球HPC市场2014年约为210亿美元,预计到2019年将增长为312亿美元,年复合增长率为 8.3%。

 

 

HPC按照IT组成部分来看,2015-2019年期间,存储部分的增长率最快,为9.4%,其次,中间件部分增长为7.8%,服务器和应用部分的市场增长速率为7.7%,服务部分的增长速率为6.7%。

 

这组数据说明了,HPC因为用户在数据领域的增长变化,已经呈现出来了新的态势,特别是HPC与大数据结合的模式,已经备受业界所关注。

 

当然,来自服务器和关键应用部分的增长虽然比存储部分要低1个多百分点,但这也足够证明服务器和关键应用部分的重要性。高性能计算强调的首位是计算,然后针对HPC的普及又必须强调应用。因为应用的增长,也必然在加速HPC的行业落地。

 

不仅如此,在国家国策的驱动下,HPC在中国市场的发展更为活跃。2016年7月,国务院印发了《十三五国家科技创新规划》,其中HPC与云计算、人工智能、物联网等同时被列为“十三五”期间重点发展的新一代信息技术。有了国家国策的指导作用,在很大程度上可以起到引导和促进HPC相关产业的健康发展与兴盛,HPC技术和应用在中国诸多行业领域的落地与普及也就有了更大的动力。

 

特别是在一些新兴的学科和领域,HPC已经成为了科学研究的必备工具。

 

随着计算技术的发展,尤其是开放架构和开源的日渐成熟,CPU从单核向多核演变,以及GPU在加速计算方面的给力表现, 推动着HPC不断向平民化演进,应用领域也迅速扩展。

 

可见,从阳春白雪到下里巴人,HPC的普及化趋势也是其技术力量的促进。HPC技术的进步自然带来了应用的更加广泛和深入。

 

比如近年来兴起的基因组测序,与人们生活生产密切相关的气象预报,制造业中的仿真设计,应用于大数据分析的HPC更是迅速发展,像互联网应用中的客户行为分析,医学流行病预测、深度学习、人脸识别等等。

 

总的来看,HPC不仅在科学计算、天文、能源、军事等方面继续发挥着重要的作用,同时在基因测序、气象科学、制造业创新、大数据分析、医疗医学、深度学习、人脸识别等等领域,HPC 正在越来越普及化、平民化,并服务于大众,与我们大家的日常生活越来越息息相关。

 

HPC之所以可以发展到今天这样的普及化程度,这与戴尔这样专注通过开放、 经济的解决方案,提升了中小企业将HPC作为挑战传统行业布局和业务模式利器的有关。

 

因此,普及HPC应用不仅仅是可以触及到大众的生活,更要能让千千万万中小规模的企业用户从中获得自我创新的“新能力”。

 

事实上,中国真的步入了HPC的普及化应用期了吗?

 

来自中桥调研咨询对于中国企业部署HPC的情况的调查发现,分别在2015年8月和2016年4月进行过两次相关的调查,并就调查结果进行了比较。结果显示,在受访企业中,“已经部署”和“未来12个月内部署”两个选项 的2016年调查比率(10.2% 和 15.1%)都明显高于2015年的结果(7.3% 和 11.0%)。这就充分证明了中国用户对于HPC的应用需求程度在明显逐年提升。

 

HPC 进入应用普及期

 

尤其值得注意的是,选择“正在评估 HPC”的企业2016年(34.2%)是2015年的(15.3%)两倍以上。而相应地,“不会部署”和“不知道”的比率则大大下降。

 

这就说明了HPC在企业用户中的地位提升了,大家对于HPC的认知早就不同于从前了,如何能有效利用和应用HPC,并与业务有机结合,成为了用户关心的重点。

 

比如,来自中桥调研咨询针对受访企业中的典型代表进行了深访,多数企业CIO表示:企业在进行数字化转型过程中,数据量迅速增长,而这些数据无疑是企业的“命脉”,企业已经或计划通过HPC实现大数据分析,从而提升企业的竞争力。

 

同时在虚拟现实 、增强现实、商情 / 舆情分析、人工智能等领域的新技术和新应用,成为了HPC新的增长点。

 

中国企业对于HPC的接受程度获得了前所未有的提升,在面临自身业务创新的现实情况下,HPC所能发挥出的作用越辣越明显,也带动HPC进入一个应用的普及期。

 

既然来自IDC和中桥调研咨询的两大分析机构对HPC的增长趋势十分看好,也通过实际调研表明了HPC正在走向普及化。那么,是什么力量在驱动HPC走向了普及化?

 

HPC市场发展的重要驱动力

[[209534]]

 

戴尔认为,这一切的主要驱动力来自应用数量、大数据、新兴应用和HPC门槛降低四个方面。

[[209535]]

在应用数量和形态驱动力方面。中桥调研咨询2017年IT趋势调研数据显示,80% 以上受访的中国用户已经或未来24个月内将要把数字化转型作为战略重点。在数字经济时代,IT应用开发部署直接决定着企业通过数字化创新的能力,触发应用量的急剧增加。同时,应用的多线程和高并发技术走向,催生出更多的HPC需求。此外, 在C2B的数字化新模式中,数据成为企业业务新引擎,系统处理能力决定着用户体验和增长空间,带动HPC的市场需求不断增加。

[[209536]]

在大数据驱动力方面,前瞻性、迅捷响应、高效协作成为决定企业竞争力的软资源。通过前后台打通,实现全业务数字化,保证业务各环节数据交互和分析速度,是形成数字经济个性化生产服务效率的关键。

[[209537]]

大数据与HPC的结合衍生出了HPDA(High Performance Data Analysis,高性能数据 分析)技术。据IDC数据显示:目前有67%的HPC资源用于HPDA,而机器学习 / 深度学习、欺诈检测的需求就是其中较为典型的应用。大数据时代的到来将使HPDA应用成为HPC的下一个强力增长点。

[[209538]]

在新兴应用驱动力方面,HPC应用正从过去主要传统科研领域计算密集型为主,逐渐向新兴的大数据、人工智能以及深度学习等方向进行融合和演进。虽然传统的HPC应用的刚需继续存在,但是数字时代无论是智能制造、智慧医疗、智慧城市、智能家居,高性能计算都将成为核心技术。特别是近两年备受关注的人工智能领域,如自动驾驶汽车、无人机、人脸识别、医疗诊断、智能家居、购物推荐, 以及金融分析和商业决策等,其核心是大数据支持,HPC成为人工智能模型训练的重要支撑平台。

[[209539]]

在HPC门槛降低加速普及方面,首先,标准化的HPC方案,降低了高性能成本门槛。在处理器方面,微处理器大举进入HPC市场,CPU从单核演变到多核,性价比优势日益凸显。在HPC市场上占据相当份额的英特尔至强融核处理器和英特尔全新高速互连技术架构Omni-Path,以及GPU 计算加速卡进一步推动着HPC向更多领域普及。其次,针对典型行业HPC的蓝图参考架构、高性能生态联盟、高性能应用框架,降低了HPC架构部署管理难度和应用开发强度,使HPC的技术门槛进一步降低,加速HPC市场的普及。

 

三大战略Hold住HPC应用

[[209540]]

 

正因为HPC的发展已进入应用普及阶段,由此产生了更多的新机遇与挑战。构建经济高效、高性能、扩展性强、灵活且易于管理的HPC平台,进一步拓展HPC应用领域成为当下HPC发展面临的挑战和需求。

 

“在中国,为中国”,戴尔中国4.0战略不断深化下,戴尔为实HPC普及化、平民化的愿景,与合作伙伴、社区共同推动HPC平台生态圈的构建,加速HPC在中国的应用和普及进程。

 

戴尔通过创新、高性价比的解决方案组合,不仅满足科学计算领域包括基因工程、能源、国防、航空、气象等行业对HPC的需求,还满足新IT应用包括云计算、大数据分析、深度学习、人工智能等方面对HPC的需求。全面致力于HPC的市场化、商用化、普及化,以满足各种层次各行业用户的应用需求,帮助更多的企业和机构实现创新驱动发展。

 

况且,戴尔多年来在HPC方面一直在为世界上一些先进的学术和研究机构提供支持,并积累了丰富的经验,这部分经验和技术也可以通过戴尔立足中国的HPC三大策略得到很好的落地。

 

在此基础上,戴尔又为多个垂直行业提供了高度灵活、设计精准的HPC系统。借助戴尔HPC解决方案,用户可以更快速、更经济地部署HPC系统,这无疑将有助于加快创新速度,实现业务的创新发展。

 

其一,携手科研机构,共建HPC平台和实验室。这也是戴尔在HPC方面的全球策略之一。

 

在中国,戴尔与清华大学、上海交大等合作建立了HPC中心。戴尔与中科院自动化所展开合作, 共建“人工智能与先进计算联合实验室”,为中科院搭建基于HPC的“人工智能”和深度学习的研发和服务平台。

 

其二,联手合作伙伴共同构建HPC生态圈。并针对与HPC相关的硬件、软件、咨询、服务、运维、应用等多个领域,与业界领先的技术厂商如英特尔、NVIDIA、Mellanox、Bright Computing、Altair PBSworks等长期合作,为用户构建易部署、易管理性的端到端HPC解决方案。

 

戴尔与Bright Computing在Hadoop、OpenStack以及深度学习等开源领域展开全面合作。同时,戴尔还与众多厂商和大学科研机构积极参与Open HPC开源项,为HPC创建一个开源框架,以降低HPC成本。

 

其三,出台HPC简化方案以适合各种规模的企业。

 

阳春白雪一样的传统HPC解决方案,功能强大而复杂,未必适合所有的企业。因此,戴尔在全球推出了简化版的HPC 系统产品组合,既可提供定制的HPC系统的灵活性,又具备预配置型系统的速度、简便性和可靠性。

 

针对特定的科学、制造和分析类工作负载,戴尔工程师和领域专家设计并优化了全新的HPC系统,便于用户更快捷应用、部署HPC方案。

 

方案助落地,构建HPC应用最佳执行力。

 

既然提到了HPC解决方案,这里不妨再继续往下看,我们来点更详细的内容。

 

经过验证和认证的HPC解决方案

[[209541]]

 

目前,戴尔在HPC方面,从产品组合到行业解决方案,从优化服务到合作伙怑,戴尔提供了经过验证和认证的HPC解决方案。

 

面向生命科学、制造、科研等领域,戴尔根据行业用户HPC典型应用场景,提供了HPC参考架构和解决方案,以及戴尔HPC NFS存储方案、基于英特尔 Lustre的戴尔HPC高性能存储方案、戴尔深度学习方案等。

 

 

值得一提的四大解决方案,覆盖了HPC领域用户的主要需求。

1

研究领域HPC方案

用于科学研究的HPC系统不仅需 要高性能的计算能力、较强的扩展能力,还需要高速存储、 万兆以太网交换机、并行文件系统、集群管理系统等应用。开放、高性能、易管理的HPC平台,这是研究领域HPC方案的三元素。

戴尔推出的适用于研究领域的HPC方案,为用户提供出色的性能和灵活性,支持多种不同的结构、计算、 加速器和存储选项,其模块化设计可根据用户的具体工作负载自定义系统。

2

生命科学HPC方案

戴尔针对生命科学领域对HPC的需求,基于全球最佳实践,推出了戴尔生命科学HPC方案,可帮助生物信息学中心和遗传学中心根据临床要求经济快捷将基因分析转为临床治疗方案。同时确保合规并保护机密数据。该方案集成了包括高性能网络、 PowerEdge 高性能服务器和高性能存储方案等戴尔HPC产品和服务组合。

3

制造业HPC方案

戴尔针对制造业的需求,提供多种工作站,满足3D设计、虚拟现实设计,结合集群或两者并用,简化制造场景和客户模拟设计,通过结构分析和计算流体力学分析,提高设计效率和生产质量。戴尔为用户提供灵活高性能技术选择,以及端到端方案和服务,助力中国制造智能升级。

4

深度学习HPC方案

深度学习涉及数据准备处理、特征工程、建模、调参等环节。戴尔建立端到端的深度学习HPC平 台,简化从数据准备到分析训练结果的完整深度学习流程。针对深度学习,戴尔提供了灵活 的HPC技术框架、产品、服务和专业技能。为满足用户对开源软件的新需求,戴尔继续强化了与Bright Computing公司的合作,简化深度学习IT架构的部署管理。针对在深度学习广为采用开源技术 Hadoop、Openstack、Lustre,戴尔提供蓝图方案,简化架构部署运维难度,提高深度学习业务创新速度。可选的机器学习框架有Caffe、Torch、Tensorflow、Theano;可选的机器学习库包括MLPython、cuDNN、DIGITS 和 CaffeOnSpark。

 

另外还有三个方案和产品引起了业界的重点关注。一是,基于英特尔Lustre并行文件系统的分布式存储,二是DSS 7000高密度存储服务器,三是戴尔HPC NFS存储解决方案。

 

基于英特尔Lustre并行文件系统的分布式存储,不仅降低了高性能存储的开支,而且满足HPC容量和性能线性升级扩展,以及单一域名海量存储需求。采用PowerEdge作为服务器节点、PowerVault MD3作为存储节点、通过高速100Gb OPA或Infiniband保证低延迟。

 

DSS 7000高密度存储服务器,满足未来百万兆级存储需求。增强并优化了硬件设计,能够精准地给用户提供定制化的服务器,满足用户对业务大规模扩展的需求,同时避免了数据中心体积的无限扩展。DSS 7000能在一个4U机箱中提供最高720TB的存储容量,为对象和块存储提供云构建模块比较低廉的每GB成本。

 

戴尔HPC NFS存储解决方案基于NFS标准,被广泛用于Linux的HPC集群存储。提供包括硬件、软件、蓝图指南、支持和部署服务的存储解决方案,具备极其稳定的可靠性,采用高可用性故障转移配置。该方案可以选择PowerEdge R630服务器作为文件管理、PowerVault MD直连存储作为存储节点,结合万兆网络实现故障切换,保证高可用。

 

 

普及化,HPC势不可挡

[[209542]]

 

不管因为技术进步,还是因为产品组合丰富,还是因为方案更为切合应用,还是因为整体性价比在不断降低,种种原因最终促使HPC普及化趋势出现的根本,还是源自用户在数字化迈进过程的需求变化。

 

但是用户分大规模部署和中小规模部署,类型不同,应用对于HPC性能和技术支撑的力度会有所不同,加上“隔行如隔山”的行业应用独特性。最终也会促成HPC解决方案具备一定的行业属性。

 

但这一切,都会因为HPC厂商提供坚强的技术支持与服务得以有力保障。

 

而像戴尔这样,积极联合领先的合作伙伴,并采纳社区标准,推动高性能计算平台生态圈的建立, 全方位将HPC市场化、商用化、普及化,以满足行业用户的应用需求为HPC推进的根本,自然能在未来赢得更大的行业发展机会,从而实现用户基于HPC基础上的更广泛、更全面、更彻底的应用,为创新发展获得强大的动力。

 

因此,普及化,HPC势不可挡。

白皮书下载地址:https://mp.weixin.qq.com/s/T9zqZn6zHxfKDuhpKLlcpg

 

 

 

 

 

 

 

 

 

 

责任编辑:张燕妮 来源: 戴尔企业级解决方案
相关推荐

2015-03-25 09:55:34

程序员程序员修补BUG真正原因

2020-02-23 15:55:00

疫情AI人工智能

2018-07-10 10:48:00

IT程序员怪圈

2019-08-30 10:27:37

数据库通信技术

2017-11-02 13:05:12

PC3D NAND内存

2023-04-09 23:25:30

Java注解元注解

2017-06-06 15:13:07

2009-03-10 12:42:45

2021-02-07 08:13:18

@DateTimeFo@NumberFormSpring

2022-12-14 07:32:40

InnoDBMySQL引擎

2023-05-22 15:58:11

2022-05-05 08:55:12

工业物联网IIoT

2024-02-06 09:30:25

Figma矩形矩形物理属性

2018-04-02 15:13:21

网络

2021-02-11 09:14:36

内存虚拟机数据

2023-02-15 08:17:38

2021-02-02 09:13:11

索引SQL数据库

2023-05-03 23:55:32

小程序支付异常

2020-05-26 08:52:36

Java JVM多态

2020-11-24 06:20:02

Linux日志文件系统
点赞
收藏

51CTO技术栈公众号