hpc|让超算再升级的存储系统,华为凭什么?( 二 )


找寻HPDA存储新的平衡点HPDA推动了存储架构的改变,从而匹配新业务负载的同步、空间分布式计算和存储需求,矛盾聚焦于不同 I/O 模型、支持多协议访问、各种数据访问频率、高密度高效设计等方面,归根究底是找寻存储性能、成本和效率新的平衡点。
hpc|让超算再升级的存储系统,华为凭什么?
文章插图
OceanStor Pacific存储新品于2021华为全联接发布
华为发布了Huawei OceanStor Pacific 9950、Huawei OceanStor Pacific 9550两款新品,华为OceanStor Pacific系列高性能分布式存储,就是为打破HPC产业三重壁垒量身打造的HPDA存储系统。
第一重壁垒是高性能,HPC在不同流程阶段面临带宽型、OPS型业务负载需求,HPDA场景下这一情况会更加常态化,传统存储仅支持单一负载模型,形成了性能孤岛,使得流程间的数据需要在不同存储间迁移,降低了整体流程效率。
华为技术专家夏飞博士介绍,华为OceanStor Pacific系列存储搭载新一代分布式文件系统,一套存储即可实现2倍大文件高带宽,5倍小文件高IOPS性能,大大提高性能水平,同时该文件系统也能支持多种业务负载,既能兼顾客户原有的常规业务,也能很好适配企业对大数据和AI等新业务的探索,实现面向混合负载的全场景加速。
第二重壁垒是多协议无损互通,在以自动驾驶为代表的HPDA场景中,不同的流程阶段可能用到文件、大数据、对象多种服务,如何实现流程的高效数据访问成为用户面临的一大挑战。
华为OceanStor Pacific系列存储能够匹配多样化算力需求,一套系统支持多种协议,实现数据互通,减少中间环节,并且资源统一管理和运维,支撑业务敏捷响应。
第三重壁垒是大容量,随着HPDA的快速发展,海量数据的价值被进一步挖掘,用户愿意更长更久地保留数据,这对机房空间、功耗、存储成本都提出了新的挑战。
基于这种挑战,华为OceanStor Pacific全新推出了系列化超高密硬件,支持不同硬件间的数据自动分级,单位空间容量提升20%,全面降低HPC场景的存储成本。华为OceanStor Pacific系列高密大容量产品在5U空间里支持120个 3.5寸硬盘,通过高密实现60%以上的机柜空间节省,让海量数据不再成为负担。
越是基础的,越是核心的中石油东方物探正行进在通过HPDA挖掘数据价值的路上。
自19世纪40年代至今,人类为探寻石油和天然气能源用上了最先进的理论和技术,其中高性能计算必不可少,在油气地震勘探数据采集、处理、解释的三大环节中,都需要大量的高性能计算、海量数据分析等平台,不同架构和规模的数据存储在不同系统部署,数据需要在和平台之间频繁传输拷贝,产生了额外的花销和不必要的时间损耗。
中石油东方物探有限责任公司教授级高级工程师、数据中心原总工程师赖能和在会上讲到,以中东某探区为例,3259平方公里三维地震勘探,190万个激发、采集数据量1049TB。东方物探用了近12个月时间顺利完成数据处理任务。据了解,这也是目前为止已完成的单体数据量最大的油气地震勘探数据处理项目。
hpc|让超算再升级的存储系统,华为凭什么?
文章插图
OceanStor Pacific存储助力油气勘探
要支持如此之大的数据处理,东方物探选择了规模化集中部署华为OceanStor Pacific存储系统,其天然适合HPDA的设计在勘探场景下最大化程度得到发挥,不仅解决油气地震勘探不断增长的海量数据对存储容量的巨大需求的挑战,而且还可以保证存储性能和容量的线性增长,同时简化IT基础设施的复杂度,又可减少IT日常运维的工作量。
“华为OceanStor Pacific存储支持系统间远程直接访问、混合负载和多协议互通等功能,可大大减少数据拷贝时间和拷贝次数;同时满足大文件高并发、高带宽、小文件高IOPS的性能平衡要求;可实现一套存储同时供高性能计算、人机交互、资料解释、数值模拟、人工智能等多个不同技术应用平台共享。存储资源利用率提高30%以上;生产效率提升15%以上。”赖能和补充道。