分布式NAS集群突破HPC存储瓶颈!
作者:互联网
高性能计算(HPC)通过极快的处理速度,获取大量数据进行复杂的运算,实现数据即时分析,达到快速决策的目标。HPC广泛应用于油气勘探、天气分析、基因测序、高校科研、尖端实验室。对于存储系统要求必须足够的性能,保证来自多个HPC服务器密集而多样的分析行为。由于未分析的原始数据会越积越多,并且未来还会有更多的数据需要研究/处理,因此容量和扩展性也是重要的考虑因素。HPC的总体数据最终会达到PB级别,需要超大的存储容量才能完成归档。
EonStor CS是横向扩展NAS存储系统。最多可以添加144个节点,组成高性能大容量集群,读/写速度高达100+ GBps,完全能够运行高性能分析应用。超过100PB的存储空间,用于分析数据归档。性能和容量统一在单一命名空间下,使多个HPC服务器可以在同一文件夹/路径下分析和共享数据,降低数据访问的复杂性。CS还支持自动负载均衡,平均分配集群所有节点的数据。当大量用户同时访问数据时,系统通过并行处理对工作负载分流,解决单节点的性能瓶颈问题,有效提高访问效率。
HPC应用需要多个服务器长期不可中断的分析行为。如果存储系统发生故障,整个分析过程将会出现问题,导致服务延迟。通过对硬盘和节点的多层数据保护,EonStor CS的高可用性确保分析过程不会中断。任何环节发生故障,都不会丢失数据,也不会影响分析的性能。如果硬盘损坏,Infortrend独有的RAID技术确保系统保持相同的性能水平正常运行。在节点保护方面,副本和纠删码保护功能避免单个故障节点造成停机。 如果检测到节点故障,CS会启动自我修复功能从故障节点恢复数据。
HPC应用的拓扑通常包括大量的存储节点。复杂的架构需要一种简单的方法来构建/管理整个存储集群,减轻管理负担。EonOne提供设置向导,帮助用户管理员轻松设置存储和网络。通过EonOne部署EonStor CS集群非常便捷,只需5分钟即可完成设置,只需30分钟即可完成集群的部署。另外,Infortrend开发的EonView应用于Windows和Mac平台,提供直观化流程化的操作向导,即使非专业IT人员,也能够快速实现数据的共享与备份。启动EonView即可自动搜索终端网段内的存储设备,还可以快速挂载共享文件,并且通过文件夹排程备份、恢复链路等操作实现常规的数据备份。
标签:CS,分析,NAS,集群,HPC,数据,节点,分布式 来源: https://blog.51cto.com/14113298/2488091