HPC CHINA 2019：面向E级计算时代的HPC/AI协同设计
|
基于自研的分布式软件定义存储产品，焱融云为用户提供了高效稳定的存储服务，保护用户投资。YRCloudFile是一款软件定义的高性能分布式文件系统，YRCloudFile元数据集群可扩展，支持百亿级海量文件，YRCloudFile的智能分层功能，可对接第三方对象存储，将冷数据自动迁移至对象存储层中，上层应用仍使用文件访问接口，应用对数据分层无感知，智能分层实现了对数据生命周期的高效管理。 在传统高性能计算（ HPC ）、生命科学、天气分析预测、地质及石油勘探等需要对数据进行大规模分析和计算的场景中，YRCloudFile也可以发挥其高性能及海量小文件支持的特性和优势。YRCloudFile提供全面的POSIX接口支持，可替换传统的文件存储，解决其性能瓶颈等问题，加快业务处理速度，极大降低总体成本。 来自华为2012LAB交换技术实验室的何春志带来了题为《RDMA在计算网络中的应用》的分享。 华为2012LAB交换技术实验室的何春志 什么是RDMA技术？RDMA（Remote Direct Memory Access,远程直接内存访问）技术直接颠覆了传统的TCP/IP的通信方式，可以直接从网络的传输层将所有的通信相关的计算交由网卡设备来做，不需要CPU参与任何通信计算，甚至在整个通信过程中都不需要和CPU有任何沟通。 目前RDMA技术已经被广泛使用到了各种不同的应用当中，如机器学习的各种框架、大数据分析应用、数据库应用、存储应用、HPC应用。 据介绍，RoCE是RDMA over Converged Ethernet的简称，是一种允许通过以太网使用远程直接内存访问（RDMA）的网络协议。RDMA可绕过CPU和其他计算组件直接将网络数据传输到内存中，不需要进行拷贝，从而提高效率。基于标准以太网的IP/UDP消息传递的一个主要架构问题是业务承载需要对报文进行排队。 华为依靠独创的AI芯片和智能无损交换算法，解决了当前以太网易丢包，吞吐率低的难题，引领数据中心网络迈入AI时代，匹配AI业务的快速普及，助力客户加速实现智能化转型。 下一位演讲者是同方超算产品高级总监周卫岩，他带来了主题为《以数据为中心 同方服务器和高性能计算的核心》的分享。 同方超算产品高级总监周卫岩 毋庸置疑，我们现在处于一个数据大爆炸的时代，数据无处不在，数据成为企业创新的重要来源。数据影响我们的行为，但是数据价值的实现并不是一蹴而就的，这需要在计算力的支撑下，通过一定的算法来实现。我们正在从CPU为中心到以数据为中心的改变。 据周卫岩介绍，在这样的背景下，我们推出了超强G858系列服务器。同方超强G858采用新的服务器设计概念和技术，支持Intel Xeon Skylake-SP处理器，在处理器性能，总线带宽，内存带宽等方面均有质的飞跃，在PCIE数量，硬盘数量，网络扩展等方面提供超强规格，适用于高性能计算（HPC）和大规模并行计算环境。可广泛应用于人脸识别，视频分析，气象研究与分析，大数据分析等应用场景。 本场分论坛的最后一位压轴嘉宾是来自中国石油集团东方地球物理公司研究院的赖能和，他分享的主题是《PB级数据驱动高性能计算架构的转变》。 中国石油集团东方地球物理公司研究院的赖能和 高性能计算已经成为当下能源行业的主要IT应用模式，但随着应用水平的不断提升和软件优化的逐步展开，在应用领域也面临着许多挑战。 赖能和表示，高性能计算和油气勘探是密切不可分的。计算机40年的发展推动了油气勘探发展的四大阶段，从光电、全数字、全三维，到今天的高精度勘探，物探技术相互促进，油气勘探实际上就是给地球的近地表做CT,计算量很大。 目前，高性能计算在勘探上的难点主要是四个方面，分别是计算能力提升、海量数据存储、高性能并行架构优化和算法优化。过去，由于计算力不足，很多算法无法实现，随着计算力的提升，高性能计算和人工智能已经融合到了一起。 赖能和举例表示，在油气勘探行业有一种算法是初至波，初至波拾取非常费人工，曾经有一个30T的数据，30多个人同时干也得需要60多天，全是重复劳动。有了人工智能+高性能计算以后，用机器拾取每一秒钟就可以完成一千个点，速度得到了大幅提升，通过训练以后能够很好的提升生产效率。 写在最后，15年来，全国高性能计算学术年会的足迹遍及大江南北，让高性能计算薪火相传。此次年会在呼和浩特市举办，将有力地促进内蒙古和林格尔新区步入大数据、人工智能等产业发展的快车道，形成大数据、高性能计算发展的良好生态环境，在支撑内蒙古自治区经济和社会转型发展中发挥关键性引领作用。 （编辑：温州站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
