世界上第一台百亿亿次的超级计算机,竟是它

【世界上第一台百亿亿次的超级计算机,竟是它】世界上第一台百亿亿次的超级计算机,竟是它
文章图片

文章图片

据《南华早报》报道 , 我国科学家已经基于其最新的一台配备双威处理器的超级计算机 , 建立了“脑级人工智能模型” 。学者们声称 , 具有174万亿个参数的AI模型可用于从自动驾驶汽车到科学研究的各种应用 。
使用的系统是神威OceanLight(有时称为OceanLite)基于96000个节点 , 由神威的混合SW39010390核处理器提供支持 , 总共具有近4000万个内核(CPU是从SW26010处理器演变而来的) 。这台机器为世界上第一台百亿亿次级超级计算机 。
来自国家并行计算机工程技术研究中心(NRCPC)的中国研究小组将他们的AI模型称为八卦炉 , 因为它包括大约174万亿个参数 , 可与人脑中的突触数量相媲美 。OceanLight的实际性能现在声称是5.3“AI”ExaFLOPS , 尽管早些时候据说它是4.4“混合精度”ExaFLOPS , 这再次表明NRCPC披露的该系统的性能数字并不真正准确 。
但是 , 即使OceanLight比据说的要慢 , 创建具有174万亿个参数的AI训练模型的工作也是巨大的 。来自NRCPC的科学家告诉南华早报 , 为了通过其大脑规模的AI模型获得不错的性能 , 他们必须引入“特定于硬件的节点内优化” , 并以前所未有的规模实施“混合并行策略” 。考虑到OceanLight具有96000个节点和近4000万个处理引擎 , 为该系统优化硬件和软件是一件大事 。