AI Siri网9月25日消息,在2024华为全联接大会上,华为携手中国移动共同发布了超大规模集群AI存储解决方案。
中国移动集团首席专家张昊指出,近年来,大模型技术发展日新月异,朝着更大规模、更强能力的方向飞速发展。模型参数规模已突破万亿,甚至达到十万亿级别,并从单模态向多模态演进。这一趋势对底层存储系统提出了严峻挑战。
然而,随着大模型规模的不断扩大,尤其是在万卡集群处理海量非结构化数据时,传统存储系统在高吞吐性能、多协议处理以及数据管理效率方面都面临着诸多瓶颈。这些瓶颈直接影响到大模型的训练速度和效率。
值得关注的是,中国移动在哈尔滨的万卡超大规模智算集群中,率先大规模部署了多协议融合存储,该存储集群的可获得容量高达150PB。 这标志着大规模AI存储技术在实际应用中取得了显著进展。
依托华为OceanStor AI存储的高性能融合存储系统,中国移动显著提升了大模型训练效率,能够有效支撑千亿甚至万亿级参数规模的大模型的高效训练。这表明华为OceanStor AI存储能够满足大模型时代对存储系统的高性能和高容量需求,为大模型技术的发展提供了坚实的底层基础设施保障。
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,可联系本站进行二次审核删除:fireflyrqh@163.com。