ITCOW牛新网 11月13日消息,在日前召开的中国人工智能产业联盟全会上,华为数据存储联合中国信息通信研究院、工信部人工智能关键技术和应用评测实验室、工商银行、中国移动、中国联通、百度、阿里云、腾讯云和蚂蚁集团等企业,共同发起“大模型基础设施高质量发展行动计划”,意在加速推动人工智能大模型技术的工程化和规模化应用。

大模型基础设施高质量发展行动计划

据大会透露,该计划将聚焦于提升大模型基础设施的质量和效能,重点围绕“高效计算调度、高性能 AI 存储、高通量网络、高效开发平台和智能运维平台”五大核心技术展开布局。通过建立健全的大模型基础设施体系,各企业希望为大模型的工业应用提供强有力的技术支撑,促成 AI 应用的普及和创新发展。

据ITCOW牛新网了解,华为闪存存储领域总裁黄涛在会上指出,随着数据量的指数增长以及 AI 技术的发展,现有数据存储技术面临重大挑战。他强调,AI 数字智能时代对存储性能提出了更高的要求,如 xPU 与存储的带宽瓶颈、算力集群的低可用度、推理时延等问题逐渐显现。黄涛表示,新一代 AI 存储技术应具备极致的性能、高扩展性、数据韧性及可持续发展能力,能够支持数据编织、智能化管理等先进功能,以满足 AI 产业的持续升级需求。

黄涛进一步介绍了大模型规模化发展带来的技术需求。他指出,随着大模型规模法则(Scaling Law)演进,企业在进行并行任务处理(如模型的 CKPT 数据保存与加载)、多模态数据处理(包括数据收集、清洗和模态对齐)以及集群运维方面都面临新要求。为此,企业亟需一个全局共享的大型文件系统,其特点是单一命名空间和高性能的并行读写能力。这样的系统可以显著减少多集群、多文件系统环境中联邦式堆叠带来的低效问题,从而优化数据调度与管理流程,提升数据供给的效率,为大规模 AI 集群的高效运转提供坚实支撑。