分享至
国家超级计算天津中心发布“天河天元”大模型
原文地址：http://news.sciencenet.cn/htmlnews/2023/5/501029.shtm
5月20日，在第七届世界智能大会上，国家超级计算天津中心正式发布“天河E级智能计算开放创新平台”和“天河天元大模型”。
近期，ChatGPT的爆火引发了信息技术领域的“大模型热”，国内多家科技公司和科研机构先后推出多个大模型平台或应用。国家超级计算天津中心发布“天河天元”，是算力基础设施“国家队”首度参与到大模型平台建设中来。
据国家超级计算天津中心党组书记、应用研发首席科学家孟祥飞介绍说，天河E级智能计算开放创新平台将带来突破百亿亿次的、跨模态的超级计算算力，可支撑传统的科学工程计算、服务智能混合计算，并打造全方位的算力赋能创新和数字经济高质量发展载体。在此基础上，国家超级计算天津中心搭建天河天元大模型，形成了从文本生成、语言生成，到文本、语音+视频生成的完整计算链，支撑智能科技的创新。
据了解，在天河新一代超级计算系统中，国家超级计算天津中心设计实现了柔性体系架构，形成了支持双精度、单精度、半精度融合的计算输出能力。特别地，该体系架构在完成传统的高精度科学工程计算之外，还构建了基于E级算力体系架构的自主创新智能计算引擎，建设人工智能大规模训练与应用系统支撑环境。
天河新一代超级计算机概念造型 图片来源：国家超级计算天津中心 ?
作为具有巨大的参数量（数亿到数万亿参数）的人工神经网络模型，大模型目前正被用于解决复杂的自然语言处理、计算机视觉和语音识别等任务。通过使用大模型，深度学习算法可以更好地处理这些任务，提高模型的准确性和性能。而同时，大模型的训练和调整需要大量的计算资源，包括高性能计算机、智能计算系统和云计算资源等。可以预见，大模型将会成为生产力工具，为人们带来更高效、更智能的解决方案。然而，大模型的建设和维护需要巨大的资源，这使得它们在普通企业中的应用受到了一定的限制。
