3月14日,ChatGPT热度未散,OpenAI就正式推出最新作品——多模态大模型GPT-4,再次引爆科技圈。
与ChatGPT所用的GPT-3.5相比,GPT-4能处理更复杂的图像、文本信息。OpenAI将其称之为扩展深度学习的最新里程碑。业内流传,GPT-4的参数规模或将达到数万亿,其训练需要更高效、更强劲的算力来支撑。
显而易见,AI大模型“狂飙”背后,是对算力的极度渴求。谁率先掌握了先进的算力,谁就能取得在当下抢跑的主动权。
那么什么才是先进的算力?
作为算力赛道领跑者,曙光用实践给出答案。
通过前瞻布局和技术创新,曙光形成了覆盖AI计算全链条的业务体系,可为用户提供多元、绿色、高效、安全的全场景人工智能计算服务。其中,5A级智算中心作为业界领先的新型算力底座,除能实现全精度算力供给外,基于开放的建设路线,还能支持90%以上的主流AI框架及行业应用。在保证能为自然语言、机器视觉、多模态等多类预训练大模型提供强劲算力的同时,也进一步降低部署开发门槛。
此外,凭借浸没相变液冷技术加持,5A级智算中心核心系统PUE值可降至1.04,大幅降低计算设备运行温度,提升运行稳定性。也因此,更好的保障AI大模型高强度、连续性训练作业。
目前,曙光已与智源研究院、中科院自动化所、百度深度合作,为“悟道2.0”、“紫东太初”、“文心”等大模型训练提供先进的算力支持。并通过并行策略、算子、工具包等方面的优化,让AI大模型的训练效率显著提升。
来源:咸宁日报
相关文章
猜你喜欢