> 自媒体 > (AI)人工智能 > 中国要做GPT-3!昇腾黑科技曝光,2.4倍性能提升释放「算力狂魔」
中国要做GPT-3!昇腾黑科技曝光,2.4倍性能提升释放「算力狂魔」
来源:新智元
2023-04-11 13:06:54
512
管理

编辑:yaxin, 好困

【新智元导读】1750亿参数,GPT-3靠的不仅是算法的提升,还有「算力的加成」。最新MLPerf基准测试中,昇腾基础软硬件平台集群性能同比提升2.4倍!如何释放「算力狂魔」?还要看CANN这三个黑科技。

未来十年,是AI算力的「超摩尔时代」。

要说2020年,AI领域最火的是什么?

毫无疑问是GPT-3,它能写小说、能与人聊天、还能下象棋...... 曾被冠以最「全能」语言模型的称号。

就在6月30日,国际权威AI基准测试MLPerf公布最新一期榜单。

国外,英伟达、谷歌等「算力」大厂的表现,可谓是赚足了眼球。

在国内,鹏城实验室和北京大学联合团队基于华为昇腾AI基础软硬件平台,在MLPerf基准测试中同样取得优异的表现。

测试结果显示,昇腾基础软硬件平台集群性能同比提升2.4倍!

千P「云脑」再进化:给AI硬件插上翅膀

AI计算基准评测组织MLPerf成立于2018年5月,由图灵奖得主大卫·帕特森(David Patterson)发起,学术界和工业界联合制定和推广。

它囊括了AI行业中的70多个知名企业和机构,会员包括华为、谷歌、英特尔、英伟达、微软、脸书等,目的是提供AI软硬件系统的通用Benchmark评测基准。

MLPerf是当今权威性最大、影响力最广的国际AI性能基准测试,相当于AI技术领域的「晴雨表」。

MLPerf Training测试中,鹏城实验室基于华为昇腾AI基础软硬件平台鹏城云脑II,实现了同比性能大幅增长。

该平台是唯一拥有自主知识产权的全栈系统,成绩稳居世界第一阵营。

从MLPerf1.0的评测结果可以看出,在昇腾硬件基本不变的情况下,通过软件和系统级优化,

「Resnet50单卡训练的性能」,在一年的时间内提高了82%。

再看,「Resnet50集群训练的性能」在一年的时间内提高了240%,时间开销仅为0.65min。

先说硬件实力。

硬件便是我们熟知的鹏城实验室与华为共建鹏城云脑Ⅱ。

采用搭载鲲鹏、昇腾处理器的Atlas 900集群,算力为1000P(每秒百亿亿次计算)。

CANN 3.0现在的架构功能十分完善,对外提供适配不同硬件、不同 OS 的驱动,支持NPU CPU异构通信。

对内可实现Stream、内存等底层管理,丰富的加速库支持算子/标量/向量等通用计算,能高效完成图像和视频数据的预处理,执行引擎为深度神经网络计算提供了执行上的保障。

CANN为用户提供可以快速构建AI应用和业务的多层次编程接口有:

1、统一的编程语言:提供一套标准的ACL编程接口,为开发者屏蔽底层处理器的差异,提升用户APP编程易用性;

2、统一的网络构图接口:提供标准的昇腾计算AIR,支持多框架,让用户可以快速部署神经网络业务;

3、高性能计算引擎以及算子库:通过高性能编译引擎、执行引擎、调优引擎和预置高性能算子库,支撑用户快速部署神经网络业务、降低部署成本并最大程度发挥昇腾计算能力;

4、基础服务:驱动、虚拟化、媒体、集合通信等能力。

在这次MLPerf评测中,对于鹏城实验室优异性能的表现,鹏城实验室MLPerf评测负责人徐鹏翔老师,为我们首次曝光了本次评测所使用CANN的三个黑科技:

1、算子融合性能优化

2、多流水快速启动提升有效算力

3、集群系统性能优化方案

接下来,带你一睹为快。

三个AI黑科技

黑科技一:算子融合性能优化

如何理解算子融合性能优化?

通俗来讲就好比做菜,数据好比食材,算子好比制作工序。

普通厨师需要6道工序才能做出佳肴,而优秀厨师将这6道工序「浓缩」成3道,能够有效提升制作效率。

那么,如何进行工序有效融合将考验厨师的技艺。

三个黑科技,让CANN打开了算力魔盒,为AI硬件插上了翅膀。

华为轮值董事长胡厚崑在2021世界人工智能大会开幕式曾表示,「只有基础打得牢,根技术扎得深,应用创新跑得快,才有人工智能产业的参天大树和生态的持续繁荣。」

鹏城实验室能够在最新MLPerf基准测试中实现2.4倍性能提升,正是因为异构计算架构CANN这3个黑科技扎下了深根。

只有基础打得牢,根技术扎得深,才有人工智能的繁荣发展。

总之,技术要扎到根,根深才能叶茂。

—完—

欢迎点赞~ 关注 新智元 及时了解人工智能新动态~

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
六座加长版特斯拉Model 3火了!敞篷设计 还带滚落架
【CNMO科技消息】听说特斯拉要在国内推六座版Model Y?先不管真假,以特..
马斯克又画饼了!特斯拉业绩翻盘,但新业务依然难落地?..
马斯克又双叒开始讲故事了。10月24日,特斯拉发布2024年第三季度财报,根..
特斯拉“高枕无忧”了吗?高盛、大摩还有些“顾虑”..
特斯拉第三季度财报亮眼,但高盛、大摩还有些“顾虑”。美东时间周三,特..
特斯拉10万员工薪酬数据曝光 基本工资普遍低于友商?..
【CNMO科技消息】近日,美国《商业内幕》杂志获取了特斯拉的内部薪酬数据..
特斯拉爆发!股价涨超16%,市值大增超7800亿元!发生了什么?..
每经编辑:张锦河10月24日晚,美股三大指数开盘涨跌不一,道指跌0.22%,..
美股收跌,道指跌超200点,特斯拉市值跌破1万亿美元
北京时间15日凌晨,美股三大指数集体收跌,道指跌207.33点,跌幅0.47%,..
马斯克招人策略曝光:9轮面试,底薪低于同行,只招“铁杆特斯拉人”..
一水 发自 凹非寺量子位 | 公众号 QbitAI要想进入特斯拉,先得接受低底薪..
特斯拉股价暴拉市值重返1万亿,只因马斯克做对了这笔“关键投资”..
财联社11月9日讯(编辑 赵昊)周五(11月8日)美股早盘,特斯拉股价涨超9..
马斯克招人策略曝光:9轮面试,底薪低于同行,只招铁杆特斯拉人..
要想进入特斯拉,先得接受低底薪才行?!事情是这样的。Business Insider..
关于作者
小南小南(普通会员)
文章
963
关注
0
粉丝
1
点击领取今天的签到奖励!
签到排行

成员 网址收录40400 企业收录2981 印章生成237600 电子证书1052 电子名片60 自媒体51698

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索