> 自媒体 > (AI)人工智能 > GPT能为自动驾驶带来什么?毫末给出了答案 | 钛媒体焦点
GPT能为自动驾驶带来什么?毫末给出了答案 | 钛媒体焦点
来源:钛媒体APP
2023-04-17 10:08:05
305
管理

首先,在预训练阶段通过引入量产驾驶数据,训练初始模型,再通过引入驾驶接管 Clips 数据完成反馈模型(Reward Model)的训练,然后再通过强化学习的方式,使用反馈模型去不断优化迭代初始模型,形成对自动驾驶认知决策模型的持续优化。

同时,DriveGPT 雪湖·海若会根据输入端的提示语以及毫末 CSS 自动驾驶场景库的决策样本去训练模型,让模型学习推理关系,从而将完整驾驶策略拆分为自动驾驶场景的动态识别过程,完成可理解、可解释的推理逻辑链生成。

毫末智行 CEO 顾维灏表示,毫末 DriveGPT 雪湖·海若通过引入驾驶数据建立 RLHF(人类反馈强化学习)技术,对自动驾驶认知决策模型进行持续优化。据毫末方面的说法,在 RLHF 的加持下,Hard Case 通过率提升了 48%。

二是弹性调度资源的升级。毫末构建了一个大模型持续学习系统,数据以动态数据流的形式结合增量学习,持续不断地将量产回传和筛选的存量数据,传入认知和感知 Pretrain 大模型。

三是吞吐效率的升级。在 Transformer 的大矩阵计算上,毫末通过对内外循环的数据拆分,尽量保持数据在 SRAM 中提升计算的效率;在传统的训练框架中,通过引入火山引擎提供的 Logo核心算子库实现融合,端到端吞吐提升 84%。

另外,毫末表示,自动驾驶数据智能体系MANA架构已迎来全线升级。截至2023年4月, MANA 学习时长超 56 万小时,相当于人类司机 6.8 万年。

在 MANA 发布迭代一年后,在本次 AI DAY 也迎来升级,具体包括:

首先,MANA 感知和认知相关大模型能力统一整合到 DriveGPT 雪湖·海若中;其次,MANA计算基础服务针对大模型训练在参数规模、稳定性和效率方面做了专项优化,并集成到 OASIS 中;第三,增加了使用NeRF技术的数据合成服务,降低 Corner Case 数据的获取成本;最后,针对多种芯片和多种车型的快速交付难题优化了异构部署工具和车型适配工具。

在视觉感知能力上,毫末对视觉自监督大模型做了一次架构升级,将预测环境的三维结构,速度场和纹理分布融合到一个训练目标里面,强迫模型练好内功,使其能从容应对各种具体任务。目前毫末视觉自监督大模型的数据集超过 400 万 Clips,感知性能提升 20%。

顾维灏举例称,在泊车场景下,毫末将鱼眼相机也引入到视觉 BEV 的感知框架当中,鱼眼图像通过 2D backbone 提取出视觉特征,经过空间转换映射至 BEV 空间,并在该空间下对于障碍物的轮廓边界进行识别和测量,目前可做到在 15 米范围内达测量精度 30cm,2 米内精度高于 10cm。

除了用自监督大模型练内功,毫末还公开了在纯视觉三维重建方面的一些进展。

毫末对 NeRF 做了升级,将视觉感知结果转化为可用于 BEV 模型训练的带 3D 标注的真值数据,目前可以做到重建误差小于 10cm。

单趟重建有时会受到遮挡的影响,不能完整地还原三维空间,因此毫末尝试了多趟重建的方式——即将同一地点不同车辆在不同时间经过的数据合并做多趟重建,由此提升场景还原度,重建效率可提升 5 倍。

重建之后,MANA 可以编辑场景合成难以收集的 Corner Case。毫末表示,近期训练了一个可以在静态场景做虚拟动态物体编辑的模型,可以控制虚拟物体在场景中按照设定的轨迹运动,由此合成各种 hardcase,例如近距离回车,行人、电动车交互行为等。

2023年将是智驾产品大考之年

“2023 年智驾产品进入全线爆发期。”毫末智行董事长张凯在活动上表示。

张凯判断,城市导航辅助驾驶产将在 2023 年将围绕量产上车发力,主要玩家的城市导航辅助驾驶产品进入到真实用户覆盖和多城市落地的比拼。

其次,行泊一体和末端物流自动配送产业商业化将成为自动驾驶公司深耕的重点。在乘用车领域,搭载行泊一体功能的智驾产品将迎来前装量产潮;在末端物流自动配送领域,末端物流自动配送车在商超、快递等场景迎来爆发,2023 年将在这些场景实现可持续商业化闭环。

在 AI DAY 上,毫末表示其城市 NOH 已在北京、保定、上海等城市开启泛化测试,即将量产上车。张凯表示,到2024 年,毫末城市 NOH 将有序落地 100 城。

一年之内,从三座城市扩张至百城,毫末给出的目标可以说十分激进。

截至目前,毫末三代乘用车产品搭载车型近 20 款,毫末辅助驾驶用户行驶里程突破4000万公里,HPilot2.0 日均里程使用率 12.6%。

毫末智行透露,目前已与 3 家主机厂(包括长城)签署定点合同,相关项目正在交付中。

结合毫末往届 AI DAY 的动态来看,从发布中国首个数据智能体系 MANA,到建设智算中心雪湖·绿洲,再在其基础上训练出参数规模达 1200 亿作为 DriveGPT 雪湖·海若模型,毫末的闭环思维始终贯彻其技术始末,并逐渐形成数据驱动的闭环。

正如毫末所言,2023 年将是智能驾驶冲刺之年、大考之年。这对毫末来说,这也是长久技术布局走向落地应用的关键时期;毕竟,毫末要在 2025 年实现城市 NOH 落地 100 城,这并不是一个简单的事情。

(本文首发钛媒体App,作者|肖漫,编辑|张敏)

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
ChatGPT最强插件Code interpreter实战,成为数据分析最大赢家!..
7月8日凌晨,OpenAI向所有ChatGPT Plus用户开放了代码解析器功能。这是自..
ChatGPT概念板块涨2.38% 恒信东方涨20%居首
来源:中国经济网中国经济网北京6月7日讯 今日,ChatGPT概念板块整体涨幅..
一本可以对你思维产生颠覆性改变的书,两位open Ai...
这本书对我的思维产生了颠覆性的影响。《为什么伟大不能被计划?》是Open..
每日一“焦”:chatGPT与MR,将带来哪些景气上行...
ChatGPT和MR将会带来哪些热门领域?这是一个很有价值的视频,它涵盖了cha..
Google以\u0026#34;声誉风险\u0026#34;为理由不推出ChatGPT的类似聊天机器..
ChatGPT的推出促使一些人猜测,人工智能聊天机器人可能很快取代传统的搜..
烧数亿美元、耗上万颗英伟达 GPU,微软揭秘构建 ChatGPT 背后超级计算机往..
整理 | 苏宓出品 | CSDN(ID:CSDNnews)都说 ChatGPT 这种大模型研发是..
永远不要忽视这些细节!ChatGPT账号封禁风险大增!
三月末到现在,,ChatGPT开始大面积封号,亚洲地区受影响最大,如果你在登..
AI也疯狂!“聊天机器人”ChatGPT写出毁灭人类的计划书,进阶“生产力”之..
财联社12月6日讯,2022年以来,AI绘画等AIGC(人工智能生成内容)新算法..
和女生聊天从此不冷场 防止尬聊的12个话题
聊天是人际交往中必不可少的一环,它可以帮助我们更好地了解对方,促进彼..
关于作者
月深沉(普通会员)
文章
499
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40335 企业收录2981 印章生成194831 电子证书832 电子名片53 自媒体26195

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索