> 自媒体 > (AI)人工智能 > GPT-4满分通过大厂模拟面试!154页研究刷屏:与AGI的第一次接触
GPT-4满分通过大厂模拟面试!154页研究刷屏:与AGI的第一次接触
来源:量子位
2023-04-15 18:49:07
512
管理

梦晨 衡宇 发自 凹非寺量子位 | 公众号 QbitAI

“GPT-4可被视作AGI (通用人工智能)的早期版本。”

若是一般人说这话,很可能会被嗤之以鼻——

但微软雷蒙德研究院机器学习理论组负责人万引大神Sébastien Bubeck联手2023新视野数学奖得主Ronen Eldan、2023新晋斯隆研究奖得主李远志、2020斯隆研究奖得主Yin Tat Lee等人,将这句话写进论文结论,就不得不引发全业界关注。

具体来说,这项研究发现GPT-4除了精通语言,还能无需特别提示解决数学、编程、视觉、医学、法律、心理和更多领域的新任务和难任务。

更为关键的是,GPT-4在这些方面表现大幅超越ChatGPT等之前模型,并在所有这些任务上惊人地接近人类水平 ,也就是摸到了AGI的门槛。

一个最突出的例子,GPT-4满分通过了LeetCode上的亚马逊公司模拟面试,超越所有参与测试的人类,可以被聘用为软件工程师。

对第二个任务,人为把代码中独角兽的角部分删除,GPT-4也可以在合适的位置添加回来。

微软团队认为,即使他们当时测试的还不是多模态版本,GPT-4纯语言版也掌握了近似“看”的能力:根据自然语言描述来理解和操作代码、推断和生成视觉特征。

对于GPT-4可以理解概念这个观点,OpenAI CEO早些时候也留下这样一段话:

语言模型只是被设计用来预测下一个词……动物、包括我们人类本来也只被设计成生存和繁衍,但那些复杂和美丽的东西正是来自于此。

接下来,微软团队对1994年国际共识智力定义中的几个方面执行与上面类似的试验,包括:

推理、计划、解决问题、抽象思考、理解复杂想法、快速学习和从经验中学习的能力。

一个猎人往南走了一英里,往东走了一英里,往北走了一英里,然后回到了起点。这时他看到一只熊,并将其射杀。这只熊是什么颜色?

对这个问题,ChatGPT还只表示条件不足无法作答,GPT-4却推理出猎人所在的位置是极点,并且南极没有熊,所以猎人遇到的是北极熊,是白色。

论文中还展示了GPT-4的更多能力和可能用例。虽然GPT-4只能输出文本,但可执行的代码就成了连接它与世界的桥梁。

GPT-4通过Javascript代码画图,可以是2D的也可以是3D的。

GPT-4生成草图,与Stable Diffusion联用可以精确控制图像布局。

在简单数学运算问题上,GPT-4还表现出缺乏“工作记忆”。

下面算式(88为错误答案),当数字在0-9之间均匀选取时,GPT-4的准确率只有58%。

当数字范围在10-19和20-39时GPT-4准确率下降到16%和12%,数字范围在99-199时准确率下降到0。

不过一旦允许GPT-4写下中间步骤,1-40范围内的准确率就直接来到100%,1-200范围内的准确率也飙升到90%。

有着这些缺陷,还能说明GPT-4可被算作早期AGI吗?微软团队认为,通用智能的定义本身就是模糊的,它们在论文中声明:

我们声称GPT-4代表了迈向AGI的进展,但并不意味着它是完美的,或者它能够做任何人类能够做的事情,或者它有内在动机和目标。……我们相信,GPT-4的智能标志着计算机科学领域及其他领域真正的范式转变。

One More Thing

在开发阶段获得GPT-4内测资格的其实不止微软一家,还有一个独立研究机构Alignment Research Center,它们把试验推向了更深层次。

给GPT-4必要的工具包括网络访问权限、一个带余额的支付账户,让他自己在网络中行动,测试它能不能赚更多钱、复制自身、或增强自己鲁棒性。

网友们看到这里,感觉是这样的:

报告中没有披露GPT-4是否完成了所有这些任务。

但可以确定的是,GPT-4已经见过人类社会,来过人类社会,在人类社会留下了自己的印记。

等一下,以后还可以单纯地称我们生存的世界为“人类”社会吗?

论文地址:https://arxiv.org/abs/2303.12712v1

参考链接:[1]http://sbubeck.com[2]https://twitter.com/nearcyan/status/1639029957702590464[3]https://arxiv.org/abs/2303.08774

— 完 —

量子位 QbitAI · 头条号签约

关注我们,第一时间获知前沿科技动态

1
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
关于作者
司机(普通会员)
文章
669
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40369 企业收录2981 印章生成216706 电子证书945 电子名片57 自媒体34015

@2022 All Rights Reserved 浙ICP备19035174号-7
1
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索