> 自媒体 > (AI)人工智能 > Hinton最新访谈:GPT-3和人脑比参数量仍少1000倍
Hinton最新访谈:GPT-3和人脑比参数量仍少1000倍
来源:新智元
2023-05-26 22:17:36
235
管理
【新智元导读】三十年前,Hinton对于神经网络能够取得大发展的信念是非主流的,而现在恐怕很难找到任何人反对。近期 Hinton 在麻省理工技术评论的年度 EmTech MIT 会议上,讨论了这个领域的现状以及他认为下一步应该走向何方。

如果我们有了这些突破,我们是否能够通过深度学习技术接近人类的智力?

是的。尤其是突破性的进展可以让大量的向量实现诸如推理的事情,但是我们也需要大幅度的扩大参数规模。人类的大脑有大约100万亿个参数,或者说突触,而我们现在所说的一个真正的大模型,像 GPT-3,有1750亿。它比大脑小一千倍。GPT-3现在可以产生看似合理的文本,但与大脑相比仍然很小。

你说的规模,是指更大的神经网络,更多的数据,还是两者兼而有之?

两者都有。在计算机科学和人类之间存在着某种差异。与感官接收到的数据量相比,人类大脑中有更大量的参数,而神经网络也出人意料地善于处理数量相当少的数据,但人类可以做到更好。

有些人仍然相信符号表示是人工智能的方法之一,您同意吗?

我有像赫克托 · 莱维斯克这样的好朋友,他真的相信符号表征的方法,并且在这方面做了很大的工作。不过我不同意他的观点,但是这种符号学的方法是一种完全合理的尝试。

但我的猜想是,最终我们会意识到符号只存在于外部世界,本质是我们对向量进行各种内部操作。

对于人工智能的未来,你认为你最非主流的观点是什么?

我曾经有一些非主流的观点,而五年后,它们成了主流。我在20世纪80年代的大多数非主流观点现在已经被广泛接受,所以现在很难找到不同意这些观点的人。所以,我现在已经没有多少非主流观点了。

参考链接:

https://www.technologyreview.com/2020/11/03/1011616/ai-godfather-geoffrey-hinton-deep-learning-will-do-everything/

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
博士女出轨导师,聊天记录尺度大到令人羞耻,网友:比初中生会玩..
阅读此文之前,麻烦您点击一下“关注”,既方便您进行讨论和分享,又能给..
在这家网店消费后,他们都接到了境外诈骗电话……
来源:检察日报正义网 “小k”按照一毛钱一条的价格给我“料子”,然后我..
ChatGPT成功背后的网络功臣,全栈智能网络技术揭秘
智东西作者 | ZeR0编辑 | 漠影智东西4月17日报道,随着大语言模型研究日..
TikTok正测试AI聊天机器人“Tako”,帮助用户发现更多有趣视频..
IT之家 5 月 25 日消息,据路透社报道,以色列人工智能公司 Watchful Tec..
OpenAI CEO:除ChatGPT之外,不会发布与开发者竞争的其它产品..
IT之家 6 月 6 日消息,人工智能巨头 OpenAI 的 CEO 萨姆・奥尔特曼(Sam..
ChatGPT热潮下的冷思考:人工智能将如何影响人类的未来?..
中国新闻网 | 作者 宋宇晟“在接下来的五年中,会思考的计算机程序将阅读..
法律科普:故意登录别人社交账号是侵犯隐私吗?
随着互联网的快速发展,社交媒体已经成为人们生活中不可缺少的一部分。过..
上海山丘联康健康管理有限公司创始人、董事长颜艳春:ChatGPT让人均GDP增加..
贵阳网·甲秀新闻讯 “ChatGPT会超越互联网,开启人类的智业文明时代”5..
聊天机器人ChatGPT为何“出圈”?我们让它写了篇文章
12月初,人工智能实验室OpenAI发布了一款名为ChatGPT的自然语言生成式模..
关于作者
兰花草(普通会员)
文章
429
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40334 企业收录2981 印章生成191054 电子证书817 电子名片51 自媒体24671

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索