> 自媒体 > (AI)人工智能 > ChatGPT的智能是人的心镜吗?
ChatGPT的智能是人的心镜吗?
来源:钛媒体APP
2023-04-06 13:35:33
285
管理

▷图片来源:Midjourney bot

对AI进行图灵测试,可以了解它们能否如人类一样做出反应。在模仿使用者的过程中,LLM可能也在进行一种更为复杂的逆向图灵测试,即通过将人们的指令和对话所表现出的智力水平映射回使用者,来测试其智力水平。你越聪明,你的指令越聪明,LLM就显得越聪明。如果你怀有某种强烈的观点,LLM也将加深这种观点。这是启动对话所带来的效果,使用者的语言能力也不必然使LLM具有像人类一样的心智或情感。但我们仍然可以得出,LLM具有模仿许多人类个性的非凡能力,尤其是在经过微调之后(Karra等,2022)。对镜像假设和逆向图灵测试的形式化测试可以通过让人类评估者评估人类用户的智力与LLM的智力来完成。根据镜像假设,两者的智力应该是高度相关的。

人工智能将通用智能作为圣杯,这似乎已经在LLM中出现,但并非以其倡导者们所设想的方式。LLM在形形色色的语言任务中用途广泛,甚至已经可以编写计算机程序。值得注意的是,模型似乎具有高度发达的社会意识。镜像假设为我们指明了一个新的思考方向:通用智能是否起源于人类社交互动的模式?而语言是否是演化过程中为增强社交属性而出现的产物?

道法自然

哺乳动物的感知运动系统演化了2亿多年,脊椎动物的大脑更是有5亿多年的历史。语言则是在最近几十万年内演化出现的。这段时间不足以演化出全新的大脑结构,但灵长类动物大脑皮层的现有区域本就可以扩展并重新用于语音产生和语音识别,无需进行实质性的结构改变。此外,由于社会互动的复杂性,增强的记忆能力和更快的学习速度进一步推动了语言的诞生。随着灵长类动物演化过程中大脑皮层的扩展,更多大脑皮层区域形成,层次结构加深(Allman,1999)。在大脑发育过程中,多一次有丝分裂,皮层神经元的数量就会增加一倍,从而达到新能力的阈值并增强认知功能。

演化造成了归纳偏差——预学习的架构和学习算法。然而,演化所采用的路径并不遵循人类设计的逻辑(Brenner,1996)。在生命的最初几年,婴儿的大脑在语言功能出现的同时,会形成大量的突触(Lister等,2013)。婴儿通过多种感官与世界互动并了解它,世界也用感知运动的经验、因果关系,以及语言表达塑造了婴儿的大脑(Gopnik等,1999)。然而,仅仅是基于抽象概念的传统人工智能缺乏这种基础。LLM表明,可以从原始文本中发现的各种不完美线索(包括句法标记、词序和语义),来学习语法语言是如何生成的。

在感知运动基础充分建立的同时,大脑也在快速发育。这可以解释为什么婴儿可以从日常语言表达中提取句法。语言学家得出结论,这种“缺乏刺激”证明句法是天生的(Chomsky,1971),但这忽略了大脑在发育过程中的构建方式(Quartz和Sejnowski,1995)。大脑结构和学习算法的演化是天生的,它们提取和概括世界的物理结构与社会结构。大自然将归纳偏差降至分子水平以最大限度地提高能量利用的效率。如果想减少LLM快速增长的能源预算,我们也必须走上这条道路(Sejnowski和Delbruck,2012)。

从大脑机制来看,语言和思维的演化是趋于同步的。皮层-基底核之间用于生成动作序列的循环被重新用于生成单词序列(见下图)。人类前额叶皮层的大幅扩张,使得思维序列可以通过基底核的类似回路产生(Graybiel,1997)。同样重要的是,对声道的调整允许声音在宽频谱上进行快速调制(Nishimura等,2022)。口腔和喉部快速发音是大脑能够产生的最快的运动程序(Simonyan和Horwitz,2011)。这些结构是脊椎动物的古老部分,它们在演化中变得完善和精致,这也使语言成为可能。人们用“语言器官”这一比喻意义上的术语,来解释语言的奥秘(Anderson & Lightfoot,2002),它通过改变原有的执行器和神经系统演化而来。

LLM也被训练来预测句子中缺失的单词(编者注:类似于英语考试中的完形填空)。为什么这是一个行之有效的策略?在强化学习模型中,时间差异学习是基于预测,来预测未来的奖励。同样地,大脑中的感知运动系统也会做出预测。小脑是与大脑皮层相互作用的重要脑结构,可预测运动指令的预期感知和认知结果(Sokolov等,2017)。如此说来,使用自我监督学习、通过不断做出许多小预测来引导越来越复杂的内部模型,其最终的结果就是形成所谓的“智能”吗?这可能就是婴儿的大脑如何在积极与世界互动的同时,通过做出预测和观察结果来快速了解世界因果结构的方法(Ullman等,2017)。已经有学者就此开展研究,并在使用深度学习从视频中学习直观物理方面取得了进展(Piloto等,2022)。

上世纪对大脑的研究启发了新的机器学习算法:视觉皮层区域的层次结构启发了卷积神经网络的诞生(LeCun等,1998,2015),操作性条件反射启发了用于强化学习的时间差分学习算法(Sutton,1988)。在人工神经网络进步的同时,美国“脑科学计划”(The Brain Research through Advancing Innovative Neurotechnologies,BRAIN Initiative)通过创新的神经技术加速了本世纪神经科学的发现(Ngai,2022)。由这些发现所产生的大脑功能的新概念框架将启发更先进的神经网络模型。机器学习正被用于分析来自数十个大脑区域的数十万个神经元的同时记录,并通过串行电子显微镜自动重建神经回路。这些进步改变了我们对跨皮层分布式处理的理解。

人工智能和神经科学之间的融合正在加速。人工智能和神经科学之间的对话是一个良性循环,同时丰富了这两个领域(Hassabis等,2017;Sejnowski,2020;Richards等,2022)。仿照研究大脑活动的方式,通过分析超高维空间中隐藏单元的活动模式,将会得出更好的人工智能理论;分析LLM中潜在状态的几何动力学、揭示其潜在的数学结构,可能会使我们更好地理解智能。由此,人工智能和神经科学正通过开发新的概念框架更广泛地彼此影响。

既然我们能够盘问整个大脑的神经元,我们或许能够解决其最大的谜团之一:分布在大脑如此多神经元上的信息是如何被整合到统一的感知之中,并汇集在一起做出决定的(Dehaene和Naccache,2001)?大脑的结构是分层的,每一层负责在感知和运动系统的不同时间尺度上做出决策(Wang,2022;Nakahira等,2021;Li,2022b)。当我们构建超大规模网络(very large-scale network,VLSN)架构时,许多元网络也需要集成到一个统一的系统中。这可能会揭示人类负责潜意识决策和意识控制的机制。

系统神经科学通常是在离散任务中对神经元进行研究,例如对视觉刺激的选择反应,其中强制选择和刺激的数量有限。对刺激和反应的严格控制确保了研究者可以对研究结果进行解释。但神经元可以以多种不同方式参与多项任务,因此从单一任务得出的解释可能会对研究者们产生误导。我们现在有能力记录全脑数十万个神经元,并且可以通过机器学习解码其行为,但神经科学家仍在使用旧的基于单一任务的范式。一个解决思路是针对许多不同的任务进行训练,但训练一只猴子完成每项任务需要数周到数月的时间;另一个解决思路则是在更长的时间间隔内扩展任务的复杂性(Gao等,2017)。

通过离散任务来研究行为还存在一个更基本的问题。现实世界中动物的自然行为大多是自发产生且有互动的,社交行为尤其如此。研究这种自发产生的连续行为比研究严格约束的反射行为要困难得多。如果LLM接受了自然行为期间大量大脑记录的训练,以及伴随的眼动追踪、视频、声音和其他模式,会产生怎样的效果?LLM是自监督的,可以通过预测跨数据流的缺失数据段来进行训练。从传统的实验角度来看,这在科学上并无用处,但从LLM提供新的计算角度来考察,它确实是有意义的。通过将在自然条件下工作的大脑下载到LLM中,大型神经基础模型(large neurofoundation model,LNM)可以针对任务进行快速微调,并作为大脑的代理接受询问,就像预训练的LLM可以针对许多任务进行微调一样。这将彻底改变大脑的研究方式并增进我们的理解,同时减少研究所需的动物的数量。人脑活动也可以类似地下载到先进的LNM中。

在不久的将来,我们可以对人工智能的发展有什么期待呢?一方面,调试预训练的LLM需要人类和LLM之间的合作。微调LLM的工作周期比开发某个单一应用的机器学习模型要快得多,后者需要自定义数据库和超参数搜索。基于LLM的产品将如雨后春笋般出现。LLM可以成为终极的信息工具。关键词搜索将被可以直接给出问题答案的LLM所取代。也许不出十年,LLM个人助理将如现在的Siri那样普及,帮助我们更好地安排生活。LLM助教可以在课堂上协助教学,LLM法律助手能够整合所有曾经在法庭上裁决过的案件,这对法律行业来说也是一个福音。但就创新对于人类的影响而言,人们的展望总是偏保守的。

许多年以后,面对无处不在的通用人工智能,我们将会想起今天这个历史性的转折点。如果一定要做一个比喻,或许科幻电影《她》中的私人助理可以让我们瞥见那个人工智能无处不在的未来。

原文链接:

https://direct.mit.edu/neco/article/35/3/309/114731/Large-Language-Models-and-the-Reverse-Turing-Test

1
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
关于作者
大男孩(普通会员)
文章
379
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40329 企业收录2981 印章生成186784 电子证书796 电子名片49 自媒体20815

@2022 All Rights Reserved 浙ICP备19035174号-7
1
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索