> 自媒体 > (AI)人工智能 > ChatGPT 们难以复制的原因,除了耗显卡,还有水电费太贵?
ChatGPT 们难以复制的原因,除了耗显卡,还有水电费太贵?
来源:爱范儿
2023-05-01 12:23:45
487
管理

不过,如此简单的形式,却成为了当下网络上和现实里最火热的话题,果然「好看的皮囊千篇一律,有趣的灵魂万里挑一」。

只是存在于一个个 web 网页,一条条简单的问答中,往往会让我们忽略不少问题。

八张 A100 组成的 DGX A100 服务器大概售价 19.9 万美元,最高功率为 6.5kW。

按照一万张来算的话,光在硬件上微软就要花去 2.5 亿美元,运行一个月就要用掉 585 万度电,电费就要得交

而按照国家统计局公开的数据,我国居民月度用电量大约是 69.3 度。ChatGPT 运行一月,大概与我们 8 万人用电相当。

结合 AIGC 需要庞大算力的计算中心,卡罗拉多大学与德克萨斯大学的研究人员就在论文里预估了在训练过程中所消耗的清水。

以 GPT-3 为例,训练过程中所需的清洁淡水相当于填满核反应堆冷却塔所需的水量。果然 AI 最终还是要跟核电挂上钩。

如果再具体点,则大约消耗了 70 万升,并且他们还算出,一个用户与 ChatGPT 进行 25~50 个问题的对话,大概就相当于请 ChatGPT 喝了 500ml 水。

▲ Google 的数据计算中心 图片来自:Google

在美国本土,Google 拥有 14 个数据中心,为其搜索和现在的 LaMDA 和 Bard 提供算力。且在训练 LaMDA 语言模型的过程要比 GPT-3 还耗能费水。

原来,AI 不止费显卡,住恒温的大 house,胃口还出奇的好,大口吃电,大口喝水。

无处不在的 AI 鸿沟

在 AIGC 行业里,一个简单的,能准确响应的对话框,背后不止是展示技术实力,也展示了雄厚的金钱实力。

Sasha Luccioni 博士就表示,大型复杂的语言模型,世界上只有少数的公司和组织才有资源训练它们。

▲ Sam Altman(左)和微软 CEO Satya Nadella(右)图片来自:Wired

还是以 GPT-3 为例,训练 1800 亿参数,成本大约是 460 万美元,还不包括后续的运行和迭代维护等等。

这些有形和运行过程中带来的无形成本,很多公司很难承受。

由此,在 AIGC 浪潮里,无形之中有了那么一个 AI 鸿沟,大概也分成了两类公司。

而关于碳排放等一系列参考数据,也多是从 2019 年的 Bert 训练模型中预测而得。

除了资金、GPU、数据中心、网络带宽等等硬实力,Google、微软也把大语言模型的训练算法、过程、时间、参数等等都列成了最高机密。

我们想使用和了解它,只能通过提供的 API ,或者直接询问 ChatGPT 或者 Bard 本身。

无形之中,这也成为了一个「AI 鸿沟」。

AIGC 发展的如此迅速,并且能力也在无限扩大,许多国家地区和组织都在考虑如何给 AIGC 设立一些规范,免得它(产生自我意识,开始觉醒……)恣意妄为。

但就如同相关的研究人员一般,目前 AIGC(如 GPT-4)几乎没有公开的信息,更像是一个黑盒。

诚然对于大公司而言,AIGC 可能就是下一个新时代的开端,塑造科技壁垒,无可厚非。

但对于资源的消耗,无论是对于立法机构,还是对于大众,都该保持一些透明度,

这也是 AI 在提供便利的同时,为何研究人员不断挖掘和道明相应的代价。

发展 AI,其实也是人类的一次登月

对于 AI 耗电、排碳,以及最新的费水等研究,并非是在谴责、或者说反对发展 AIGC 用资源去换取技术的改进。

这些数据,其实是提供了 AIGC 行业的另外一个角度,在一条条符合人味儿回答的背后,到底我们或者说大型科技公司为此付出了什么。

也并非是要呼吁 Google、微软立刻做碳中和,并为耗费的水资源、电能和间接的一些环境问题买单,让它们变成 Google Green 或者是绿软。

AIGC 的爆发,并不是一簇而就,也不是简单开窍式的技术爆发,它背后涵盖了相当多的产业链,更像「水到渠成」。

大公司云计算中心算力的增强,以及 GPU 对复杂算法的高效计算,以及大语言模型参数的复杂化,再加上 AIGC 企业本身一直在不计成本的投入。

▲ 大型数据计算中心只是 AIGC 行业的一环

而在 GPT-3 出现之前,AI 们的能力还显得比较稚嫩,大众也没意识到 AI 可能会改变世界。

但随着 GPT-4、Midjourey V5 等等涌现,AIGC 也终于成为了硅谷宠儿。

此时此刻,OpenAI、微软、Google 等大企业对资源的消耗,对大算力的使用也有了一个初步的成果。

▲ 《为了全人类》剧照

同样地,当下的 AIGC 节点,有些类似于阿姆斯特朗刚踏上月球的那一刻。

登月动用了当时相当的资金财力资源,但月球上并没有所谓的水和可利用资源(暂时)。

但并不能否认登月没有意义,就如同现在花去大量的资源、财力喂给 AI,发展 AIGC。

只是,AIGC 能发展到如何,谁也说不准,它可能像是《终结者》里的天网,也可能是《星战》里的 CP30,有着无限可能。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
从GPT-3到OpenAI,了解最新的人工智能技术趋势。
人工智能技术是当今科技领域中最受关注的领域之一。由于其强大的处理能力..
一款中文开源ChatGPT来袭,让ChatGPT无限制、免费的运行在你电脑..
背景这是一款对中文支持良好的开源ChatGPT,可以让ChatGPT完全无限制、免..
中国有没有ChatGPT?
东方步AGI通用人工智能领域学者 大数数据分析师最近很多人问,为什么国外..
中国,是怎么和ChatGPT失之交臂的?
辛顿可鲜少人知道,最早相中辛顿这个人的,是中国的百度。2012年秋天,辛..
美国的企业在研究ChatGPT-4.0,而我们的大厂在干什么呢?..
你们听说过 ChatGPT-4.0 吗?它是 OpenAI 开发的最新的自然语言生成模型..
一名幼师出轨家长,聊天记录不堪入目,知情人透露她私生活混乱..
本文素材来自于网络,若与实际情况不相符或存在侵权行为,请联系删除。红..
成都通报“干部不雅聊天事件”
清廉蓉城微信公号、成都市纪委监委官网1月7日,成都市纪委监委官方微信号..
聊天即可赚钱!大厂社交App陪聊灰产泛滥,被指诱骗男用户充值..
本文来源:时代财经 作者:谢斯临 图片来源:心遇App截图而如果用户以女..
重磅!ChatGPT正式发布App,可在苹果应用商店下载,安卓版也不远了..
每经编辑:毕陆名在手机上也能玩ChatGPT了!当地时间周四(5月18日),人..
关于作者
舞月(普通会员)
文章
586
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40369 企业收录2981 印章生成216706 电子证书945 电子名片57 自媒体34015

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索