> 自媒体 > (AI)人工智能 > ChatGPT 们难以复制的原因,除了耗显卡,还有水电费太贵?
ChatGPT 们难以复制的原因,除了耗显卡,还有水电费太贵?
来源:爱范儿
2023-05-01 12:23:45
473
管理

不过,如此简单的形式,却成为了当下网络上和现实里最火热的话题,果然「好看的皮囊千篇一律,有趣的灵魂万里挑一」。

只是存在于一个个 web 网页,一条条简单的问答中,往往会让我们忽略不少问题。

八张 A100 组成的 DGX A100 服务器大概售价 19.9 万美元,最高功率为 6.5kW。

按照一万张来算的话,光在硬件上微软就要花去 2.5 亿美元,运行一个月就要用掉 585 万度电,电费就要得交

而按照国家统计局公开的数据,我国居民月度用电量大约是 69.3 度。ChatGPT 运行一月,大概与我们 8 万人用电相当。

结合 AIGC 需要庞大算力的计算中心,卡罗拉多大学与德克萨斯大学的研究人员就在论文里预估了在训练过程中所消耗的清水。

以 GPT-3 为例,训练过程中所需的清洁淡水相当于填满核反应堆冷却塔所需的水量。果然 AI 最终还是要跟核电挂上钩。

如果再具体点,则大约消耗了 70 万升,并且他们还算出,一个用户与 ChatGPT 进行 25~50 个问题的对话,大概就相当于请 ChatGPT 喝了 500ml 水。

▲ Google 的数据计算中心 图片来自:Google

在美国本土,Google 拥有 14 个数据中心,为其搜索和现在的 LaMDA 和 Bard 提供算力。且在训练 LaMDA 语言模型的过程要比 GPT-3 还耗能费水。

原来,AI 不止费显卡,住恒温的大 house,胃口还出奇的好,大口吃电,大口喝水。

无处不在的 AI 鸿沟

在 AIGC 行业里,一个简单的,能准确响应的对话框,背后不止是展示技术实力,也展示了雄厚的金钱实力。

Sasha Luccioni 博士就表示,大型复杂的语言模型,世界上只有少数的公司和组织才有资源训练它们。

▲ Sam Altman(左)和微软 CEO Satya Nadella(右)图片来自:Wired

还是以 GPT-3 为例,训练 1800 亿参数,成本大约是 460 万美元,还不包括后续的运行和迭代维护等等。

这些有形和运行过程中带来的无形成本,很多公司很难承受。

由此,在 AIGC 浪潮里,无形之中有了那么一个 AI 鸿沟,大概也分成了两类公司。

而关于碳排放等一系列参考数据,也多是从 2019 年的 Bert 训练模型中预测而得。

除了资金、GPU、数据中心、网络带宽等等硬实力,Google、微软也把大语言模型的训练算法、过程、时间、参数等等都列成了最高机密。

我们想使用和了解它,只能通过提供的 API ,或者直接询问 ChatGPT 或者 Bard 本身。

无形之中,这也成为了一个「AI 鸿沟」。

AIGC 发展的如此迅速,并且能力也在无限扩大,许多国家地区和组织都在考虑如何给 AIGC 设立一些规范,免得它(产生自我意识,开始觉醒……)恣意妄为。

但就如同相关的研究人员一般,目前 AIGC(如 GPT-4)几乎没有公开的信息,更像是一个黑盒。

诚然对于大公司而言,AIGC 可能就是下一个新时代的开端,塑造科技壁垒,无可厚非。

但对于资源的消耗,无论是对于立法机构,还是对于大众,都该保持一些透明度,

这也是 AI 在提供便利的同时,为何研究人员不断挖掘和道明相应的代价。

发展 AI,其实也是人类的一次登月

对于 AI 耗电、排碳,以及最新的费水等研究,并非是在谴责、或者说反对发展 AIGC 用资源去换取技术的改进。

这些数据,其实是提供了 AIGC 行业的另外一个角度,在一条条符合人味儿回答的背后,到底我们或者说大型科技公司为此付出了什么。

也并非是要呼吁 Google、微软立刻做碳中和,并为耗费的水资源、电能和间接的一些环境问题买单,让它们变成 Google Green 或者是绿软。

AIGC 的爆发,并不是一簇而就,也不是简单开窍式的技术爆发,它背后涵盖了相当多的产业链,更像「水到渠成」。

大公司云计算中心算力的增强,以及 GPU 对复杂算法的高效计算,以及大语言模型参数的复杂化,再加上 AIGC 企业本身一直在不计成本的投入。

▲ 大型数据计算中心只是 AIGC 行业的一环

而在 GPT-3 出现之前,AI 们的能力还显得比较稚嫩,大众也没意识到 AI 可能会改变世界。

但随着 GPT-4、Midjourey V5 等等涌现,AIGC 也终于成为了硅谷宠儿。

此时此刻,OpenAI、微软、Google 等大企业对资源的消耗,对大算力的使用也有了一个初步的成果。

▲ 《为了全人类》剧照

同样地,当下的 AIGC 节点,有些类似于阿姆斯特朗刚踏上月球的那一刻。

登月动用了当时相当的资金财力资源,但月球上并没有所谓的水和可利用资源(暂时)。

但并不能否认登月没有意义,就如同现在花去大量的资源、财力喂给 AI,发展 AIGC。

只是,AIGC 能发展到如何,谁也说不准,它可能像是《终结者》里的天网,也可能是《星战》里的 CP30,有着无限可能。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
怎么聊天让人感觉很轻松?
以下是一些技巧,可以让人感觉轻松:1. 关注他们感兴趣的话题。问他们是..
ChatGPT国产化大战打响
中国小康网 独家专稿文|《小康》·中国小康网 孙媛媛移动互联网时代里,..
ChatGPT掀起科技股狂潮!深度、广度将大超预期(附产业链名单)..
最近一两周,A股市场的所有热度几乎都被人工智能以及其他科技股完全占据..
免费稳定,支持中文的Claude,是ChatGPT的顶尖竞争者,保姆级教程..
终于它来了,一款无需艰难注册账户,不需要麻烦操作、而且支持中文的聊天..
消息称苹果工程师在开发类ChatGPT人工智能,有望用于Siri..
IT之家 3 月 15 日消息,据《纽约时报》报道,苹果公司正在测试生成式人..
ChatGPT永久封号潮来袭!(这次包含很多Plus)
最近这几天,ChatGPT又双叒开始了一波妖魔化封号了。还是那个熟悉的操作..
GPT-3杀入漫威宇宙!二次元小伙用它生成蜘蛛侠续集
既然GPT-3能循理路精炼总结语料文本,写诗可以、写rap歌词可以,那么照猫..
微软推出必应聊天v96,减少“一本正经胡说八道”
IT之家 2 月 28 日消息,今天微软的广告和网络服务主管米哈伊尔-帕拉金在..
消息称华为版ChatGPT将于7月初发布,定名“盘古Chat” ;苹果或在 WWDC23 ..
编辑&整理|Steven Lee排版|Dylan动点科技着重关注可持续发展、生命科学..
关于作者
舞月(普通会员)
文章
528
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40350 企业收录2981 印章生成210575 电子证书903 电子名片56 自媒体30867

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索