> 自媒体 > (AI)人工智能 > 华人团队迷你GPT4抢跑看图聊天:OpenAI有的它都有,服务器被挤爆
华人团队迷你GPT4抢跑看图聊天:OpenAI有的它都有,服务器被挤爆
来源:量子位
2023-04-21 12:34:55
741
管理

梦晨 发自 凹非寺量子位 | 公众号 QbitAI

GPT-4识图功能迟迟不开放,终于有人忍不住自己动手做了一个。

MiniGPT-4来了,Demo开放在线可玩。

传一张海鲜大餐照片上去,就能直接获得菜谱。

除了生产力拉满,也支持根据常识推理图上内容是否合理、解释表情包为什么好笑,以及看截图找电影等娱乐玩法。

可以说,GPT-4发布时展示过的功能,MiniGPT-4基本也都有了。

这下网友直接把Demo服务器挤爆,开发团队连开4台备用服务器,都有几十人在排队。

有人上传一张从车道拍摄的飞机坠毁瞬间,让MiniGPT-4尽可能详细地描述,并思考自动驾驶AI能不能理解这个场面。

做到这么好的效果,MiniGPT-4实现起来却并不复杂。

把图像编码器与开源语言模型Vicuna(小羊驼)整合起来,并且冻结了两者的大部分参数,只需要训练很少一部分。

传统预训练阶段,使用4张A100在10个小时内就可完成,此时训练出来的Vicuna已能够理解图像,但生成能力受到很大影响。

为解决这个问题,团队让MiniGPT-4与ChatGPT合作创建了3500个图像文本的高质量数据集,也一并开源。

用新的数据集微调可以显著提高模型的生成可靠性和整体可用性,而且计算效率很高,使用单个A100只需要7分钟。

并且团队正在准备一个更轻量级的版本,部署起来只需要23GB显存。

也就是消费级显卡中拥有24GB显存的3090或4090就可以本地运行了。

MiniGPT-4开发团队来自KAUST(沙特阿卜杜拉国王科技大学),包括4位华人成员和他们的导师 Mohamed Elhoseiny。

两位正在读博的共同一作还在GitHub页面上特别标注正在找工作。

有意向的公司要抓紧抢人了~

在线Demo:https://minigpt-4.github.io

开源代码:https://github.com/Vision-CAIR/MiniGPT-4

论文:https://github.com/Vision-CAIR/MiniGPT-4/blob/main/MiniGPT_4.pdf

— 完 —

量子位 QbitAI · 头条号签约

关注我们,第一时间获知前沿科技动态

1
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
主打年轻和性价比 东风风行中大纯电轿车星海S7上市11.98万起..
9月26日,东风风行旗下中大型轿车星海S7上市,新车共推3个不同配置版本,..
君威2024款:174马力+9AT,7.1秒破百,运动轿车还是家用买菜车?..
选车就像找对象,总想找到各方面都匹配的那一位。10万左右的预算,想买一..
哪款“7”字辈SUV更值得期待?智界R7/阿维塔07/极氪7X三车对比..
内饰采用环抱式座舱布局,配备悬浮式中控屏和35.4英寸4K远端屏,两侧还可..
新车 | 或途胜L平台打造/三排布局/混动系统,现代全新SUV消息曝光..
文:懂车帝原创 史景旭[懂车帝原创 产品] 日前,我们从海外媒体获悉,现..
10.99万能买中型SUV,12.99万就有插混版,全新瑞虎8PLUS上市..
今年1-8月份,奇瑞汽车交出了1508259辆,同比增长41.9%的成绩,能够在今..
新车 | 5座电动SUV/约人民币8.5万元起售,名爵WINDSOR EV正式发布..
文:懂车帝原创 高帅鹏[懂车帝原创 产品] 近日,名爵WINDSOR EV实车在海..
大众用心打造的一款SUV,ID.与众深度体验
ID.与众,这是大众在中国市场超用心,2年磨一剑打造的首款紧凑型SUV。2、..
等等这7款重磅新车吧!比亚迪发力高端车,奇瑞布局增程6座SUV..
市场上越来越多新车试图挑战热销榜车型的地位,咱们来看看,今年剩下的几..
智驾标杆SUV,极越01对比智界R7,哪款更具性价比?
提起高阶智驾,我想国内有两家企业很具代表性,其一是华为ADS高阶智能驾..
关于作者
你不懂的歌..(普通会员)
文章
967
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40400 企业收录2981 印章生成237624 电子证书1052 电子名片60 自媒体52521

@2022 All Rights Reserved 浙ICP备19035174号-7
1
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索