> 自媒体 > (AI)人工智能 > 史上首个图像分割AI 模型,CV迎来GPT-3时刻,让元宇宙起死回生?
史上首个图像分割AI 模型,CV迎来GPT-3时刻,让元宇宙起死回生?
来源:头部科技
2023-05-04 22:08:33
626
管理

如今,CV(计算机视觉)迎来了它的GPT时刻!(也可以称之为iPhone时刻)

Facebook母公司Meta最新发布了一篇图像分割论文 Segment Anything,顺便发布全球首个图像分割AI大模型SAM,可快速分离图像中物体。

Meta在官网中提供了SAM的免费演示,并为用户提供了三种分割图像部分的方法。

一是“悬停和点击(Hover&Click)”,当用户把鼠标放在想要分割出的部分上并点击时,SAM会自动提取出该部分。

另外,SAM的可提示设计使其能够与其他系统灵活整合。

SAM可以接受来自其他系统的输入提示,例如在AR/VR头盔中可以根据用户的目光来选择一个物体。

Meta之所以这样做,是因为他们从自然语言处理领域汲取了灵感。

在自然语言处理和计算机视觉领域,基础模型是其发展的重要基础,基础模型可以使用prompting技术对新数据集和任务执行零样本和少样本学习。

具体到SAM中,研究人员训练的SAM可以针对任何提示返回有效的分割掩码。提示可以是前景、背景点、粗框或掩码、自由格式文本,或者说能指示图像中要分割内容的任何信息。

有效掩码的要求仅仅意味着即使在提示模糊且可能指代多个对象的情况下(例如,衬衫上的一个点可能表示衬衫或者穿衬衫的人) ,输出应该是其中一个对象的合理掩码。(SAM 还能为为不明确的提示生成多个有效掩码)

在 Web 浏览器中,SAM 有效地映射图像特征和一组提示嵌入以生成分割掩码

在引擎盖下,一个图像编码器为图像产生一个一次性的嵌入,而一个轻量级编码器将任何提示实时转换为嵌入矢量。这两个信息源然后在一个预测分割掩码的轻量级解码器中结合起来。

在计算出图像嵌入后,SAM可以在短短50毫秒内产生一个分段,并在网络浏览器中给出任何提示。

除了发布的新模型,Meta还发布了迄今为止最大的分割数据集SA-1B。

这些数据是用SAM收集的,而且注释者使用SAM对图像进行交互式注释,然后新注释的数据被用来反过来更新SAM。通过不断重复,以迭代改进模型和数据集。

点这里关注我,记得标星哦~

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
4S店关了,消费者权益不能随意“关”|荔枝时评
文/熊志(作者熊志,荔枝新闻特约评论员,资深评论人;本文系荔枝新闻客..
4S店现关停潮,消费者权益谁来保障?
“品牌授权已取消”“公司当前暂停营业”“已提出退网申请”……近期,部..
多地4s店迎来倒闭潮,他们可以一跑了之但消费者怎么办呢?..
最近,多地4S店倒闭潮的消息如惊雷般炸响,让汽车行业的从业者和广大消费..
二手车|别克GL8:空间超大还保值!奶爸首选
随着二胎、三胎政策的放开,再加上生活水平的提升,越来越多的消费者在购..
二手车|天籁:十一、二万,日系+中型+大沙发都有?..
十一、二万,你是选择一台紧凑型还是一台二手日系中型轿车?入门级车型更..
买新车贬值快\u0026#34;不划算\u0026#34;?这几款二手车开上几年不会亏,还..
既然买新车"吃亏",那么二手车怎样呢?今天漫哥就跟大家推荐几款在一直保..
不敢买二手车?看完这些买前功课放心去买吧
[爱卡汽车 淘二手车原创]随着近几年国内二手车行业的发展,相信大家也感..
选购二手车,先看这几点,新手避坑指南
哈喽,兄弟们!熟悉南哥的都知道,南哥自己买的车大多是都二手,比如天籁..
新能源二手车能不能买?三吱跑了1300公里告诉你答案
不知道大家有没有看过电影《飞驰人生》,自从看了这个电影,我一直想体验..
关于作者
雪霁(普通会员)
文章
768
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40373 企业收录2981 印章生成220223 电子证书958 电子名片58 自媒体39805

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索