关闭广告

超越纯视觉模型!不改VLM标准架构,实现像素级深度预测

新智元6935人阅读


新智元报道

编辑:LRST

【新智元导读】Meta开源DepthLM,首证视觉语言模型无需改架构即可媲美纯视觉模型的3D理解能力。通过视觉提示、稀疏标注等创新策略,DepthLM精准完成像素级深度估计等任务,解锁VLM多任务处理潜力,为自动驾驶、机器人等领域带来巨大前景。

在当前多模态AI发展浪潮中,视觉语言模型(Vision Language Models, VLMs)因其能通过「看图 + 文字交互」处理多样任务而备受关注。

然而,尽管在语义理解、视觉问答、图像指令等任务上表现优异,它们在从 2D 图像理解 3D 空间结构方面仍显薄弱。相比之下,纯视觉模型(pure vision models)在 绝对深度估计(metric depth estimation) 等三维理解任务上,凭借专门设计的网络结构与损失函数,早已达到了超越人类的精度。

这就带来了一个核心问题:「视觉语言模型是否有可能不更改其标准架

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

被问是否会刺杀伊朗新领袖 特朗普突然"共情"了

极目新闻 浏览 36429

CES变成中国科技秀:机器人跳舞、熊猫获奖、眼镜会说话

霞光社 浏览 5922

业绩失速,传音控股盯上非洲“电驴”

斑马消费 浏览 6026

斯塔默:允许美使用英方有关军事基地打击伊朗导弹设施

环球网资讯 浏览 45219

终于来了!山东签约新大外弥补内线隐患,但陈培东感冒将缺席一场

篮球资讯达人 浏览 5910

“霸凌”周迅的奚美娟,现在付出代价了?

除夕烟火灿烂 浏览 6288

Meta实验室革命性并行推理技术:让AI模型思考速度提升50%

科技行者 浏览 5915

《风林火山》亏了4.2亿,古天乐终于拿出这部藏了6年的动作大片

靠谱电影君 浏览 6706

鲁内跟腱断裂后,弗里茨等球员控诉ATP不顾球员死活!

网球之家 浏览 6912

曹操出行在杭州测试无人驾驶网约车!消息一出,有人追问:是不是意味着有机会打到?橙柿求证

都市快报橙柿互动 浏览 1492

12月22日发布 零跑D19内饰设计图曝光

网易汽车 浏览 6187

独居安全APP“死了么”登顶苹果应用付费榜,功能短板遭用户吐槽,已出现多款类似软件

扬子晚报 浏览 5908

女人不管多大年纪,夏天都要准备一条白色阔腿裤,百搭又清爽

静儿时尚达人 浏览 3024

热力公司入户测温佩戴的记录仪上印着警徽 住户报警

大风新闻 浏览 35360

俄称已控制红军城和沃尔昌斯克

国际在线 浏览 6416

79岁一代文艺女神走了:终生未婚,一辈子穿西装

世界音乐公号 浏览 6780

上新|| 穿了4年一直被要链接,这条神裤终于出了更好穿的版本

黎贝卡的异想世界 浏览 3123

新款狮铂拓界暂定明年3月份上市!若12万能火吗?

汽车网评 浏览 6327

赛季末巴黎频造新大师,这次小黑能一黑到底吗?

网球之家 浏览 6676

莱巴透露战斯瓦泰克的两大关键,丝袜称气温还这么高会手足无措

网球之家 浏览 5819

主打新潮科技 smart精灵#6内饰官图发布

车质网 浏览 4417
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1