李飞飞团队前瞻性研究展现多模态人工智能模型的空间智能初步成果

有“AI教母”之称的斯坦福大学教授李飞飞及其团队近日发布了一项关于多模态大模型“空间智能”的研究,揭示这些模型在记忆和回忆空间方面已经具备初步能力,并展现出形成局部世界模型的潜力。

研究团队开发了用于评估视觉空间智能能力的工具——VSI-Bench,其中包含超过5000个基于288个真实视频的高质量问答对。测试视频涵盖居住空间、专业场所及工业场景,涉及多个地理区域。

QQ20241223-144615.png

研究结果显示,尽管多模态模型的总体表现尚低于人类,但在某些任务上已达到或接近人类水平。例如,Gemini-1.5Pro在绝对距离和房间大小估计等任务中表现突出,部分开源模型如LLaVA系列亦取得了竞争性结果。

研究还指出,使用认知地图辅助空间推理可显著提升模型在空间任务上的表现,其准确率提升达10个百分点。这表明明确生成认知地图有助于突破模型在空间理解上的瓶颈。

李飞飞表示,空间智能是AI理解物理世界的关键能力,对实现通用人工智能(AGI)至关重要。她认为,空间智能将成为AI领域的下一个前沿技术方向,甚至有望在2025年取得重要突破。

今年9月,李飞飞创办的公司World Labs宣布正式启动,专注于开发具备空间智能的AI模型。这家公司已获得包括英伟达、a16z、Adobe等知名机构的投资,目前估值超过10亿美元。

这一研究及其应用,标志着AI技术从二维信息处理向三维空间感知的关键进步,未来有望广泛应用于导航、机器人交互、增强现实等领域,为人工智能的进一步发展开辟全新道路。

猜你喜欢

西安碑林区新春佳节活动丰富多样,传承传统文化魅力,邻里齐心共创和谐年味景象
西安碑林区新春佳节活动丰富多样,传承传统文化魅力,邻里齐心共创和谐年味景象

随着新春佳节的脚步日益临近,西安市碑林区各社区纷纷行动起来,通过一系列丰富多彩的活动,为居民们提前营造起浓厚的节日氛围,

重回未来1999笃笃骨技能详细解析-笃笃骨技能机制全面介绍与应用
重回未来1999笃笃骨技能详细解析-笃笃骨技能机制全面介绍与应用

重返未来1999笃笃骨技能是什么?笃笃骨是这款游戏最新推出的一个角色,很多玩家都还不是很了解这个角色的技能。今天就给大家

原神饱饮之丘的解谜步骤与技巧详解,如何找到隐藏的秘密和完成挑战
原神饱饮之丘的解谜步骤与技巧详解,如何找到隐藏的秘密和完成挑战

原神饱饮之丘是游戏中新出的一个任务,这个任务是需要玩家在草国完成的,这个任务里面有一个解谜玩法,下面91小编带来原神饱饮

如何通过使用日韩风格的大片PPT免费模板来提升你的演示效果与魅力
如何通过使用日韩风格的大片PPT免费模板来提升你的演示效果与魅力

在如今的数字化时代,日韩大片ppt免费ppt已经成为了很多人提高演示效果的秘密武器。无论是职场报告、商业展示,还是学校课

龙冈镇少年儿童书法和古筝齐聚一堂,共同庆祝新春佳节,书香与琴音交融贺岁盛典
龙冈镇少年儿童书法和古筝齐聚一堂,共同庆祝新春佳节,书香与琴音交融贺岁盛典

在盐城市盐都区龙冈镇新时代文明实践所内,一场别开生面的文化庆典在新春前夕精彩上演,将书法艺术与古筝演奏巧妙融合,为孩子们

原神流放者花期任务的详细攻略及注意事项分享,助你轻松完成3.1版本任务
原神流放者花期任务的详细攻略及注意事项分享,助你轻松完成3.1版本任务

原神3 1流放者花期任务是游戏中一个比较简单的任务,玩家完成这个任务可以获得原石和紫色经验书,不过想要做这个任务还是需要

探索北京隐秘的连环画宝库:荣唐博物馆,连环画爱好者不容错过的理想圣地
探索北京隐秘的连环画宝库:荣唐博物馆,连环画爱好者不容错过的理想圣地

连环画,这一曾在上世纪50至80年代风靡一时的文化形式,如今虽已淡出大众视野,但在小众收藏圈内依然保持着旺盛的生命力。一

暗交小拗女的意外变革引发热议!网友惊呼:这才是让人心动的秘密武器!
暗交小拗女的意外变革引发热议!网友惊呼:这才是让人心动的秘密武器!

暗交小拗女一区二区三区的出现,真是让不少网友眼前一亮。这种独特的影视类型不仅挑战了传统的叙事方式,还让很多人开始重新审视

如何高效完成原神中的沙上花任务详细攻略与技巧分享
如何高效完成原神中的沙上花任务详细攻略与技巧分享

原神沙上花任务是一个比较繁琐的任务,玩家需要完成全部的魔神任务之后才能接取,而且还需要在白天才能接到这个任务,下面91小

龙梅笔下的军营村:群山环抱,茶香四溢,艺术与自然的和谐共融,展现无限魅力!
龙梅笔下的军营村:群山环抱,茶香四溢,艺术与自然的和谐共融,展现无限魅力!

在福建厦门同安区的军营村,一场别开生面的艺术盛宴悄然绽放。这里,远离尘嚣,高山之巅,艺术家龙梅以画笔为媒介,将这片秘境之