分享好友 资讯首页 频道列表

普林斯顿AI Lab推出SSoN基准,人类准确率83.3%而大模型最高仅39.7%

1970-01-01 08:339640

近日,普林斯顿大学 AI Lab 团队正式推出了一项全新的空间智能基准测试 —— SSoN。该测试旨在剥离动态交互与动作控制的干扰,专门检验人工智能在静态跨视角下的三维空间理解能力。测试结果显示,在“四选一挑异常”的室内空间考题面前,人类的准确率高达83.3%,而受测的主流视觉语言模型最高仅有39.7%,甚至多数模型的表现低于四选一的随机基线,暴露出当前 AI 在空间几何推理上的核心短板。

核心测试机制:四张静态图考验空间一致性

SSoN 基准测试的核心任务逻辑非常直观:通过向受测模型提供四张静态的室内场景图像,要求模型准确找出其中不属于同一场景的那张“异常图”。

通过这种方式,测试能够直接检验 AI 是否具备真正的跨视角三维空间整合能力。然而,测试结果显示出巨大的鸿沟:人类能够凭借直觉和生活经验轻松识别出空间逻辑上的不协调,而当前的视觉语言模型在面对此类测试时显得捉襟见肘。

三大核心痛点:几何推理短板明显,解释有效性堪忧

深入分析模型的答题表现,普林斯顿研究团队发现当前大模型在空间智能上暴露出三大显著痛点:

移动与旋转推理成最大短板: 在各类几何推理题型中,特别是涉及物体相对位置移动、视角旋转等空间变换的场景下,模型的错误率居高不下,短板极为突出。

知其然而不知其所以然: 在模型少数选对答案的结果中,有近三成的推理解释在逻辑上根本不成立,属于典型的“蒙对答案却说不清理由”。

整体表现不及随机盲猜: 多数受测模型的综合准确率甚至低于四选一的随机基线,说明它们尚未真正建立起稳定的三维空间直觉。

后续干预实验:定向微调与相机参数成破局关键

为了探究如何帮助 AI 跨越这道技术鸿沟,研究团队随后开展了一系列干预实验:

提示引导与三维重建: 实验表明,通过文字提示引导或引入传统的三维重建流程,只能为模型的成绩带来小幅度的提升。

提供真实相机参数: 当直接为模型提供真实的相机参数时,其表现得到了大幅度改善,但即便如此,依然未能实现半数以上题目的可靠答对。

定向监督微调: 令人鼓舞的是,针对该任务开展定向监督微调,可以让模型在未见过的全新房间测试题上,准确率实现近乎翻倍的飞跃。

这一结果充分验证了,大模型的空间一致性判断能力并非不可攻克,完全可以通过有针对性的定向监督训练实现迁移与提升。SSoN 基准的推出,成功剥离了多余的干扰因素,直指当前 AI 在三维空间跨视角整合上的核心缺口,也为全球研究人员后续迭代空间智能技术指明了清晰的前进方向。

反对 0
举报 0
收藏 0
打赏 0
评论 0
戴尔CEO警告AI服务器内存短缺恶化 950亿美元积压订单面临供应挑战
戴尔CEO警告AI服务器内存短缺恶化 950亿美元积压订单面临供应挑战

0评论2026-10-231368

英特尔杀入大模型推理市场!发布GPU D系列:最高配480GB显存,专为万亿参数推理而生
英特尔杀入大模型推理市场!发布GPU D系列:最高配480GB显存,专为万亿参数推理而生

0评论2026-10-23564

AI陪伴机器人诱导自残挨饿,Character.AI遭美肯塔基州指控存在重大缺陷
AI陪伴机器人诱导自残挨饿,Character.AI遭美肯塔基州指控存在重大缺陷

0评论2026-10-132892

OpenAI悄悄挂出未发布生命科学模型gpt-rosalind-discovery,要给药企当"工具贩子"
OpenAI悄悄挂出未发布生命科学模型gpt-rosalind-discovery,要给药企当"工具贩子"

0评论2026-10-131994

OpenAI重磅发布GPT-6.1 Sol Ultrafast版,速度最高提升 8 倍
OpenAI重磅发布GPT-6.1 Sol Ultrafast版,速度最高提升 8 倍

0评论2026-10-132328

多模态决策大模型迎来开源新突破!Cloudflare 正式发布 Clef-omni,全面支持音视频原生输入
多模态决策大模型迎来开源新突破!Cloudflare 正式发布 Clef-omni,全面支持音视频原生输入

0评论2026-10-13644

Claude 妙手绘出首张完整紫外全天图,1.19 亿颗星逐颗叠上
Claude 妙手绘出首张完整紫外全天图,1.19 亿颗星逐颗叠上

0评论2026-10-131527

德国环保搜索引擎Ecosia弃用Mistral,转投中国开源模型:欧洲自主梦撞上现实
德国环保搜索引擎Ecosia弃用Mistral,转投中国开源模型:欧洲自主梦撞上现实

0评论2026-10-092078

OpenAI发布GPT-6双模型:价格直降50% 成本较量成AI竞争新焦点
OpenAI发布GPT-6双模型:价格直降50% 成本较量成AI竞争新焦点

0评论2026-10-021488

消息称苹果搁置研发AI吊坠,曾设想以摄像头拓展Siri能力
消息称苹果搁置研发AI吊坠,曾设想以摄像头拓展Siri能力

0评论2026-10-022684