59.9%|SpatialBlock空间推理综合准确率
NVIDIA发布SpatialBlock空间推理框架:零样本识别物体运动位置,降低AI视觉渲染门槛
零样本空间推理:给AI装上「空间感知」
NVIDIA Research的SpatialBlock框架解决了AI视觉领域的一个根本性难题——让模型在不经任何专门训练的情况下理解物体之间的空间关系。传统方法需要为每个场景训练专门的模型,而SpatialBlock通过创新的空间编码机制,实现了「零样本」——直接理解任意场景中物体移动方向、相对位置和遮挡关系。在20项标准化空间推理测试中,SpatialBlock的综合准确率达到59.9%,远超此前所有零样本方法。
这项技术对数字人视频制作的影响尤其直接。过去AI生成的竖屏视频常出现「人物飘在空中」「物体凭空消失」等空间不一致问题,SpatialBlock使模型能自动校正这些错误,大幅提升竖屏影视级画面的自动生成质量。
降低AI视频渲染门槛
NVIDIA将SpatialBlock集成进其Omniverse平台,开发者可以通过简单API调用获得空间推理能力。英伟达AI研究副总裁表示「SpatialBlock的意义在于让AI『看懂』三维世界,而不仅仅是像素。这是从2D理解到3D理解的关键一步。」
← 返回资讯列表
AI8899 · 内容仅供学习参考