[控场AI]
概念Temporal Grounding / TG

时序定位

要求模型输出被引用目标在视频中出现的时间区间,通常以起止时间戳表示,评价指标常采用 IoU 或 mIoU 来衡量模型能否将语言描述锚定到时间轴上的正确片段。

核心事实

时间轴 (近 90 天)

10月14日

OmniCompass 每条轨道包含三类互补任务:时序定位(TG)、空间定位(SG)和问答(QA)。

待验证50%
10月14日

即便在领先模型上,精确的时序与空间定位仍然是尚未解决的核心挑战,模型在粗粒度语义理解上表现尚可,但在精确定位任务上有明显缺口。

待验证50%
9月12日

视频内容的多模态理解需要综合运用语音转文字、场景识别、物体检测等能力

已验证75%

全部知识事实 (3)

来源文章