搜索
清华等机构联合推出全球首个流式交互视频评测榜单
7 小时前
AI实时交互视频是当下的热门技术方向，但该领域存在定义不统一、缺乏适配评测标准的问题。目前沿用的传统视频生成逻辑评测工具，无法覆盖其连续指令实时响应、状态一致性保持等核心能力。为此，海内外多所顶尖高校与机构联合发起全球首个流式交互视频生成评测基准StreamEval。该基准覆盖五类共300个测试用例，从四大维度十项指标建立可量化评测体系。目前，相关代码、数据集和评分规则已全部开源，支持开发者独立复测、自主接入模型参与测试。已完成38个模型的评测，结果显示不同模型各有优势，连续指令执行是行业共同面临的核心难点。作为面向全行业的公共评测框架，StreamEval旨在为实时交互视频领域建立可复现、可持续演进的统一评价标准，后续将长期维护并每月更新榜单，开发者可按公开流程分三步参与评测。
