京东即将开源视觉语言实时交互模型
4 小时前 / 阅读约1分钟
来源:凤凰网
京东将开源视觉语言实时交互模型JoyAI-VL-Interaction,推进多模态大模型至实时流式交互,适合AI持续在场场景。人工评测显示,其在多个场景中表现优于豆包和Gemini。

《科创板日报》17日讯,《科创板日报》记者独家获悉,京东团队即将开源视觉语言实时交互模型JoyAI-VL-Interaction。记者从一份在开源社区和海外AI技术圈受到关注的技术报告获悉,JoyAI-VL-Interaction把多模态大模型从"一问一答",推进到"实时流式交互",适合需要AI持续在场的场景。报告将JoyAI-VL-Interaction与豆包、Gemini 的App内视频通话助手进行了人工评测,覆盖监控预警、实时计数、实时翻译、时间感知、直播解说和引导、长程记忆六类场景。在58个案例中,JoyAI-VL-Interaction对豆包的总体胜率为77.6%,对Gemini的总体胜率为87.9%。其中,在监控预警场景中,对两个基线均取得100%胜率。