知名AI创新企业Liquid AI近日发布新一代基础模型家族LFM3,其首个版本包含六款参数规模约2B的模型,覆盖文本、视觉、音频、全模态及决策等多个维度。这些模型均基于LFM3-1.7B-Base基础架构,并在预训练阶段使用了22T Token的数据。LFM3系列采用融合门控短卷积、滑动窗口注意力与全局注意力的三混合层结构,经过架构重构后,可适配14种设备与后端组合。与前代相比,其处理8K上下文的速度提升了约25%,4比特量化的文本模型体积仅约1GB,显著降低了端侧部署的门槛。六款首发模型各有其适配场景,且易于微调,能够以低成本赋能垂直工业领域。部分模型还支持具身智能相关场景的高效实时推理。目前,LFM3系列的开源权重已上线,并获得了多家企业及主流开发框架平台的首日支持。
