品玩

科技创新者的每日必读

打开APP
关闭

美团发布开源全模态大模型LongCat-Flash-Omni,实现毫秒级实时音视频交互

11月3日

品玩11月3日讯,美团今天正式开源全模态大模型LongCat-Flash-Omni,该模型以5600亿参数规模(激活参数270亿)实现了低延迟实时音视频交互能力。

作为业界首个集全模态覆盖、端到端架构与大参数量高效推理于一体的开源模型,其采用创新型ScMoE骨干网络与轻量级多模态编解码器,结合分块式音视频特征交织机制,支持128K上下文窗口及超8分钟交互时长。

评测显示,模型在Omni-Bench等全模态基准测试中达到开源SOTA水平,文本、图像、音频、视频单模态能力均位居前列。其采用渐进式多模融合训练策略,分阶段融合文本、语音、图像与视频数据,确保全模态性能无退化。模型已上线Hugging Face与GitHub平台,并提供在线体验与官方App支持语音交互。

取消 发布

下载品玩App,比99.9%的人更先知道关于「美团」的新故事

下载品玩App

比99.9%的人更先知道关于「美团」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测