美团开源LongCat-2.5,长序列SFT单卡吞吐较DDP提升86%美团11月10日开源LongCat-2.5,MIT协议,可商用推理部署与二次训练。模型面向长程智能体,原生多模态,总参数1.6万亿、每token激活约480亿,支持百万上下文,在复杂代码库开发、完整项目构建、Visual Coding及专业办公的端到端交付上明显提升。权重上线HuggingFace,同步开放技术博客与API,能力提升源于训练链路扩展。 刚刚 0
美团于11月10日开源LongCat-2.5模型,采用MIT协议,支持商用推理与二次训练。该模型为原生多模态架构,总参数达1.6万亿,每个token激活约480亿参数,支持百万级上下文长度,在代码开发、项目构建、Visual Coding及专业办公场景中实现端到端交付能力提升。其视觉表征通过多层级离散token处理,与文本统一建模,结合残差向量量化与联合训练,支持视觉token离线缓存。推理采用W4A4量化方案,结合FlatQuant优化MoE精度,保持性能并降低计算成本。训练采用FSDP双重分片与混合词表并行策略,缓解国产AI加速器显存压力,单卡吞吐较DDP基线提升86%。模型权重已上线HuggingFace,同步开放技术博客与API平台,体现大模型竞争向工程落地与国产算力适配的转变。
