9月10日·星期四 15:44·来源:量子位

这个新开源的世界模型只有1.3B,单卡就能实时跑!

蚂蚁灵波于7月开源LingBot-World 2.0的14B主模型后,近日发布其轻量版,参数规模1.3B,面向消费级单卡GPU设计,支持本地实时世界生成。该版本并非由大模型裁剪而来,而是基于同一训练路线自然产出。团队先训练Causal World模型,采用因果预训练与MoBA注意力机制,提升长时生成的稳定性;再通过一致性蒸馏与DMD分布匹配蒸馏,将多步去噪压缩至少数几步,并让Student模型在自身长时自回归轨迹上训练,减少累计漂移。14B版本已实现小时级持续生成与720p/60fps实时体验,AMD高级副总裁Jack Huynh曾在IFA展会上演示该模型。
本文摘要由千智坊基于公开报道整理,查看完整内容:阅读原文(量子位)→