中国团队开源Matrix-Game 4.0：单卡RTX 5090实时运行游戏世界模型
2026/10/15 11:50阅读量 4
昆仑万维旗下Skywork AI发布全球首款可在单张消费级显卡（RTX 5090）上实时运行的游戏世界模型Matrix-Game 4.0，并同步开源。该模型采用“代码维护规则、视频模型生成画面”的架构，通过游戏引擎显式管理世界状态，解决了传统视频模型缺乏逻辑一致性的问题。实测显示，系统占用显存约18.5GiB，按键响应延迟低于0.15秒，帧率稳定在60 FPS，大幅降低了硬件门槛。
事件概述
昆仑万维旗下Skywork AI正式发布了Matrix-Game 4.0，这是业界首个能够在单张消费级显卡（NVIDIA RTX 5090）上实现实时运行的游戏世界模型。该项目不仅实现了高性能的本地部署，还完全开源了模型权重与推理代码，旨在降低开发者构建AI交互世界的门槛。
核心技术与架构创新
Matrix-Game 4.0的核心突破在于重构了世界模型的运作逻辑，提出了**“给视频模型套上Harness”**的设计理念，将“逻辑计算”与“视觉生成”解耦：
- 分工明确：游戏引擎作为“裁判”，负责维护世界状态、执行游戏规则并输出结构化的草图；视频模型作为“画师”，仅负责根据草图和指令实时渲染最终画面。
- 逻辑一致性：通过代码显式记录玩家血量、道具归属等关键状态，避免了纯视频生成模型中常见的规则脱缰和逻辑混乱问题。例如，玩家中弹时，先扣除盾牌耐久再扣血量的逻辑由代码严格保证，而非依赖模型幻觉。
- 动态交互：支持通过自然语言指令驱动Coding Agent修改底层游戏代码，从而实时改变游戏规则（如从计时赛变为追击战），实现了玩法的动态生成。
性能表现与工程优化
在硬件资源受限的单卡环境下，团队通过多项工程优化实现了流畅体验：
- 硬件指标：峰值显存占用约18.5 GiB，实际运行帧率达60 FPS，从按键输入到画面响应的端到端延迟低于0.15秒。
- 对比优势：相较于英伟达研究团队发布的StreamRender-H3（需8张GB200 GPU，端到端延迟约545ms），Matrix-Game 4.0在延迟上提升了约5倍，且硬件成本大幅降低。
- 技术路径：基于Wan2.2 5B Fun Control改造出V2V模型，引入空间记忆参考图和近期历史缓存以减少长程偏差；采用少步自回归蒸馏（仅1-2步去噪）压缩生成时间；结合CUDA Graph、FP8融合算子及KV环形缓存等技术减少数据搬运和计算冗余。
行业影响
Matrix-Game 4.0的开源标志着游戏世界模型赛道从“演示验证”向“工程落地”迈进。在当前世界模型技术路线尚未收敛的背景下，通过开源社区协作，开发者可以复现效果、测试不同场景并探索新玩法，加速了AI原生游戏应用的生态建设。目前模型已在GitHub、Hugging Face等平台开放下载。