纯靠生成像素的世界模型有个老毛病:一个箱子走出画面,再转回来,它可能就没了。模型没有“状态”,只有上一帧的样子,规则每一帧都要重新猜。
Skywork AI 在 2026 年 10 月 15 日开源的 Matrix-Game 4.0,解法很朴素:状态交给真正的游戏引擎去管,视频模型只负责把画面画好看。代码和演示在 SkyworkAI/Matrix-Game,场景权重在 Hugging Face 的 Skywork/Matrix-Game-4.0,项目页是 matrix-game-v4-0.github.io。
引擎与模型分工
Skywork 把这套外壳叫 Harness,里面分三层。
最底下是游戏引擎。玩法、物理、玩家输入都在这里按规则推进,它只画一个很粗糙的低模代理画面。
规则覆盖不到的情况,交给一个 Coding Agent:玩家说了什么新指令,它当场写成新规则和提示词。
最上面是因果视频模型。它看着低模画面、一段动态描述和几张参考帧,每一步生成一个 latent,对应四帧 RGB,去噪只要一到两步。HUD 和音效是另外对齐的图层。
这样分工的结果是,神经网络画出来的东西再漂亮,也改不了碰撞和玩法。箱子在不在,引擎说了算。
已发布内容
首发带了三个场景专用模型:中世纪城堡和古埃及是第三人称射击,城市竞速是驾驶。模型卡写的输出分辨率是 480×864,每个场景检查点约 50 亿 BF16 参数,完整下载是几十 GB 的量级,清单里带 SHA256 校验。
硬件方面,GitHub 同一天写了针对 RTX 5090 的推理优化,用了 FP8 线性层、融合算子、CUDA Graph,SageAttention 可选;5080 和 5070 的支持说是下一周跟上。画质和速度可以二选一:质量档用 Wan VAE 跑两步,实时档用 TAEHV 跑一步。
许可分两块。Skywork 自己的场景权重和游戏资源是 Apache-2.0,共用的 Wan / umT5、TAEHV 组件仍按各自上游许可走。
模型卡对局限写得很坦白:模型只认它训练过的低模场景和相机设置。没见过的几何、急速转镜头、遮挡、玩得太久,都可能出现外观漂移或几何错误。帧率、消费级显卡显存够不够、能不能精确还原场景,它都不打包票。
GitHub 星标走势
2026 年 10 月 16 日前后的 AI Rank 开源快照里,SkyworkAI/Matrix-Game 排在第 179 名附近,约 2,468 星,一天涨了大约 108 星。4.0 发布前它的名次靠后很多。快照每天都在变,下面的项目页能看到最新走势。
继续探索: 在 AI Rank 的开源项目排名 查看今天增长较快的 AI 开源项目。
或 📱 下载 AI Rank App 在手机上随时查看。
本文使用自动化编辑辅助,于 2026 年 10 月 16 日依据官方资料与指定日期的 AI Rank 数据核对,未进行自有测试。
封面图片:官方产品素材;由 AI Rank 编辑排版。