在 3060 上跑 GTA 幻觉:一个消费级世界模型
Reddit 用户 lucidml_lover 发布了一个用 transformer 训练的世界模型,能实时生成类似 GTA 的画面,并放出了 Hugging Face 权重和浏览器 demo。它能在 RTX 3060、4060 及以上显卡运行,但车辆控制、前后一致性和画面质量仍有明显问题。
Reddit 用户 lucidml_lover 在 r/StableDiffusion 发布了一个世界模型,能实时生成类似 GTA 的画面。作者把 Hugging Face 权重和推理代码放了出来,也做了一个浏览器里的流式 demo,不用本地部署就能试。
Full Weights and Inference code
世界模型可以粗略理解为:模型学习环境的动态,根据当前画面和操作预测下一帧,再把预测串成可交互画面。这个项目用的是 transformer 架构,里面用了学习到的 summaries。作者说技术报告里有细节,不过帖子没展开。

它能在 RTX 3060、4060 及以上显卡运行。有人在评论里问 4070 Ti 会不会爆显存,作者回得挺干脆:问题不大,用 torch compile 之后速度会快很多,他也在往 MLX 移植。这个信息比画面本身更有意思。世界模型 demo 不少,但多数停留在论文或大算力环境里。能把推理压到消费级显卡,哪怕画面还粗糙,至少让更多人能亲手跑一遍。
限制也很明显。作者自己说,一致性和画质都还要继续训练,尤其车的前后方向经常搞混。有网友试玩后描述得更具体:开局在一辆黑色面包车里,车完全动不了,WASD 只能让轮子左右转,跳也没反应,结果车横在路中间,后面的车越堵越多。作者回复说,车确实很难,模型经常把车头和车尾弄反,这个版本没有训练到收敛,只是先试试想法,目标还是做能在消费硬件上跑的世界模型。
评论区还有两句挺准的吐槽。一句是 GTA: San Junipero,另一句是,我们已经在 GTA VI 之前玩上了幻觉 GTA。前者是黑色幽默,后者是事实。这个 demo 现在更像一个模型切片,离能玩的游戏很远,但它把一个问题摆到了台面上:如果世界模型继续压缩,游戏、仿真和视频生成之间的边界会越来越模糊。
有网友说自己没抱怨,反而觉得车会停下来挺有意思。这个反应挺真实。看这种早期 demo,画面崩不崩是一回事,能不能从崩掉的画面里看出下一步要修什么,是另一回事。
发布时间: 2026-11-15 01:30