深蓝岛思考 的头像
深蓝岛思考 General
· Lv.0 ·

GameNGen 适合拿来做什么,不适合做什么(踩坑复盘)

这个问题被问了太多次,统一回复一下。最近有不少朋友问起,正好一起聊聊。 这篇「避坑指南」都是踩过的坑,看完能少走弯路。 GameNGen 的基本盘:Google Research 打造,2024-08-27(论文 Diffusion models are real-time game engines,ICLR 2025) 发布,基于 Stable Diffusion 1.4 修改版微调,遵循未开源(仅论文)。 显存这关,单 TPU 可跑。 哪怕做设计,我也关心生成质量能不能直接进视觉稿流程。值得划重点的地方:人类难以区分其 DOOM 片段与真实画面;两阶段:RL 智能体录轨迹 + 扩散模型微调;动作嵌入单 token、噪声增强抗自回归漂移。 觉得有用的话,回帖告诉我。有不同看法欢迎补充,一起进步。—— 有不同看法的,评论区见。 📌 💡 😊 🔧 ✨

全部回复 (10)

  1. 六边形战神 的头像
    圣骑士 #10
    单token动作嵌入加噪声增强,参数直接省一大截!但凡多给点算力自回归漂移还能再压百分之二十,这波我是冲着数据结构去的,未来可期!💥
  2. 卡仑特清道夫 的头像
    格斗家 #9
    实操建议,想试的话先按DOOM同级别的场景准备数据,动作标签一定要干净,不然微调完画面糊成马赛克,能白嫖的只有论文和思路,代码还得自己写
  3. 至尊高手 的头像
    魔剑士 #8
    两点:一是没开源别想商用,二是只适合短片段。其余都是锦上添花。
  4. 铁血法师君4 的头像
    魔剑士 #7
    楼主说显存单TPU就能跑这点对休闲玩家挺友好的,不过没开源等于只能围观,我更关心能不能拿来出视觉稿,平时就想省点事做个参考图也就够用了
  5. 梦幻76之王 的头像
    炼金术士 #6
    我寻思拿它生成个祝福宝石掉地上的闪光,结果它给我整了只DOOM里的怪追着我跑哈哈哈,最离谱的是没开源我连改都没法改,兄弟们别乱试😂
  6. 雷霆高手 的头像
    光明法师 #5
    看到人类分辨不出真假画面那一刻我真的燃起来了,这才是未来电竞训练该有的样子,可惜它还撑不起一场真正的对决,兄弟们我们等着!🔥
  7. 龙之大魔王501 的头像
    炼金术士 #4
    补充一点它两阶段流程其实挺费事先让RL智能体刷出轨迹数据再喂扩散模型微调动作嵌入压成单token是省算力但也限制了复杂操作我们MU里连招加切技能那么多键这套方案根本塞不进去
  8. 快捷键白痴 的头像
    弓箭手 #3
    从工程角度看,用噪声增强压住自回归漂移是关键,但长序列累积误差还在,所以只适合短片段演示,别指望它撑起一整局对战,这是硬约束
  9. 地之萌新9 的头像
    梦幻骑士 #2
    楼主总结得太到位了!我之前真以为能直接生成一整张MU地图,看完才明白只适合DOOM这种场景结构简单的,这下新人们不用再踩一遍坑了👍
  10. 奇迹法师 的头像
    符文法师 #1
    承蒙楼主系统整理。依我所见,未开源仅公开论文这点,意味着想直接拿来跑私服的渲染方案并不现实,对零氪玩家来说只能看论文解馋,研究价值大于工程价值。