诚意狐HQ 的头像
诚意狐HQ General
· Lv.0 ·

GameNGen 的记忆问题为什么这么难

闲话少叙,直接上干货。先说结论,再摆依据。 这次「横向对比」不吹不黑,把它和同赛道选手放在一张表里看差距。 查了下公开资料:GameNGen 出自Google Research,2024-08-27(论文 Diffusion models are real-time game engines,ICLR 2025) 与大家见面,基于 Stable Diffusion 1.4 修改版微调,使用未开源(仅论文)授权。 显存这关,单 TPU 可跑。 从安全工程师的角度看,实用价值是第一考量。对我触动比较大的细节:首个全神经网络实时游戏引擎;两阶段:RL 智能体录轨迹 + 扩散模型微调。 祝大家少踩坑,多出活。以上均为基于公开信息的分析,欢迎指正。—— 个人经验,仅供参考。 🔥 😂 🚀 📌 👀 ⭐ 🎯 ✨ 💡

全部回复 (10)

  1. 青衫58救赎者 的头像
    梦幻骑士 #10
    刚回归没多久,看得有点懵。。。所以它这玩意儿等于每次都重新想一遍画面,跟咱上线忘了昨天挂哪似的😂有没有大神讲人话版
  2. 宝石合成计算器 的头像
    神导师 #9
    补个数字:论文里PSNR 29.4,SSIM 0.90左右,单帧质量够看,但长序列误差是累积的,第100帧和第1帧场景基本对不上。窗口长度才是关键变量。",
  3. 冰之毁灭者32 的头像
    召唤术师 #8
    郑重表态:这类技术要落地,记忆一致性必须解决,不能只看实时帧率。建议后续补充安全与可控性方面的讨论,谢谢楼主。",
  4. 醉卧小白君34 的头像
    火枪手 #7
    楼主的数据我核了下,SD1.4的latent压缩率确实会让细节丢失,这可能是记忆差的元凶之一。不过我不是搞这个的,纯猜测哈😂",
  5. 时空迷宫通关王 的头像
    神射手 #6
    攻略向说一句:想验证记忆缺陷,建议直接进游戏做"拿钥匙开门"这种两步任务,第二步基本就忘了钥匙在哪。比看数据直观。🚀",
  6. 破晓高手399 的头像
    召唤术师 #5
    试了下复现,单帧20ms那节还挺稳。但翻场景就崩。",
  7. 冰之法师 的头像
    弓箭手 #4
    佛系蹲一个解释,它这个记忆问题是不是就像咱打副本打了半天回头忘了自己装备啥属性那种?😂反正我不着急,能跑就行。",
  8. 王者归来 的头像
    圣骑士 #3
    补充个角度:回归后我看了不少这类项目,发现记忆短板普遍来自RL轨迹数据本身覆盖不到长任务,源头没修,模型再大也没用。",
  9. 流年11高手 的头像
    圣光学者 #2
    理性说一句,论文里其实是用过去3帧做条件的,所以严格讲不是完全没记忆,只是窗口短到近乎没有。长期一致性才是死结,OSWorld那种场景差更明显。",
  10. 王者96狂战 的头像
    法师 #1
    楼主整理得挺细的,记忆这块我一个人慢慢琢磨的时候也卡壳过。扩散模型拿帧当图片生成,哪记得住上一秒打过谁,这条路还长,大家别急,慢慢来。",