每帧都是AI实时生成的,全球首款AI游戏问世了!
文章摘要
【关 键 词】 AI游戏、实时渲染、开源代码、Transformer、性能优化
谷歌GameNGen的突破性技术使得AI能够基于扩散模型实时生成可玩的游戏,这一技术的发展预示着全球游戏产业的重大变革。紧随其后,Etched和Decart AI两家初创公司联合推出了全球首款实时生成的AI游戏Oasis,该游戏的每一帧画面均由扩散模型实时预测生成,并以每秒20帧的速度实时渲染,且所有代码和模型权重均已开源。
Oasis游戏允许玩家在不同的地形中选择并体验由AI实时塑造的游戏内容,强调玩家的每一步操作都将影响游戏世界的走向。尽管游戏体验存在一定的局限性,如记忆短板和操作困难,但Oasis的技术架构和性能表现仍受到业界关注。该游戏的技术架构包括一个空间自编码器和一个潜在扩散模型结构,均基于Transformer模型构建。Oasis采用自回归生成帧的方式,通过Diffusion Forcing训练方法和时间注意力层的加入,实现了基于游戏输入的帧调节。
在性能方面,Oasis以每秒20帧的速度生成实时输出,相较于其他模型在速度上有显著提升。Etched和Decart AI的技术博客详细介绍了Oasis的技术细节,包括模型架构、训练方法和性能优化。Etched专注于开发用于Transformer模型的专用芯片(ASIC),而Decart AI则致力于提升大模型的速度和可靠性。Oasis的推出不仅是技术上的突破,也预示着未来AI游戏可能的新形态。
原文和模型
【原文链接】 阅读原文 [ 2625字 | 11分钟 ]
【原文作者】 机器之心
【摘要模型】 moonshot-v1-32k
【摘要评分】 ★★☆☆☆
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...