探索未来游戏视频新范式:扩散变换器模型引领开放世界游戏革新

GameGen-X:首个交互式开放世界游戏视频生成模型

受生成模型在图像和视频生成领域的启发,研究人员开始探索将生成模型应用于游戏产业。来自香港科技大学、中国科学技术大学、中国科学院合肥物质科学研究院和香港中文大学的研究团队推出了GameGen-X,这是首个专为生成和交互控制开放世界游戏视频而设计的扩散变换器模型。
OGameData数据集:为模型训练提供高质量素材

为了实现这一愿景,研究团队首先从零开始收集和构建了开放世界视频游戏数据集(OGameData)。这是目前最大的、用于开放世界游戏视频生成和控制的数据集,包含超过100万个多样化的游戏视频片段和丰富的描述性文本。数据集经过精心标注,为模型训练提供了高质量的学习素材。
GameGen-X模型架构:结合基础模型和InstructNet

GameGen-X的训练分为基础模型预训练和指令调优两个阶段,结合了基础模型和InstructNet的架构。这种结合使得模型能够生成高质量的游戏内容并实现多模态交互控制。模型引入了创新的时空变分自动编码器和掩码时空扩散变换器,有效提升了视频处理和生成的效率。
实验结果:GameGen-X在多个性能指标上优于其他模型

实验结果显示,GameGen-X在多个性能指标上优于其他模型,展示出在生成新颖游戏视频和提供交互控制方面的潜力。这为游戏开发提供了新的自动化、数据驱动的方法,有望推动游戏产业的进一步发展。
AI游戏新突破:无需游戏引擎,视频模型直出“我的世界”
与此同时,初创公司Decart和Etched联手推出了一款名为Oasis的全球首款无需游戏引擎的AI游戏。Oasis经过数百万小时游戏视频的训练,能够仅接收用户键盘输入实时生成开放世界游戏。这一突破性的技术使得AI在游戏产业中的应用更加广泛。
未来展望:AI游戏将引领游戏产业新变革
随着AI技术的不断发展,未来游戏产业将迎来新的变革。AI游戏将更加注重用户体验,提供更加丰富、多样化的游戏内容。同时,AI游戏也将推动游戏产业的创新,为玩家带来更加沉浸式的游戏体验。
通过以上内容,我们可以看到,扩散变换器模型和AI游戏在游戏产业中的应用前景十分广阔。随着技术的不断进步,我们有理由相信,未来游戏产业将迎来更加美好的明天。