谷歌展示Genie模型:一张草图就能生成一个2D游戏

澎湃新闻
1396次浏览

 Cig知多少教育网-记录每日最新科研教育资讯

·Genie是从互联网视频中训练出来的基础世界模型,可根据合成图像、照片、草图生成动作可控的2D世界。不过其生成的“游戏”画质很糊,离实时可玩还很远。Cig知多少教育网-记录每日最新科研教育资讯

·DeepMind认为,Genie引入了一个能从图像或文本生成整个交互式世界的时代,它将成为训练未来通才AI智能体的催化剂。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie生成的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

谷歌DeepMind团队展示了Genie模型,能把草图变成2D游戏。Cig知多少教育网-记录每日最新科研教育资讯

生成式人工智能可以通过语言、图像甚至视频生成创造性内容。而DeepMind引入了生成式人工智能新范式——Genie(generative interactive environments,生成式交互环境),根据单个图像提示来生成“交互式可玩环境”。该模型从游戏视频中学习游戏机制后,可以通过一个简单提示创建2D平台类游戏。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie生成的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

2月26日,DeepMind表示,Genie是一个从互联网视频中训练出来的基础世界模型,它可以根据合成图像、照片甚至草图生成各种各样动作可控的2D世界,使人们能够与他们想象的虚拟世界互动。Cig知多少教育网-记录每日最新科研教育资讯

“只需要一张图片,Genie就可以创建一个全新的互动环境。” DeepMind表示,这为生成和进入虚拟世界打开了大门。例如可以采用最先进的文生图大模型来生成初始帧,然后用Genie赋予它们“生命”。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie根据图片生成动作可控的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie根据图片生成动作可控的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

Genie的模型参数只有110亿,根据人类玩2D平台类游戏的20多万小时视频进行无监督训练。Genie的出现要归功于谷歌研究人员开发的可推断视频帧之间动作的潜在动作模型、将原始视频帧转换为离散标记的视频分词器,以及推测下一帧的动态模型。Cig知多少教育网-记录每日最新科研教育资讯

DeepMind表示,Genie的独特之处在于,它能够在没有动作标签的情况下,完全从互联网视频中学习精细的控制。这是一个挑战,因为互联网视频通常没有关于执行哪个动作的标签,甚至没有关于应该控制图像哪个部分的标签。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie根据人的画作生成动作可控的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

Cig知多少教育网-记录每日最新科研教育资讯

Genie根据人的画作生成动作可控的2D世界。Cig知多少教育网-记录每日最新科研教育资讯

DeepMind开发人员蒂姆·罗克塔谢尔(Tim Rockt?schel)表示,Genie学习各种潜在动作,以一致性控制角色。Genie习得潜动作空间不仅具有多样性和一致性,并且具有可解释性。此外,Genie模型是通用的,并不局限于2D。Cig知多少教育网-记录每日最新科研教育资讯

DeepMind 在官方声明中也表示,Genie “专注于2D平台类游戏和机器人的视频”,“但我们的方法是通用的,适用于任何类型的领域,并可以扩展到更大的互联网数据集。”DeepMind认为,Genie引入了一个能从图像或文本生成整个交互式世界的时代,它将成为训练未来通才AI智能体的催化剂。Cig知多少教育网-记录每日最新科研教育资讯

不过Genie是一个研究项目,而不是最终产品。它的训练视频是160 x 90像素的超低分辨率视频,每秒只有10帧,它生成的“游戏”同样是低分辨率的,每秒只有1帧。“该模型目前以每秒1帧的速度运行,所以现在它离实时可玩还很远。”蒂姆·罗克塔谢尔表示。Cig知多少教育网-记录每日最新科研教育资讯

本文链接:http://knowith.com/news-3-339.html谷歌展示Genie模型:一张草图就能生成一个2D游戏

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

贵州表演统考2023年报名时间是什么时候?附报名流程
最近经常有小伙伴私信询问贵州表演统考2023年报名时间是什么时候?附报名流程相关的问题,今天,小编整理了以下内容,希望可以对大家有所帮助。 贵州表演统考2023年报名时间是什么时候?具体的报名流程是
2024河北高考新政策 2024吉林高考是3+3还是3+1+2模式?
今天小编整理了2024河北高考新政策 2024吉林高考是3+3还是3+1+2模式?相关信息,希望在这方面能够更好的大家。 河北2024单招政策如下: 单独招生是教育部为进一步完善具有中国特色的高等职
2024年艺考还有校考吗 2024年舞蹈艺考新政策
2024年艺考还有校考吗 2024年舞蹈艺考新政策相关内容,小编在这里做了整理,希望能对大家有所帮助,关于2024年艺考还有校考吗 2024年舞蹈艺考新政策信息,一起来了解一下吧! 2024年艺考改革政策如下
高考快递古诗文2024 2023高考语文古诗文默写范围
小编给大家带来了高考快递古诗文2024 2023高考语文古诗文默写范围相关文章,一起来看一下吧。 2023语文高考古诗文范围如下: 1、2023年高考语文必背篇目为60篇,包括文言文20篇(必修教材10篇
2023上海春考难度(广东春季高考专业)
今天小编整理了2023上海春考难度(广东春季高考专业)相关信息,希望在这方面能够更好的大家。 其他信息: 1上海大学2上海商学院3上海理工大学 4 上海海事大学 5 上海戏剧学院 6 华东政法大学 7
编导艺考有哪些考试项目?
编导艺考有哪些考试项目?相关内容,小编在这里做了整理,希望能对大家有所帮助,关于编导艺考有哪些考试项目?信息,一起来了解一下吧! 编导艺考的考试项目主要包括以下几个方面: 1.文化课考试:这是所有

热点精选

最新推荐

您可能感兴趣