AI 模型与平台

从草图到平台游戏:谷歌 Genie 的艺术方法

mm
将 Unite.AI 添加到您在 Google 上的首选来源
Discover how Google Genie’s AI magic transforms single images or text prompts into interactive, playable 2D worlds.

Genie,谷歌 DeepMind 的一个杰出创造,已经吸引了研究人员和游戏玩家的想象力。它的全名“生成式交互环境”(GENerative Interactive Environment)暗示了它的非凡能力。与普通的 AI 模型 不同,Genie 具有将单个图像或文本提示转换为交互式、可玩的 2D 世界的独特能力。

(GOOGL )

Genie 通过其能够通过吸收来自互联网视频的知识来使虚拟世界动起来而与众不同。它就像一个数字海绵一样,吸收了各种环境和交互的细微差别。

在其核心,Genie 是一个基础世界模型,具有 神经架构,拥有 110 亿个参数。其组成部分,如 时空视频标记器、自回归动态模型和关键的 潜在动作模型,协同工作以构建用户可以轻松参与的沉浸式环境。

Genie 展示了显著的能力,可以从丰富的森林和隐藏的宝藏转变为受年轻艺术家涂鸦启发的想象游戏关卡。它展示了卓越的转化能力,因为它可以在不需要特定动作标签或特定领域要求的情况下协同学习,提供了广阔和无限的创造性体验。

Genie 如何工作?

在 Genie 的迷人世界中,静态图像通过艺术和计算能力的融合转变为动态、交互式场景。想象这些静态图像作为一个超凡的视频帧,每个帧都展现出迷人的新场景,超越传统的草图,演变成沉浸式的叙事。

Genie 的核心在于其基于视频的方法,将初始图像视为一个迷人的翻页书。这种方法以惊人的方式赋予草图以生命。例如,一个简单的城堡草图可以变成一个广阔的堡垒,拥有隐藏的房间、秘密通道和高耸的塔楼。同样,一条弯曲的线可以变成一条蜿蜒的河流,里面有动画鱼和漂浮的平台供冒险。Genie 的基于视频的方法结合了想象力和现实,邀请用户进入一个迷人的世界。

Genie 的魔力源于其严格的训练。它从大量的 20 万小时 的在线公开 2D 平台游戏视频中汲取灵感。Genie 精心选择了 3 万小时的标准化视频,从数百个 2D 游戏中选取。这些游戏体验成为 Genie 的画布,注入了像素化冒险、精确跳跃和标志性游戏人物的精髓。

就像一个视频游戏一样,Genie 可以预测和创建交互式动作,就像一个巫师一样。想象一下按下游戏控制器上的按钮——Genie 做的事情类似。它将静态元素(例如一棵树)神奇地转变为动态特征。例如,按下“”可以将一棵静止的树变成一根摇晃的、可攀爬的藤蔓,树叶也会摇晃。 当角色需要跳过危险的间隙时,Genie 会将他们的像素化运动动画化,展现出勇气。我们可以想象它就像 Genie 在现实世界和神奇世界之间跳舞,使事物变得生动。

Genie 就像一个水晶球,使用其预测模型来预测接下来会发生什么。它查看随机帧和可能的动作,并对下一幅图像做出有根据的猜测。这种方法类似于电影编辑,每个镜头都通向下一个镜头,创造出一个具有流畅、悬念和激动的故事。随着 Genie 的预测展开,最初静止的图片变成了活跃、激动人心的场景。

Genie 的艺术潜力

Genie 的艺术能力非常出色,就像将一个孩子的涂鸦变成一个生动的世界。想象一下几条线变成一个令人兴奋的冒险,里面有东西可以探索、挑战可以克服和有趣的人物。

对于讲故事的人来说,Genie 提供了多种选择。例如,一张图片提示可以创建一个完整的游戏世界,玩家可以在其中发现故事和解决谜团。它更像是一个视觉故事,随着讲故事者想象而展开。

此外,Genie 不仅仅适用于游戏;它也是艺术家和讲故事的人的多功能工具,可以将简单的想法变成交互式体验,将过去和现在连接起来。

Genie 的变革性应用

Genie 的迷人能力可以带来新的应用时代。几个应用领域如下:

Genie 是一个神奇的灵感,通过将基本想法变成详细的 2D 游戏,创造出无尽的创造力。孩子们的绘画和书面提示为激动人心的冒险和富有想象力的外星场景搭建了舞台,激发创作者探索一个广阔的想象世界。

除了游戏以外,Genie 的核心能力在于基础世界建模,这其中蕴含着可能革命性地改变 机器学习 的秘密。我们可以想象它预测动态场景,对于引导自动驾驶汽车沿着像素化道路行驶或为医疗模拟训练有抱负的医生来说是有用的。

Genie 的魔力不仅适用于游戏;它还帮助学习和艺术。历史课可以变成令人兴奋的冒险,时间轴变成交互式的旅行,穿越不同的时代。在艺术画廊中,Genie 的像素化创作可能与普通绘画一起展示,混合了创造力的想法。

挑战和未来方向

除了优秀的功能外,Genie 还面临一些挑战。确保一切看起来都很好并且保持一致,就像杂技一样,将涂鸦变成杰作,但找到合适的平衡是很棘手的。因此,Genie 必须决定如何将有趣的混乱与周密的计划相结合。

同样,制作适合玩家的游戏也很有挑战性。如果游戏太容易,可能不会很有趣;如果太难,玩家可能会放弃。因此,Genie 必须像一个游戏设计师一样,调整角色跳跃的高度、敌人出现的位置以及强化道具的位置。

随着 Genie 的魔力传播,一些问题也随之出现。例如,谁应该为 Genie 创建的游戏承担信用?是最初的想法提供者、将其赋予生命的魔力模型,还是沉浸在虚拟世界中的玩家?Genie 必须谨慎地处理这些问题,处理谁拥有游戏及其想法的问题。

结论

总之,Genie,谷歌 DeepMind 的创新创造,超越了传统的 AI 模型,具有变革性的力量。从增强的游戏体验到革命性的机器学习和促进各个领域的创造力,Genie 已经成为一种多功能的力量。

尽管面临挑战,但其独特的预测动态和艺术潜力为一个未来铺平了道路,在那里想象力和技术可以无缝地融合,开启令人兴奋的交互式探索和创造力的途径。

阿萨德·阿巴斯博士(Dr. Assad Abbas)是巴基斯坦伊斯兰堡COMSATS大学的终身副教授,他在美国北达科他州立大学获得了博士学位。他的研究重点是包括云计算、雾计算、边缘计算、大数据分析和人工智能在内的先进技术。阿巴斯博士在著名的科学期刊和会议上发表了大量的论文,并做出了重要的贡献。他也是 MyFastingBuddy 的创始人。