大家都喜歡玩游戲吧？因為游戲最大的吸引力是讓我們逃避現(xiàn)實、幻想一個遠離我們眼前現(xiàn)實的世界，掌控這個虛擬的現(xiàn)實世界。現(xiàn)在，我們可以想象一下，如果我們有能力創(chuàng)造自己的世界，那該多好了。 讓我們激動的這一天來了！ 北美時間26號下午，GoogleGenie團隊的負責人Tim Rockt?schel非常興奮地宣布：Google DeepMindOpen Endedness團隊開發(fā)的基于互聯(lián)網(wǎng)視頻訓練的基礎(chǔ)世界模型（foundation world model）——Genie

（幽靈）發(fā)布了，它可以根據(jù)圖像提示生成無窮無盡的可控動作2D世界的各種變化。這個110億參數(shù)大模型Genie，能從一張圖片就能創(chuàng)造出可玩的虛擬世界，動作可控，這也預(yù)示著，AI已經(jīng)真正殺到視頻游戲領(lǐng)域了。

什么是Genie（精靈）？

根據(jù) Google DeepMind 的官方博客文章，Genie 是一個基礎(chǔ)世界模型，它是根據(jù)來自互聯(lián)網(wǎng)的視頻進行訓練的。該模型可以“從合成圖像、照片甚至草圖中生成無窮無盡的可玩（動作可控）世界”。 研究論文 “Genie：Generative Interactive Environments” 指出，Genie是第一個從未標記的互聯(lián)網(wǎng)視頻中以無監(jiān)督方式訓練的生成式交互式環(huán)境。在大小方面，Genie 的參數(shù)為 11B，由時空視頻標記器（spatiotemporal videotokenizer）、自回歸動力學模型（autoregressive dynamics model）和簡單且可擴展的潛在動作模型（simple and scalable latent action model）組成。

這些技術(shù)規(guī)范允許 Genie 在生成的環(huán)境中逐幀運行，即使在沒有訓練、標注或任何其他特定領(lǐng)域要求的情況下也是如此。

Genie 能做什么的？

根據(jù)這篇研究論文，Genie是一種新型的生成式人工智能，它使任何人（甚至是兒童）都能夢想并進入類似于人類設(shè)計的模擬環(huán)境的生成世界?？梢蕴崾?Genie 生成一組不同的交互式和可控環(huán)境，盡管它是在純視頻數(shù)據(jù)上訓練的。

簡而言之，我們已經(jīng)看到了許多生成式 AI 模型，它們使用語言、圖像甚至視頻生成創(chuàng)意內(nèi)容。Genie 是一個突破，因為它可以從單個圖像提示中創(chuàng)建可玩的環(huán)境。

試著記住《哈利·波特與魔法石》中哈利和他的朋友們在前往格蘭芬多公共休息室的路上進入霍格沃茨城堡的場景。年輕的學生們看到一面墻上掛滿了畫作，每個角色都在他們的畫面中慢慢地移動，這些畫作栩栩如生。Genie能使靜止圖像栩栩如生，賦予我們一個自己的世界。

根據(jù) Google DeepMind 的說法，Genie 可以收到它從未見過的圖像提示，這包括現(xiàn)實世界的照片、草圖，允許人們與他們想象的虛擬世界互動，這就是稱之為“基礎(chǔ)世界模型”。在培訓方面，研究論文強調(diào)，他們更關(guān)注2D平臺游戲和機器人技術(shù)的視頻。Genie 使用通用方法進行訓練，使其能夠在任何類型的域上運行，并且可以擴展到更大的 Internet 數(shù)據(jù)集。

為什么Genie很重要？

Genie 的突出之處在于它能夠從互聯(lián)網(wǎng)視頻中學習和重現(xiàn)游戲中角色的控制。這是值得注意的，因為互聯(lián)網(wǎng)視頻沒有關(guān)于視頻中執(zhí)行的動作的標簽，甚至沒有關(guān)于應(yīng)該控制圖像的哪一部分的標簽。

Google 博客文章寫道：“Genie不僅可以學習觀察的哪些部分通常是可控的，還可以推斷出在生成的環(huán)境中一致的各種潛在行為。請注意，相同的潛在動作如何在不同的提示圖像中產(chǎn)生相似的行為，“ 根據(jù) Google DeepMind 的說法，該模型最獨特的方面是：它允許您從單個圖像創(chuàng)建一個全新的交互式環(huán)境。這開辟了許多可能性，尤其是創(chuàng)建和進入虛擬世界的新方法。為了證明這一點，研究人員使用文本到圖像模型Imagen 2創(chuàng)建了一個圖像，然后將其用作創(chuàng)建虛擬世界的提示。草圖也可以做同樣的事情。

有了 Genie，任何人都可以創(chuàng)建自己完全想象的虛擬世界。此外，該模型學習和開發(fā)新世界模型的能力標志著向通用人工智能代理（一個獨立的程序或?qū)嶓w，通過傳感器感知其周圍環(huán)境來與環(huán)境交互）的重大飛躍。 開啟另一個旅程：

審核編輯：劉清