Microsoft 有探索生成式 AI 在遊戲應用提出基於 World and Human Action Model (WHAM) 模型的「Muse」計劃 ,早前模型有更新版本,改用新演算方式大幅提升效能及縮短訓練素材的所要時間,示範 AI 生成的《Quake II》可玩遊戲環境。

Microsoft 在二月推出 Muse,以及最近在《自然》期刊上發表的 World and Human Action Model (WHAM) 之後,再推出了一個可以即時遊玩的擴展版本稱為 WHAMM ( World and Human Action MaskGIT Model )。新模型能比 WHAM 更快地生成畫面。用戶可以用鍵盤或控制器跟模型互動,馬上看到輸入動作帶來的變化,基本上就像是在模型裡面玩遊戲一樣。其原意是專為遊戲構思而設計的生成式 AI 模型,可以在遊戲企畫階段能協助開發者快速將概念可視化,甚至體驗初步操作感,效果可能比使用遊戲引擎工具更快,支援遊戲手掣,亦增加對生成式 AI 以文字及圖片以外的輸入互動方式。

擴展版本 WHAMM 在學習資料的需求有明顯縮短,比舊模型(WHAM-1.6B)要近7年的遊戲試玩數據, WHAMM 僅要約7天的份量即可,同時解像度也可達 640×360,比舊版 300×180 更高更可用。Microsoft 以 WHAMM 試作一個模擬《Quake II》關卡的場景,可【在此】試玩。
Microsoft 認為 WHAMM 模型是對即時生成的遊戲體驗的早期探索,期待模型可實現哪些新互動式媒體,會持續專注於未來模型可以改進的領域,從而實現新型互動體驗,使遊戲創作者能夠將他們想要講述的故事變為現實。
