由人工智能(AI)先驅李飛飛創辦的新創公司「世界實驗室」(World Labs)推出首個產品:可以從單張圖片生成類似電動遊戲的3D場景的AI系統。
據科技網站TechCrunch報道,目前有不少AI系統可以將照片轉化為3D模型和環境,但World Labs以AI模型生成的場景是獨一無二的,不但具有互動性並且可以修改。
只要有鍵盤和滑鼠,人們就可以在World Labs網站上的演示中探索AI生成的場景,儘管看起來有點卡通化,但仍然令人感到驚嘆。它們在瀏覽器中即時渲染,並具有可調整模擬景深(DoF)的可控相機。景深效果越強,背景物體看起來越模糊。
World Labs的系統屬於新興的AI類別,稱為「世界模型」(world models)。這類模型可以模擬遊戲和3D環境,可惜仍有偽影和一致性問題,尚待解決。比方說,新創公司Decart的Minecraft模擬世界模型Oasis,其解析度較低,並且很快就會「忘記」關卡佈局。
相較之下,World Labs的方法確保場景一旦生成就保持不變,並且遵循基本的物理定律,這意味著它們具有堅實感和深度感。該AI系統還可以將互動效果和動畫應用於場景中,例如更改物件的顏色和動態照明背景。
World Labs宣稱:「大多數生成式AI工具都能產生圖像或視頻等2D內容,而生成 3D 內容則能改善控制力和一致性,這將改變我們製作電影、遊戲、模擬器,以及其他數位化呈現物理世界的方式。」
當然還有改進的空間。World Labs的場景並非完全可探索,你的移動範圍有限,並且偶爾會出現渲染錯誤,例如:物件以不自然的方式融合在一起。
但World Labs表示,這只是「早期預覽」。除了互動式場景外,該公司還計劃建立可能對藝術家、設計師、開發人員、電影製作人和工程師等專業人士有用的工具。它的目標客戶範圍廣泛,從視頻遊戲開發商到電影製片廠等等。