1. 首頁 > 科技 > >

|Meta展示新VR構建工具Builder Bot，可通過語音直接構建VR世界

|Meta展示新VR構建工具Builder Bot，可通過語音直接構建VR世界

文章圖片


編譯/VR陀螺
用馬克-扎克伯格自己的話說 ， Meta的Horizon VR項目是其元宇宙愿景的核心 ， 不僅為用戶提供了參與完全沉浸式數字空間的能力 ， 而且還可以根據自己的喜好創建全新交互式3D環境 。
但這不是一件容易的事 ， 在VR中創建物體通常需要深入的設計和3D建模知識 ， 而且沒有簡單的方法來讓用戶建立定制的VR空間 ， 但這種情況或將發生改變 。 近日 ， Meta展示了為Horizon Worlds開發的由AI驅動的 \"Builder Bot \"程序 ， 用戶可完全通過語音建造VR世界 。
在演示中 ， 馬克-扎克伯格要求有一個海灘 ， 然后是特定類型的云 ， 然后是樹和野餐等道具 。 他的同事甚至能夠要求特定的環境背景聲音 ， 扎克伯格繼而要求通過立體聲播放一種音樂類型 。

圖源：Meta
扎克伯格將Builder Bot描述為一個 \"概念\" ， 并解釋說 \"我們仍然需要解決很多挑戰\" 。 此外 ， Meta公司沒有明確說明該演示部分有多少是真實的 ， 也沒有說明3D模型是動態生成的還是由人工智能從庫中挑選的 。
Meta公司稱 ， Builder Bot之所以能夠實現 ， 要歸功于SSL ， 這是一種相對較新的訓練AI模型的方式 ， 該公司近年來一直在進行研究 。 今天 ， 大多數AI使用SL訓練模式 ， 這通常需要大量由人類精心標記的數據 。 但這顯然不是人類或動物的學習方式 ， Meta公司的研究人員說 ， 依賴標簽是開發更普遍的AI的瓶頸 。 有了SSL ， AI可以從更少的數據中對一個概念有更深的理解 ， 而且這些數據不需要被貼上標簽 。 像OpenAI的DALL-E這樣的現有項目就使用SSL來生成人們用文字描述的圖像 ， 但這是我們首次看到這個想法應用于虛擬世界的創造 。
通過Horizon Worlds（這個演示似乎是以它為基礎的） ， Meta已經在試圖降低創造VR體驗的障礙 。 像Rec Room一樣 ， Horizon Worlds讓用戶使用控制器來放置和操縱形狀 ， 并使用視覺腳本系統來增加動態功能 ， 從而在VR中進行構建 。 但并不是每個人都能自如地使用類似控制臺的控制器來瀏覽復雜的菜單系統 。 像Builder Bot這樣的項目暗示了一個未來 ， 就像《星際迷航》中那樣 ， 任何人都可以只用自己的聲音來創造自己的虛擬世界 。

圖源：Meta
Meta可以利用Builder Bot建立一個VR建筑 ， 而在整個過程中不需要任何編碼或設計知識 ， 甚至不需要通過3D應用程序和工具進行任何手動操作 。 用戶能夠通過直接說出想要的東西開建造一個VR建筑 。
這顯然有其局限性 。 更具體的放置和定制過程可能無法通過簡單的命令實現 ， 同時它也受到Meta從聲音識別到物體識別能力的限制 ， 以及Meta在其系統中可用的預構建3D對象限制 。
但Meta也在這些方面進行開發 。
在語音識別方面 ， Meta的新CAIRaoke項目最終將提供更多的語境理解和翻譯能力 ， 這可以使其為Builder Bot建立一個更包容、更全面的物體匹配數據集 。
在可用物品方面 ， Meta還在開發改進的3D掃描工具 ， 迄今為止 ， 這些工具主要側重于擴大其電商產品列表 ， 通過提供物品在現實世界中的虛擬展示 ， 為購物者提供更多的選擇 。
隨著這一舉措的擴大 ，Meta公司將建立一個龐大的3D物體資料庫 ， 然后將其整合到這個新的VR環境中 。
從本質上講 ， 該系統將為Meta公司提供多重用處 ， 它不僅將擴大其可用的3D家具對象數據集 ， 以便在其電商產品列表和推薦中進行展示 ， 而且還將為Horizon Worlds提供無止境的產品補充 ， 這將實現真正的定制化VR空間 。

相關經驗推薦