今年人工智慧實驗室OpenAI動作頻頻,除了開放AI繪圖Dall-E、聊天機器人ChatGPT給網友調教,讓社群中關於「text to anything」的討論愈發熱烈;OPEN AI在生成3D建模的領域也取得了新進展!
就在這幾天,OpenAI發表了AI生成3D模型Point-E。根據Point-E的論文描述,相較於Google Dreamfusion、NVIDIA Magic3D等AI生成3D模型,都還需要用上多個GPU,並且耗費數小時才能生成一個3D物件;Point-E只靠一個NVIDIA V100 GPU,就能在一到兩分鐘之內完成使用者給予的指令。
顧名思義,Point-E的E是效率(Efficiency)的縮寫,而Point代表OpenAI不用尋常的網格來建立3D物件,而是透過更利於運算的圓點來生成3D建模,OpenAI稱之為3D點狀雲(3D point clouds)。
另外,Point-E還結合文字轉圖片、圖片轉3D兩種AI模型,前者是一種類似DALL-E或Stable Diffusion的AI生成圖片模型,後者則負責將圖像與相關的3D物件進行配對,並學習生成與圖像對應的3D點狀雲;而Point-E生成的3D點狀雲,在物件的細節表現上比較不理想,OpenAI團隊對此表示他們會再額外訓練一個AI,將3D點狀雲再轉成網格式的3D物件。
OpenAI也把Point-E上傳到Github,開源讓大家集思廣益,希望讓Point-E變成更好用的工具。不過,目前有許多網友都反應生成3D物件的速度並沒預期中的有效率,也有不少人對點狀雲的3D品質不滿意。雖說NVIDIA執行長黃仁勳前陣子在VentureBeat的專訪認為,生成式AI遲早會幫助元宇宙發展到令人難以想像的境界,但Point-E在使用上似乎不如Dall-E、ChatGPT為大家帶來眼睛為之一亮的感受,即便如此,2022年AI爆炸性的成長,還是讓我們這些喜愛《駭客任務》等系列的科幻迷感到相當期待呀。
看過Point-E目前產出的成果,尼尼我想3D設計師暫時還不用考慮去賣雞排啦。