世界各地的開發(fā)者和創(chuàng)作者下載了來自 NVIDIA Research 的最新代碼,以使用 2D 圖像創(chuàng)建令人驚嘆的 3D 場景。
3D 內(nèi)容創(chuàng)作者紛紛開始使用逆向渲染工具NVIDIA Instant NeRF ,它能夠?qū)㈧o態(tài)圖像變成逼真的 3D 場景。
自今年早些時候首次發(fā)布以來,全球已有數(shù)萬名開發(fā)者下載了 Instant NeRF 的源代碼,使用它渲染出美輪美奐的場景,并在社交媒體上分享精彩的作品。
Instant NeRF 的學術(shù)研究于 8 月 8 日至 11 日在溫哥華和線上舉行的 SIGGRAPH 上憑借其對計算機圖形研究的未來發(fā)展所做出的貢獻而被評為最佳論文,據(jù)悉今年僅有五篇論文入選該獎項,這篇論文也是 NVIDIA 著作者在本次大會上發(fā)表的 17 篇論文和研討會論文之一,這些論文涵蓋了神經(jīng)渲染、3D 模擬、全息技術(shù)等主題。
NVIDIA 最近舉行了一次 Instant NeRF 抽獎活動,開發(fā)者在分享用該軟件創(chuàng)建的 3D 場景后就有機會贏得高端 NVIDIA GPU。數(shù)百人參與了這項活動,發(fā)布的 3D 場景作品包括巨石陣等地標性建筑、自家后院,甚至寵物。
以下是幾位使用 Instant NeRF 的創(chuàng)作者:
鏡花水月:Karen X. Cheng 和 James Perlman
來自舊金山的創(chuàng)意總監(jiān) Karen X. Cheng 與軟件工程師 James Perlman 合作渲染 3D 場景,以測試 Instant NeRF 的創(chuàng)作極限。
兩人已經(jīng)使用 Instant NeRF 創(chuàng)造了探索鏡中反射(如上圖所示)和處理多人復雜環(huán)境(比如一群人在餐廳里享用拉面)的場景。
Perlman 表示:“該算法本身就是開創(chuàng)性的。能夠以比普通攝影測量技術(shù)更高的保真度渲染物理場景已經(jīng)十分令人震驚,更不用說還能以如此高的精度再現(xiàn)照明、色差等其他細枝末節(jié)?!?/p>
Cheng 表示:“它甚至讓錯誤看起來都很藝術(shù)。我們太喜歡這一點了,有時我們會減少場景的訓練次數(shù),嘗試 1000 次、5000 次或 50000 次迭代。有時候我更喜歡那些訓練次數(shù)少的場景,因為它們的邊緣會更加柔和,就好像油畫一般?!?/p>
如果使用之前的工具,需要三到四天才能訓練出一個“質(zhì)量不錯的場景”。有了 Instant NeRF,他們每天可以完成大約 20 個場景,他們使用 NVIDIA RTX A6000 GPU 來渲染、訓練和預覽其 3D 場景。
快速渲染帶來更快的迭代速度。
Cheng 表示:“快速渲染對整個創(chuàng)作過程非常重要。我們會一起拍攝 15 或 20 個不同的版本,整夜運行,然后查看哪些版本可行。只有當在一天內(nèi)能夠運行多個場景時,我們發(fā)表的所有作品才能被反復拍攝?!?/p>
留下瞬間:Hugues Bruyère
蒙特利爾創(chuàng)意工作室 Dpt. 的合伙人兼創(chuàng)新主管 Hugues Bruyère 每天都在使用 Instant NeRF。
他表示:“3D 捕捉對我來說越來越有吸引力,我可以用它來重構(gòu)和移動立體圖形,賦予它們更加豐富的意義?!?/p>
Bruyère 使用其之前為傳統(tǒng)攝影測量所采集的數(shù)據(jù)在 Instant NeRF 中渲染 3D 場景,傳統(tǒng)攝影測量主要依賴于無反數(shù)碼相機、智能手機、360 攝像機和無人機拍攝的照片。他還使用 NVIDIA GeForce RTX 3090 GPU 渲染 Instant NeRF 場景。
Bruyère 認為 Instant NeRF 可以用來保護和分享在線圖書館、博物館、虛擬現(xiàn)實體驗和文物保護項目中的文化藝術(shù)品。
他表示:“隨著相機和軟件解決方案變得越來越便宜,拍攝本身也走向大眾化。在幾個月或幾年內(nèi),人們將能夠捕捉物體、地點、時刻和記憶,并以可分享和永久保存的形式對它們進行實時立體渲染?!?/p>
借助智能手機拍攝的照片,Bruyère 為多倫多皇家安大略博物館展覽中的古代大理石宙斯雕像創(chuàng)建了 Instant NeRF 渲染。
步入遙遠的場景:Jonathan Stephens
空間計算公司 EveryPoint 首席布道官 Jonathan Stephens 一直在探索 Instant NeRF 的創(chuàng)作和實際應用。
EveryPoint 重建了堆場、鐵路站場、采石場等 3D 場景來幫助企業(yè)管理資源。通過 Instant NeRF,Stephens 可以更加完整地捕捉場景并讓客戶自由探索場景。他還借助 NVIDIA RTX 3080 GPU 運行使用 Instant NeRF 渲染過的場景。
Stephens 表示:“我最喜歡 Instant NeRF 的一點是它讓我能夠迅速知道渲染是否有效。以前,大型攝影測量集可能要等上幾個小時或幾天才能知道結(jié)果?,F(xiàn)在我可以測試出一堆不同的數(shù)據(jù)集并在幾分鐘內(nèi)得到答案?!?/p>
他還嘗試使用智能眼鏡等輕型設(shè)備拍攝的畫面制作 NeRF。Instant NeRF 可以將 Stephens 走在街上拍攝的低分辨率、抖動的畫面轉(zhuǎn)換成流暢的 3D 場景。
審核編輯:湯梓紅
-
3D
+關(guān)注
關(guān)注
9文章
2959瀏覽量
110730 -
NVIDIA
+關(guān)注
關(guān)注
14文章
5309瀏覽量
106356 -
gpu
+關(guān)注
關(guān)注
28文章
4944瀏覽量
131218
原文標題:SIGGRAPH 22 | NVIDIA Instant NeRF贏得SIGGRAPH最佳論文,在成千上萬的下載中激發(fā)創(chuàng)意熱潮
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
使用NVIDIA Triton和TensorRT-LLM部署TTS應用的最佳實踐

NVIDIA在多模態(tài)生成式AI領(lǐng)域的突破性進展
如何在Ubuntu上安裝NVIDIA顯卡驅(qū)動?

NVIDIA助力影眸科技3D生成工具Rodin升級
NVIDIA RTX 4500 Ada與NVIDIA RTX A5000的對比
NVIDIA Research在ECCV 2024上展示多項創(chuàng)新成果
全面總結(jié)動態(tài)NeRF

NVIDIA視覺生成式AI的最新進展
NVIDIA CEO黃仁勛在SIGGRAPH大會發(fā)表講話
Style3D亮相SIGGRAPH 2024并發(fā)表精彩演講

如何使用NVIDIA Edify創(chuàng)建出細節(jié)考究的 3D 沙漠景觀
中科馭數(shù)聯(lián)合處理器芯片全國重點實驗室獲得“CCF芯片大會最佳論文獎”
NVIDIA推出全新深度學習框架fVDB
NVIDIA NIM:打造AI領(lǐng)域的AI-in-a-Box,提高AI開發(fā)與部署的高效性
NVIDIA 加速人形機器人發(fā)展

評論