了解 AI 研究項目如何在數秒內幫助藝術家等用戶用 2D 圖像打造 3D 體驗。
想象一幅風光旖旎的畫面,比如水畔的懸崖峭壁。即便只是 2D 圖像,如此美景依舊令人心馳神往。如果同一畫面能以 3D 效果展現,那么無需跋涉就能身臨其境。
NVIDIA RTX 技術驅動的 AI 恰恰能讓我們得償所愿。創作者運用 Instant NeRF 便能在短短數秒之間將多組靜態圖像變為 3D 數字場景。
簡單好用的輻射場
AI 模型 NeRF 全稱為“神經輻射場”,可通過輸入表現某個場景的 2D 圖像并在其間執行插值,渲染完整的 3D 場景。NeRF 以神經網絡的形式運行,后者是一種復制大腦組織形式的模型,常用于需要模式識別的任務。
NeRF 在運用空間位置和體積渲染的基礎上,通過圖像的相機位姿對場景的 3D 迭代進行渲染。這類模型的計算量往往很大,因此對渲染能力的要求很高,耗時也較久。
NVIDIA 近日的 AI 研究項目帶來了破局之策。
Instant NeRF 使 NeRF 全面升級:通過 AI 加速的逆渲染,對光的現實表現形式進行估計,幫助研究人員運用從不同角度拍攝的 2D 圖像構建 3D 場景。現在只需幾秒即可生成場景,而且 3D 渲染成品的精細程度與 NeRF 模型的訓練時長成正比。
在 2022 年的 SIGGRAPH 計算機圖形會議上,NVIDIA 的研究人員發布了四個神經圖形基礎樣例(以及預訓練數據集,均屬于 Instant-NGP 訓練工具集)。人們可以借此用自己的數據創建 NeRF。這些研究人員憑借該項成果獲得了最佳論文獎,《時代》周刊也將 Instant NeRF 評為了 2022 年度最佳發明。
Instant NeRF 不僅能夠加快 NeRF 渲染,還可通過 NVIDIA RTX 和 GeForce RTX 臺式電腦和筆記本電腦的 GPU 完成整個圖像重建過程。雖然場景渲染時長取決于數據集規模、圖像和視頻源內容等多種因素,但 AI 訓練并不需要服務器級或基于云的硬件。
NVIDIA RTX 工作站和 GeForce RTX PC 是滿足 NeRF 渲染計算需求的理想之選。NVIDIA RTX 和 GeForce RTX GPU 配備專用的 AI 硬件加速器 Tensor Core,可為在本地運行生成式 AI 提供強大動力。
各就各位,整裝待發,強勢出擊
開啟 Instant NeRF 探索之旅,了解輻射場并以全新方式體驗畫面之美。
開發者和技術發燒友可以下載源代碼庫進行編譯。非技術用戶也可以從 GitHub 上下載 Instant-NGP 軟件的 Windows 安裝程序。
雖然此安裝程序適用于多種 RTX GPU,但擁有最新架構的 GeForce RTX 40 系列和 NVIDIA RTX Ada Generation GPU 才能充分發揮它的實力。
《Instant NeRF 入門》指南在介紹功能的同時,也將引導用戶完成全程操作,包括加載“NeRF Fox”等單個基礎樣例,以便了解可實現的效果。詳細說明和類似上文的視頻演示針對如何使用自定義數據創建 NeRF 進行了講解,包括獲取優質輸入圖像的方式、基于源代碼編譯代碼庫的技巧等。該指南也針對 Instant NeRF 圖形用戶界面的使用、場景參數優化、基于場景創建動畫等內容進行了說明。
圖像、視頻、現實的層層遞進
借助 AI 將圖像變為 3D 場景已令人驚嘆,但更神奇的是進行 3D 創作。
從 Instant NeRF 的一項最近更新開始,用戶可以基于靜態圖像進行場景渲染,模擬置身虛擬環境之中,在 3D 空間里自由移動。用戶只要在虛擬現實 (VR) 環境中戴上頭顯設備,就將完全置身新的世界,感受身臨其境的體驗。
其中蘊藏的潛力幾乎是無窮無盡的。
舉例而言,房屋中介可以創建并分享 3D 房產模型,升級虛擬看房體驗;零售商可以通過一組圖像和 RTX GPU 上運行的 AI 在網店中展示產品。這些 AI 模型能驅動創造力,讓其他行業也能利用身臨其境的 3D 體驗。
使用 Instant NeRF 即可在 VR 中輕松清理場景,降低了高品質 NeRF 的創建難度。
下載 Instant-NGP 開始創作之旅。
生成式 AI 正改變各類游戲、視頻會議和互動體驗。
-
NVIDIA
+關注
關注
14文章
4978瀏覽量
102987 -
gpu
+關注
關注
28文章
4729瀏覽量
128890 -
無人機
+關注
關注
229文章
10420瀏覽量
180134 -
硬件加速器
+關注
關注
0文章
42瀏覽量
12763
原文標題:“動”起來的圖片:NVIDIA Instant NeRF 將圖像變為 3D 場景
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論