1. 摘要
神經(jīng)輻射場(chǎng)(NeRF)是一種新穎的隱式方法,可以實(shí)現(xiàn)高分辨率的三維重建和表示。在首次提出NeRF的研究之后,NeRF獲得了強(qiáng)大的發(fā)展力量,并在三維建模、表示和重建領(lǐng)域蓬勃發(fā)展。然而,最初以及隨后大多數(shù)基于NeRF的研究項(xiàng)目都是靜態(tài)的,這些項(xiàng)目在實(shí)際應(yīng)用中較為薄弱。因此,越來(lái)越多的研究者對(duì)研究動(dòng)態(tài)NeRF感興趣并關(guān)注,因?yàn)閯?dòng)態(tài)NeRF在實(shí)際應(yīng)用或情景中更為可行和有用。與靜態(tài)NeRF相比,實(shí)現(xiàn)動(dòng)態(tài)NeRF更加困難和復(fù)雜。但是動(dòng)態(tài)NeRF在未來(lái)具有更大的潛力,甚至是可編輯NeRF的基礎(chǔ)。在本文中,我們對(duì)動(dòng)態(tài)NeRF的發(fā)展和重要實(shí)現(xiàn)原則進(jìn)行了詳細(xì)豐富的闡述。對(duì)動(dòng)態(tài)NeRF的主要原理和發(fā)展進(jìn)行了從2021年到2023年的分析,包括大多數(shù)動(dòng)態(tài)NeRF項(xiàng)目。此外,我們還通過(guò)豐富多彩和新穎設(shè)計(jì)的圖表對(duì)各種動(dòng)態(tài)的不同特征進(jìn)行了詳細(xì)的比較和分析。此外,我們分析和討論了實(shí)現(xiàn)動(dòng)態(tài)NeRF的關(guān)鍵方法。參考文獻(xiàn)的數(shù)量龐大。陳述和比較是多維的。通過(guò)閱讀本文,可以輕松了解動(dòng)態(tài)NeRF的整個(gè)發(fā)展歷史和大部分主要的設(shè)計(jì)方法或原則。
2. 引言
3D重建或3D新視圖合成是神經(jīng)輻射場(chǎng)(NeRF)渲染的基礎(chǔ)研究基礎(chǔ)。3D重建或3D新視圖合成都是3D設(shè)計(jì)和計(jì)算機(jī)視覺(jué)3D建模領(lǐng)域中的兩種重要方法和研究領(lǐng)域。3D重建近年來(lái)一直是重要的發(fā)展技術(shù),但是傳統(tǒng)3D重建繁榮的發(fā)展階段后,更多與傳統(tǒng)3D重建相關(guān)的研究逐漸趨向于應(yīng)用研究。大多數(shù)傳統(tǒng)3D重建方法都是顯式的。由于傳統(tǒng)3D重建的一些歷史性缺點(diǎn),比如在高分辨率重建3D場(chǎng)景方面表現(xiàn)較弱,需要大量輸入數(shù)據(jù)并且深度依賴硬件等。在Mildenhall等人提出NeRF后,隱式3D重建的新領(lǐng)域已經(jīng)建立起來(lái)。NeRF最明顯的優(yōu)勢(shì)是可以用極高的分辨率進(jìn)行3D視圖合成,輕松地使用少量圖像或單視圖圖像進(jìn)行復(fù)雜的3D論文撰寫(xiě)。
本綜述的主要內(nèi)容
在本綜述中,將全面審視動(dòng)態(tài)NeRF的原理和技術(shù)。這篇綜述將分析從動(dòng)態(tài)NeRF的第一個(gè)研究結(jié)果到當(dāng)前動(dòng)態(tài)NeRF研究的整個(gè)發(fā)展歷史和過(guò)程。本綜述將闡述為什么動(dòng)態(tài)NeRF將成為一種不可避免的技術(shù)的原因。本綜述的陳述路線將重點(diǎn)放在原理闡述和分析、統(tǒng)計(jì)分析和比較上。本綜述將全面介紹和闡述關(guān)于NeRF的相關(guān)背景知識(shí),并對(duì)動(dòng)態(tài)NeRF的詳細(xì)技術(shù)進(jìn)行分析和討論。本綜述的目的是提出一份全面的綜述,以便研究人員了解動(dòng)態(tài)NeRF研究領(lǐng)域的研究發(fā)展和當(dāng)前的新穎研究方向。在陳述中,我們將分析動(dòng)態(tài)NeRF發(fā)展歷史和影響DyNeRF發(fā)展的關(guān)鍵因素。在對(duì)現(xiàn)有動(dòng)態(tài)原理和技術(shù)進(jìn)行基本分析和陳述之后,我們將討論未來(lái)動(dòng)態(tài)NeRF的潛在研究方向。
為了提出一份關(guān)于動(dòng)態(tài)NeRF的新穎且有價(jià)值的研究綜述,陳述和分析將聚焦于兩個(gè)維度:基于發(fā)展時(shí)間的水平分析和比較,以及基于相同范圍的垂直分析和比較。使用綜述方法水平-垂直分析方法是本綜述的首要特點(diǎn)。本綜述的第二個(gè)顯著特點(diǎn)是使用的參考文獻(xiàn)數(shù)量豐富,這意味著我們將分析大多數(shù)與動(dòng)態(tài)NeRF相關(guān)的已發(fā)表論文。本綜述的第三個(gè)顯著特點(diǎn)是在主要內(nèi)容中有豐富的原始圖像和表格,這將使讀者對(duì)動(dòng)態(tài)NeRF的研究綜述有更直觀和全面的分析和對(duì)比呈現(xiàn)。本綜述的第四個(gè)顯著特點(diǎn)是,本綜述不僅將分析動(dòng)態(tài)NeRF當(dāng)前的發(fā)展原理和技術(shù),還將根據(jù)充分的相關(guān)材料分析和討論動(dòng)態(tài)NeRF未來(lái)潛在的發(fā)展方向。本綜述的第五個(gè)顯著特點(diǎn)是,本綜述將重點(diǎn)分析和比較不同設(shè)計(jì)方法、原則和算法的性能,此外,本綜述還將從動(dòng)態(tài)NeRF研究領(lǐng)域的不同方向追求最佳性能,這將有助于讀者更好地追求動(dòng)態(tài)NeRF的最新研究成果。簡(jiǎn)而言之,我們將進(jìn)行詳盡的綜述,從不同維度進(jìn)行充分的數(shù)據(jù)分析和特征比較,以提出一份有用的研究綜述和研究參考,以助力動(dòng)態(tài)NeRF的研究。
動(dòng)態(tài)NeRF的研究意義
在2021年,Mildenhall等人提出了NeRF的開(kāi)創(chuàng)性研究后,由于NeRF帶來(lái)的巨大潛在研究?jī)r(jià)值,出現(xiàn)了許多與原始NeRF相關(guān)的研究工作,如:Mip-nerf,專(zhuān)注于設(shè)計(jì)一個(gè)適用于多尺度表示和抗鋸齒的NeRF;Block-nerf,專(zhuān)注于合成可擴(kuò)展的大場(chǎng)景;Mip-nerf 360,專(zhuān)注于渲染全景和立體場(chǎng)景或?qū)ο蟆H欢羞@些工作都不是動(dòng)態(tài)NeRF工作,這意味著所有這些研究工作的渲染結(jié)果都是靜態(tài)的。渲染靜態(tài)3D場(chǎng)景或?qū)ο蟮腘eRF被稱為靜態(tài)NeRF。與靜態(tài)圖像相比,動(dòng)態(tài)視頻將引起觀眾更多的關(guān)注。同時(shí),與靜態(tài)圖像相比,動(dòng)態(tài)視頻可以包含更多的信息,并且可以在更多的應(yīng)用領(lǐng)域使用。類(lèi)比于3D重建或NeRF領(lǐng)域,動(dòng)態(tài)NeRF將表示更豐富的信息,并在更多的應(yīng)用領(lǐng)域中使用,而不是靜態(tài)NeRF。與靜態(tài)NeRF相比,動(dòng)態(tài)NeRF可以表示更多的信息,并且具有更廣泛的應(yīng)用領(lǐng)域。因此,NeRF研究的未來(lái)趨勢(shì)將更多地關(guān)注動(dòng)態(tài)NeRF,這意味著未來(lái)動(dòng)態(tài)NeRF的研究將在NeRF領(lǐng)域變得越來(lái)越重要和有價(jià)值。
3. NeRF綜述總結(jié)
這篇綜述是首次全面關(guān)注動(dòng)態(tài) NeRF 的全球綜述。為了更好地理解研究背景和類(lèi)似研究領(lǐng)域綜述論文的敘述結(jié)構(gòu),并撰寫(xiě)一篇更好的動(dòng)態(tài) NeRF 綜述,由于動(dòng)態(tài) NeRF 是 NeRF 研究領(lǐng)域的一個(gè)子領(lǐng)域,我們對(duì)主要關(guān)注 NeRF 的綜述論文進(jìn)行了全面總結(jié),并以表1和表2的形式將它們進(jìn)行了比較。如表1和表2所示,我們選擇了九篇主要關(guān)注 NeRF 的綜述論文進(jìn)行分析。表1和表2中的項(xiàng)目引用編號(hào)分別相同,用于分析每篇綜述論文的關(guān)注重點(diǎn)、特征和內(nèi)容結(jié)構(gòu)。
4. 動(dòng)態(tài)NeRF總結(jié)
首先,我們對(duì)從2021年到2023年的動(dòng)態(tài)NeRF進(jìn)行了分類(lèi)和比例分析。如圖3a所示,盡管2022年的數(shù)量少于2021年,但表3中分析的論文比例在2023年大大擴(kuò)展了。對(duì)于渲染對(duì)象類(lèi)型,如圖3b所示,最流行的對(duì)象類(lèi)型是普通類(lèi)型,這意味著普通對(duì)象的動(dòng)態(tài)NeRF是主流。需要注意的是,專(zhuān)注于個(gè)體人類(lèi)或人體組件的動(dòng)態(tài)NeRF研究是第二大研究方向。大規(guī)模的動(dòng)態(tài)NeRF也是一個(gè)熱門(mén)研究方向。對(duì)于出版的期刊或會(huì)議分析,如圖3c所示,令人印象深刻的事實(shí)是,超過(guò)一半的分析論文發(fā)表在CVPR上,第二大比例由ICCV保持。CVPR和ICCV都是與計(jì)算機(jī)視覺(jué)研究相關(guān)的最流行和主要的會(huì)議。換句話說(shuō),一個(gè)可用的建議是,CVPR和ICCV是發(fā)表優(yōu)秀動(dòng)態(tài)NeRF研究的兩個(gè)推薦會(huì)議。
隨后,我們對(duì)從2021年到2023年的動(dòng)態(tài)NeRF的發(fā)展和趨勢(shì)進(jìn)行了分析。如圖3d所示,盡管2022年的動(dòng)態(tài)NeRF分析論文數(shù)量與2021年相比有所減少,但2023年有所增長(zhǎng)。盡管2022年的論文數(shù)量最少,但總引用次數(shù)最多,如圖3e所示。由于2023年發(fā)表的論文是最新的結(jié)果,因此引用次數(shù)最少,但與其他論文相比,差距并不大。如圖3f所示,2022年發(fā)表的研究結(jié)果獲得了更多的個(gè)體引用率,這意味著這些論文具有更高的質(zhì)量,可以吸引更多的研究關(guān)注。
5. 總結(jié)
這份審查是一份全面的技術(shù)和聲明審查。在這個(gè)審查中,我們討論并分析了大量關(guān)于動(dòng)態(tài) NeRF 領(lǐng)域的研究項(xiàng)目和結(jié)果,涵蓋了來(lái)自不同子領(lǐng)域的幾乎所有重要結(jié)果。為了更好地呈現(xiàn)動(dòng)態(tài) NeRF 在各個(gè)方面的陳述和比較,我們提出了一些新穎的圖表呈現(xiàn)方法。在分析動(dòng)態(tài) NeRF 具體實(shí)現(xiàn)方法的部分,我們采用了一種新方法,將文字方程和圖表相結(jié)合,以展示實(shí)現(xiàn)過(guò)程,這將更容易理解。與靜態(tài) NeRF 相比,動(dòng)態(tài) NeRF 的關(guān)鍵設(shè)計(jì)是將變形因素或域添加到之前的靜態(tài) NeRF 網(wǎng)絡(luò)中。然而,這些動(dòng)態(tài) NeRF 不支持可重新編輯的控制或編輯,這在進(jìn)一步研究或?qū)?lái)應(yīng)更加重視更新方法。大多數(shù)動(dòng)態(tài) NeRF 的研究對(duì)未來(lái)可編輯或可重新編輯的 NeRF 的研究是有用的。在某些維度上,動(dòng)態(tài) NeRF 的一些原理甚至對(duì)高斯光斑研究項(xiàng)目的設(shè)計(jì)也是有用的,這是我們接下來(lái)的主要研究對(duì)象。
-
3D
+關(guān)注
關(guān)注
9文章
2934瀏覽量
108834 -
三維
+關(guān)注
關(guān)注
1文章
515瀏覽量
29196
原文標(biāo)題:最新綜述!全面總結(jié)動(dòng)態(tài)NeRF!
文章出處:【微信號(hào):3D視覺(jué)工坊,微信公眾號(hào):3D視覺(jué)工坊】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
STM32L431RCT6主芯片 搭配 SD NAND-動(dòng)態(tài)心電圖設(shè)備存儲(chǔ)解決方案
技術(shù)分享 |多模態(tài)自動(dòng)駕駛混合渲染HRMAD:將NeRF和3DGS進(jìn)行感知驗(yàn)證和端到端AD測(cè)試

LLC動(dòng)態(tài)性能分析

2024年AI開(kāi)發(fā)者中間件工具生態(tài)全面總結(jié)
什么是動(dòng)態(tài)制動(dòng)
2024年risc-v的發(fā)展總結(jié)
新起點(diǎn)·新跨越 | 莫之比2024年度總結(jié)暨2025年度部署會(huì)議

51單片機(jī)晶振的問(wèn)題總結(jié)
靜態(tài)鏈接和動(dòng)態(tài)鏈接
莫之比2024年中總結(jié)丨聚焦破局,共繪下半年增長(zhǎng)藍(lán)圖

機(jī)器人動(dòng)態(tài)表情模塊JZRF-----江智公司開(kāi)始全面對(duì)外開(kāi)放提供

LiDAR4D:基于時(shí)空新穎的LiDAR視角合成框架

評(píng)論