NVIDIAInstantNeRF赢得SIGGRAPH最(zuì)好(hǎo)的(de)論文(wén)的(de)下(xià)载(zài)中(zhōng),最(zuì)好(hǎo)的(de)論文(wén)激發(fà)了(le)創意(yì)热(rè)潮(cháo)

 行業动态     |      2022-08-18 15:24:45    |      瀝拓

  3D內(nèi)容創作(zuò)者(zhě)已經(jīng)開(kāi)始(shǐ)使用(yòng)反向(xiàng)渲染工具NVIDIAInstantNeRF,它(tā)可(kě)以将静(jìng)态图(tú)像變(biàn)成(chéng)逼真(zhēn)的(de)3D场(chǎng)景。

  自(zì)今年(nián)早(zǎo)些(xiē)时(shí)候首次(cì)發(fà)布(bù)以来(lái),全(quán)球數万(wàn)開(kāi)發(fà)者(zhě)已經(jīng)下(xià)载(zài)了(le)它(tā)InstantNeRF用(yòng)源代(dài)碼渲染出(chū)美(měi)麗的(de)场(chǎng)景,並(bìng)在(zài)社交媒體(tǐ)上(shàng)分(fēn)享精彩的(de)作(zuò)品。

  InstantNeRF學(xué)術(shù)研究于(yú)8月(yuè)8日(rì)至(zhì)11日(rì)在(zài)温(wēn)哥華和(hé)网(wǎng)上(shàng)舉行SIGGRAPH根(gēn)據(jù)他(tā)对计算机图(tú)形研究未来(lái)發(fà)展(zhǎn)的(de)貢獻,他(tā)被評为最(zuì)佳論文(wén)。據(jù)報道,今年(nián)只(zhī)有(yǒu)五(wǔ)篇(piān)論文(wén)入(rù)選該獎项。这(zhè)篇(piān)論文(wén)也(yě)是(shì)NVIDIA这(zhè)是(shì)作(zuò)者(zhě)在(zài)本(běn)次(cì)会(huì)议上(shàng)發(fà)表(biǎo)的(de)17篇(piān)論文(wén)和(hé)研讨会(huì)論文(wén)之(zhī)一(yī)。这(zhè)些(xiē)論文(wén)涵蓋了(le)神經(jīng)渲染和(hé)3。D主(zhǔ)题,全(quán)息技術(shù)等。

  NVIDIA最(zuì)近(jìn)舉行了(le)一(yī)次(cì)InstantNeRF抽獎活动,開(kāi)發(fà)者(zhě)分(fēn)享用(yòng)这(zhè)个(gè)软(ruǎn)件(jiàn)創建的(de)3。D场(chǎng)景結束(shù)後(hòu),有(yǒu)机会(huì)赢得高(gāo)端NVIDIAGPU。數百(bǎi)人(rén)參加了(le)这(zhè)项活动,發(fà)布(bù)了(le)300人(rén)D场(chǎng)景作(zuò)品包(bāo)括巨石阵(zhèn)等标(biāo)志性(xìng)建築,自(zì)家(jiā)後(hòu)院(yuàn),甚至(zhì)宠物(wù)。

  下(xià)面(miàn)是(shì)幾(jǐ)个(gè)用(yòng)途InstantNeRF的(de)創作(zuò)者(zhě):

  鏡(jìng)花(huā)水月(yuè):KarenX.Cheng和(hé)JamesPerlman

  来(lái)自(zì)旧(jiù)金(jīn)山(shān)的(de)創意(yì)總(zǒng)監KarenX.Cheng软(ruǎn)件(jiàn)工程师(shī)JamesPerlman合作(zuò)渲染3D測試场(chǎng)景InstantNeRF創作(zuò)极限。

  两(liǎng)两(liǎng)个(gè)人(rén)用(yòng)过(guò)InstantNeRF創造了(le)一(yī)个(gè)场(chǎng)景,探索鏡(jìng)中(zhōng)的(de)反射(如(rú)上(shàng)图(tú)所(suǒ)示),並(bìng)處(chù)理(lǐ)多(duō)人(rén)的(de)複雜环(huán)境(例如(rú),一(yī)群(qún)人(rén)在(zài)餐廳享用(yòng)拉面(miàn))。

  Perlman表(biǎo)示:“算法(fǎ)本(běn)身(shēn)是(shì)開(kāi)創性(xìng)的(de)。能(néng)夠以比普通(tòng)攝影測量(liàng)技術(shù)更(gèng)高(gāo)的(de)保真(zhēn)度(dù)渲染物(wù)理(lǐ)场(chǎng)景是(shì)非(fēi)常令人(rén)震驚的(de),更(gèng)不(bù)用(yòng)说(shuō)以如(rú)此(cǐ)高(gāo)的(de)精度(dù)再現(xiàn)照明(míng)、色(sè)差等细(xì)节(jié)了(le)。”

  Cheng表(biǎo)示:“甚至(zhì)讓錯誤看(kàn)起(qǐ)来(lái)很有(yǒu)藝術(shù)性(xìng)。我(wǒ)们(men)非(fēi)常喜歡这(zhè)一(yī)點(diǎn),有(yǒu)时(shí)我(wǒ)们(men)会(huì)减少(shǎo)场(chǎng)景的(de)訓练次(cì)數,尝試1000次(cì),5000次(cì)或(huò)50000次(cì)叠代(dài)。有(yǒu)时(shí)候我(wǒ)更(gèng)喜歡訓练頻率較低(dī)的(de)场(chǎng)景,因为它(tā)们(men)的(de)邊(biān)緣会(huì)更(gèng)柔软(ruǎn),就(jiù)像油(yóu)画一(yī)樣(yàng)。”

  如(rú)果(guǒ)使用(yòng)以前(qián)的(de)工具,訓练一(yī)个(gè)工具需要(yào)三(sān)到(dào)四天(tiān)“質(zhì)量(liàng)好(hǎo)的(de)场(chǎng)景”。有(yǒu)了(le)InstantNeRF,他(tā)们(men)每天(tiān)可(kě)以完成(chéng)大(dà)约20个(gè)场(chǎng)景,他(tā)们(men)使用(yòng)它(tā)们(men)NVIDIARTXA6000GPU来(lái)渲染、訓练和(hé)預覽其(qí)33D场(chǎng)景。

  快(kuài)速渲染带(dài)来(lái)更(gèng)快(kuài)的(de)叠代(dài)速度(dù)。

  Cheng表(biǎo)示:“快(kuài)速渲染对整个(gè)創作(zuò)过(guò)程非(fēi)常重(zhòng)要(yào)。我(wǒ)们(men)将一(yī)起(qǐ)拍攝15或(huò)20个(gè)不(bù)同(tóng)的(de)版本(běn),整夜(yè)運行,然後(hòu)檢查哪些(xiē)版本(běn)是(shì)可(kě)行的(de)。只(zhī)有(yǒu)當我(wǒ)们(men)能(néng)夠在(zài)一(yī)天(tiān)內(nèi)運行多(duō)个(gè)场(chǎng)景时(shí),我(wǒ)们(men)發(fà)表(biǎo)的(de)所(suǒ)有(yǒu)作(zuò)品才能(néng)被反複拍攝。”

  留下(xià)瞬間(jiān):HuguesBruyère

  蒙特(tè)利尔創意(yì)工作(zuò)室(shì)Dpt.合夥人(rén)和(hé)創新(xīn)總(zǒng)監HuguesBruyère日(rì)常使用(yòng)InstantNeRF。

  他(tā)表(biǎo)示:“3D捕捉对我(wǒ)来(lái)说(shuō)越来(lái)越有(yǒu)吸引力,我(wǒ)可(kě)以用(yòng)它(tā)来(lái)重(zhòng)構和(hé)移动三(sān)維图(tú)形,賦予它(tā)们(men)更(gèng)豐富的(de)意(yì)義。”

  Bruyère使用(yòng)傳統攝影之(zhī)前(qián)收(shōu)集的(de)數據(jù)InstantNeRF中(zhōng)渲染3D在(zài)场(chǎng)景中(zhōng),傳統的(de)攝影測量(liàng)主(zhǔ)要(yào)依靠無反數碼相机、智能(néng)手(shǒu)机、360相机和(hé)無人(rén)机拍攝的(de)照片。他(tā)還(huán)使用(yòng)NVIDIAGeForceRTX3090GPU渲染InstantNeRF场(chǎng)景。

  Bruyère認为InstantNeRF在(zài)線(xiàn)图(tú)書(shū)館(guǎn)、博物(wù)館(guǎn)、虛拟現(xiàn)實(shí)體(tǐ)验(yàn)和(hé)文(wén)物(wù)保护项目中(zhōng),可(kě)用(yòng)于(yú)保护和(hé)分(fēn)享文(wén)化(huà)藝術(shù)。

  他(tā)表(biǎo)示:“随着相机和(hé)软(ruǎn)件(jiàn)解(jiě)決方(fāng)案(àn)變(biàn)得越来(lái)越便宜,拍攝本(běn)身(shēn)也(yě)越来(lái)越受歡迎。在(zài)幾(jǐ)个(gè)月(yuè)或(huò)幾(jǐ)年(nián)內(nèi),人(rén)们(men)将能(néng)夠捕捉物(wù)體(tǐ)、位(wèi)置、时(shí)間(jiān)和(hé)記(jì)忆,並(bìng)以可(kě)共(gòng)享和(hé)永久保存的(de)形式實(shí)时(shí)呈現(xiàn)它(tā)们(men)。”

  用(yòng)智能(néng)手(shǒu)机拍攝的(de)照片,Bruyère为多(duō)倫多(duō)皇家(jiā)安(ān)大(dà)略博物(wù)館(guǎn)展(zhǎn)覽中(zhōng)的(de)古代(dài)大(dà)理(lǐ)石宙斯雕像創作(zuò)InstantNeRF渲染。

  進(jìn)入(rù)遙遠(yuǎn)的(de)场(chǎng)景:JonathanStephens

  空(kōng)間(jiān)计算公(gōng)司EveryPoint首席(xí)布(bù)道官JonathanStephens一(yī)直(zhí)在(zài)探索InstantNeRF創造和(hé)實(shí)際應(yìng)用(yòng)。

  EveryPoint堆(duī)场(chǎng)、火(huǒ)车站、采石场(chǎng)等33个(gè)D幫助企業管(guǎn)理(lǐ)資源的(de)场(chǎng)景。InstantNeRF,Stephens它(tā)可(kě)以更(gèng)完整地(dì)捕捉场(chǎng)景,讓客戶自(zì)由(yóu)探索场(chǎng)景。他(tā)還(huán)使用(yòng)了(le)它(tā)。NVIDIARTX3080GPU運行使用(yòng)InstantNeRF渲染场(chǎng)景。

  Stephens表(biǎo)示:“我(wǒ)最(zuì)喜歡InstantNeRF有(yǒu)一(yī)點(diǎn)是(shì),它(tā)讓我(wǒ)很快(kuài)知道渲染是(shì)否有(yǒu)效。在(zài)过(guò)去(qù),大(dà)型攝影測量(liàng)集可(kě)能(néng)需要(yào)幾(jǐ)个(gè)小时(shí)或(huò)幾(jǐ)天(tiān)才能(néng)知道結果(guǒ)。現(xiàn)在(zài)我(wǒ)可(kě)以在(zài)幾(jǐ)分(fēn)钟內(nèi)測試一(yī)堆(duī)不(bù)同(tóng)的(de)數據(jù)集並(bìng)得到(dào)答(dá)案(àn)。”

  他(tā)還(huán)尝試使用(yòng)智能(néng)眼(yǎn)鏡(jìng)和(hé)其(qí)他(tā)輕(qīng)型設備制作(zuò)图(tú)片NeRF。InstantNeRF可(kě)以将Stephens走在(zài)街(jiē)上(shàng)拍攝的(de)低(dī)分(fēn)辨率,抖动的(de)画面(miàn)變(biàn)成(chéng)流暢的(de)3张(zhāng)D场(chǎng)景。

  在(zài)SIGGRAPH上(shàng)關(guān)注NVIDIA

  请在(zài)太平洋(yáng)时(shí)間(jiān)8月(yuè)10日(rì)周三(sān)0:00收(shōu)看(kàn)NVIDIA首席(xí)執行官黃仁勳與(yǔ)其(qí)他(tā)高(gāo)級領導人(rén)進(jìn)行了(le)特(tè)别講话,以了(le)解(jiě)情(qíng)況AI研究和(hé)技術(shù)背後(hòu)的(de)驅动虛拟世界。

  NVIDIA還(huán)将舉辦(bàn)多(duō)个(gè)场(chǎng)景SIGGRAPH參與(yǔ)者(zhě)的(de)線(xiàn)下(xià)和(hé)線(xiàn)上(shàng)分(fēn)会(huì),包(bāo)括:

  一(yī)般场(chǎng)景描述用(yòng)于(yú)構建虛拟世界(USD):下(xià)一(yī)步發(fà)展(zhǎn)

  光(guāng)線(xiàn)追綜VR實(shí)时(shí)协作(zuò)

  对话研究人(rén)員:如(rú)何在(zài)你的(de)33D用(yòng)于(yú)深度(dù)學(xué)習工作(zuò)过(guò)程NVIDIAKaolin

  擴展(zhǎn)現(xiàn)實(shí)的(de)未来(lái):如(rú)何通(tòng)过(guò)沉浸式體(tǐ)验(yàn)改變(biàn)一(yī)切(qiè)

  在(zài)“NVIDIAInstantNeRF——進(jìn)入(rù)神經(jīng)輻射场(chǎng)”學(xué)習如(rú)何在(zài)實(shí)踐演示中(zhōng)使用(yòng)InstantNeRF進(jìn)行創作(zuò)。InstantNeRF還(huán)将出(chū)現(xiàn)在(zài)SIGGRAPH的(de)“實(shí)时(shí)現(xiàn)场(chǎng)”在(zài)展(zhǎn)覽活动中(zhōng),現(xiàn)场(chǎng)參與(yǔ)者(zhě)可(kě)以投票(piào)選出(chū)獲勝的(de)项目。

  在(zài)其(qí)他(tā)互动分(fēn)支中(zhōng),NVIDIA深度(dù)學(xué)習和(hé)培訓中(zhōng)心将为現(xiàn)场(chǎng)參與(yǔ)者(zhě)提(tí)供免費服(fú)務(wù)NVIDIAOmniverse和(hé)其(qí)他(tā)3D實(shí)踐培訓图(tú)形技術(shù)。

  紀录(lù)片《合作(zuò)的(de)藝術(shù):NVIDIA,Omniverse和(hé)GTC》中(zhōng)一(yī)窺NVIDIAGTC了(le)解(jiě)幕後(hòu)故事(shì)NVIDIA如(rú)何實(shí)現(xiàn)最(zuì)新(xīn)的(de)創意(yì)、工程和(hé)研究团(tuán)隊?GTC主(zhǔ)题演講中(zhōng)的(de)视覺效果(guǒ)。

  進(jìn)一(yī)步了(le)解(jiě)NVIDIA在(zài)SIGGRAPH在(zài)本(běn)展(zhǎn)覽指南(nán)中(zhōng)查閱完整的(de)活动和(hé)分(fēn)支安(ān)排。