自(zì)动駕駛汽车的(de)開(kāi)發(fà)和(hé)验(yàn)證需要(yào)能(néng)夠在(zài)仿真(zhēn)中(zhōng)複制真(zhēn)實(shí)场(chǎng)景。

　　在(zài)GTC会(huì)议上(shàng)，NVIDIA創始(shǐ)人(rén)兼首席(xí)執行官黃仁勳先(xiān)生(shēng)展(zhǎn)示了(le)适合NVIDIADRIVESim的(de)新(xīn)型AI工具，可(kě)以準确重(zhòng)建和(hé)修改實(shí)際駕駛场(chǎng)景。这(zhè)些(xiē)工具得到(dào)了(le)NVIDIA研究团(tuán)隊利用(yòng)NVIDIAOmniverse平台(tái)和(hé)NVIDIADRIVEMap技術(shù)取(qǔ)得的(de)突破性(xìng)成(chéng)果(guǒ)的(de)支持(chí)。

　　黃仁勳先(xiān)生(shēng)展(zhǎn)示了(le)開(kāi)發(fà)者(zhě)如(rú)何在(zài)快(kuài)速叠代(dài)中(zhōng)輕(qīng)松測試多(duō)个(gè)场(chǎng)景：

　　在(zài)模拟中(zhōng)重(zhòng)建任何场(chǎng)景後(hòu)，这(zhè)些(xiē)场(chǎng)景都可(kě)以作(zuò)为许多(duō)不(bù)同(tóng)變(biàn)化(huà)的(de)基礎，包(bāo)括改變(biàn)车輛的(de)軌迹，或(huò)在(zài)駕駛路(lù)徑上(shàng)增加障礙物(wù)，以幫助開(kāi)發(fà)人(rén)員改善人(rén)工智能(néng)驅动。

　　然而(ér)，在(zài)模拟中(zhōng)重(zhòng)建真(zhēn)實(shí)的(de)駕駛场(chǎng)景並(bìng)生(shēng)成(chéng)真(zhēn)實(shí)的(de)數據(jù)是(shì)一(yī)个(gè)的(de)过(guò)程。这(zhè)需要(yào)有(yǒu)經(jīng)验(yàn)的(de)工程师(shī)和(hé)藝術(shù)家(jiā)，但即便如(rú)此(cǐ)，也(yě)很难做到(dào)。

　　NVIDIA實(shí)施了(le)两(liǎng)種(zhǒng)基于(yú)人(rén)工智能(néng)的(de)無縫方(fāng)法(fǎ)：虛拟重(zhòng)建和(hé)神經(jīng)重(zhòng)建。第(dì)一(yī)種(zhǒng)方(fāng)法(fǎ)複制真(zhēn)實(shí)场(chǎng)景，作(zuò)为完全(quán)合成(chéng)的(de)3D场(chǎng)景，第(dì)二(èr)種(zhǒng)方(fāng)法(fǎ)使用(yòng)神經(jīng)仿真(zhēn)来(lái)增強(qiáng)真(zhēn)實(shí)的(de)傳感(gǎn)器數據(jù)。

　　这(zhè)两(liǎng)種(zhǒng)方(fāng)法(fǎ)不(bù)僅可(kě)以重(zhòng)現(xiàn)單个(gè)场(chǎng)景，還(huán)可(kě)以擴展(zhǎn)和(hé)生(shēng)成(chéng)许多(duō)具有(yǒu)挑战性(xìng)的(de)新(xīn)场(chǎng)景。該功能(néng)加速了(le)自(zì)动駕駛汽车的(de)持(chí)續訓练、測試和(hé)验(yàn)證工作(zuò)流。

　　虛拟重(zhòng)建

　　在(zài)上(shàng)述主(zhǔ)题演講视頻中(zhōng)，NVIDIADRIVEMap、Omniverse和(hé)DRIVESim以3D形式重(zhòng)建了(le)NVIDIA總(zǒng)部(bù)周围的(de)整體(tǐ)駕駛环(huán)境和(hé)场(chǎng)景。

　　借(jiè)助DRIVEMap，開(kāi)發(fà)者(zhě)可(kě)以在(zài)Omniverse中(zhōng)查看(kàn)道路(lù)网(wǎng)络的(de)數字(zì)双(shuāng)胞胎。使用(yòng)基于(yú)Omniverse的(de)工具，詳细(xì)的(de)地(dì)图(tú)可(kě)以轉(zhuǎn)換为可(kě)以與(yǔ)NVIDIADRIVESim一(yī)起(qǐ)使用(yòng)的(de)可(kě)駕駛仿真(zhēn)环(huán)境。

　　利用(yòng)重(zhòng)建的(de)模拟环(huán)境，開(kāi)發(fà)人(rén)員可(kě)以使用(yòng)真(zhēn)實(shí)駕駛中(zhōng)獲得的(de)攝像头(tóu)、激光(guāng)雷(léi)达(dá)和(hé)车輛數據(jù)来(lái)重(zhòng)現(xiàn)事(shì)件(jiàn)，如(rú)交叉口的(de)驚險时(shí)刻(kè)或(huò)通(tòng)过(guò)施工區(qū)域。

　　該平台(tái)的(de)人(rén)工智能(néng)有(yǒu)助于(yú)重(zhòng)建场(chǎng)景。首先(xiān)，对于(yú)每个(gè)跟踪对象(xiàng)，人(rén)工智能(néng)将查看(kàn)相机图(tú)像，並(bìng)從DRIVESim目录(lù)中(zhōng)找(zhǎo)到(dào)非(fēi)常相似的(de)3D材料，以及(jí)非(fēi)常接近(jìn)视頻中(zhōng)对象(xiàng)顔色(sè)的(de)顔色(sè)。

　　最(zuì)後(hòu)，重(zhòng)現(xiàn)跟踪物(wù)體(tǐ)的(de)實(shí)際路(lù)徑;然而(ér)，通(tòng)常会(huì)有(yǒu)空(kōng)白(bái)。在(zài)这(zhè)種(zhǒng)情(qíng)況下(xià)，基于(yú)人(rén)工智能(néng)的(de)交通(tòng)模型将應(yìng)用(yòng)于(yú)跟踪物(wù)體(tǐ)，以預測其(qí)運行，並(bìng)填补其(qí)軌迹中(zhōng)的(de)空(kōng)白(bái)。

　　使用(yòng)真(zhēn)實(shí)駕駛中(zhōng)的(de)攝像头(tóu)、激光(guāng)雷(léi)达(dá)數據(jù)和(hé)人(rén)工智能(néng)重(zhòng)建场(chǎng)景。

　　借(jiè)助虛拟重(zhòng)建，開(kāi)發(fà)人(rén)員可(kě)以通(tòng)过(guò)基于(yú)物(wù)理(lǐ)傳感(gǎn)器和(hé)人(rén)工智能(néng)行为模型生(shēng)成(chéng)的(de)高(gāo)保真(zhēn)數據(jù)，發(fà)現(xiàn)具有(yǒu)挑战性(xìng)的(de)潜在(zài)情(qíng)況，对自(zì)动駕駛汽车系(xì)統進(jìn)行訓练和(hé)验(yàn)證，創建许多(duō)新(xīn)场(chǎng)景。场(chǎng)景中(zhōng)的(de)數據(jù)也(yě)可(kě)以訓练行为模型。

　　使用(yòng)人(rén)工智能(néng)從原始(shǐ)场(chǎng)景中(zhōng)生(shēng)成(chéng)看(kàn)似合理(lǐ)、具有(yǒu)挑战性(xìng)的(de)场(chǎng)景。

　　神經(jīng)重(zhòng)建

　　另(lìng)一(yī)種(zhǒng)方(fāng)法(fǎ)依賴于(yú)神經(jīng)仿真(zhēn)，而(ér)不(bù)是(shì)通(tòng)过(guò)合成(chéng)生(shēng)成(chéng)场(chǎng)景，首先(xiān)使用(yòng)真(zhēn)實(shí)的(de)傳感(gǎn)器數據(jù)，然後(hòu)進(jìn)行修改。

　　傳感(gǎn)器重(zhòng)放(fàng)(回(huí)放(fàng)录(lù)制的(de)傳感(gǎn)器數據(jù)測試自(zì)动駕駛汽车系(xì)統性(xìng)能(néng)的(de)过(guò)程)是(shì)自(zì)动駕駛汽车發(fà)展(zhǎn)的(de)主(zhǔ)要(yào)內(nèi)容。这(zhè)是(shì)一(yī)个(gè)開(kāi)环(huán)过(guò)程，意(yì)味着自(zì)动駕駛汽车栈的(de)決策不(bù)会(huì)影響世界，因为所(suǒ)有(yǒu)的(de)數據(jù)都是(shì)提(tí)前(qián)录(lù)制的(de)。

　　NVIDIA研究团(tuán)隊提(tí)供的(de)神經(jīng)重(zhòng)建方(fāng)法(fǎ)預覽将这(zhè)些(xiē)录(lù)制的(de)數據(jù)轉(zhuǎn)換为一(yī)个(gè)完全(quán)反應(yìng)的(de)可(kě)修改环(huán)境，就(jiù)像演示一(yī)樣(yàng)，當最(zuì)初录(lù)制的(de)卡车經(jīng)过(guò)时(shí)，汽车可(kě)以重(zhòng)新(xīn)設置为右(yòu)轉(zhuǎn)。这(zhè)種(zhǒng)革(gé)命性(xìng)的(de)方(fāng)法(fǎ)可(kě)以實(shí)現(xiàn)自(zì)动駕駛栈與(yǔ)駕駛环(huán)境之(zhī)間(jiān)的(de)閉环(huán)測試和(hé)完全(quán)交互。

　　这(zhè)个(gè)过(guò)程從录(lù)制的(de)駕駛數據(jù)開(kāi)始(shǐ)。人(rén)工智能(néng)可(kě)以識别场(chǎng)景中(zhōng)的(de)动态对象(xiàng)，並(bìng)将其(qí)删除，以創建一(yī)个(gè)可(kě)以從新(xīn)角(jiǎo)度(dù)呈現(xiàn)的(de)3D环(huán)境的(de)精确副本(běn)。然後(hòu)，将动态对象(xiàng)重(zhòng)新(xīn)融入(rù)3D场(chǎng)景，呈現(xiàn)基于(yú)人(rén)工智能(néng)的(de)現(xiàn)實(shí)行为和(hé)外(wài)觀，並(bìng)考慮照明(míng)和(hé)陰影。

　　利用(yòng)AI基于(yú)預录(lù)的(de)駕駛數據(jù)創建3D交互环(huán)境。

　　然後(hòu)，自(zì)动駕駛系(xì)統将在(zài)这(zhè)个(gè)虛拟世界中(zhōng)行駛，场(chǎng)景会(huì)做出(chū)相應(yìng)的(de)反應(yìng)。你可(kě)以通(tòng)过(guò)增強(qiáng)現(xiàn)實(shí)使场(chǎng)景更(gèng)加複雜，插入(rù)其(qí)他(tā)虛拟物(wù)體(tǐ)、车輛和(hé)行人(rén)，使渲染結果(guǒ)看(kàn)起(qǐ)来(lái)像真(zhēn)實(shí)场(chǎng)景的(de)一(yī)部(bù)分(fēn)，並(bìng)可(kě)以與(yǔ)环(huán)境進(jìn)行物(wù)理(lǐ)交互。

　　车輛上(shàng)的(de)每个(gè)傳感(gǎn)器(包(bāo)括攝像头(tóu)和(hé)激光(guāng)雷(léi)达(dá))都可(kě)以在(zài)场(chǎng)景中(zhōng)使用(yòng)人(rén)工智能(néng)進(jìn)行模拟。

　　在(zài)Omniverse中(zhōng)，可(kě)以在(zài)駕駛环(huán)境中(zhōng)插入(rù)虛拟物(wù)體(tǐ)和(hé)车輛。人(rén)工傳感(gǎn)器數據(jù)(包(bāo)括激光(guāng)雷(léi)达(dá))是(shì)根(gēn)據(jù)场(chǎng)景生(shēng)成(chéng)的(de)。

　　充滿可(kě)能(néng)性(xìng)的(de)虛拟世界。

　　这(zhè)些(xiē)新(xīn)方(fāng)法(fǎ)由(yóu)NVIDIA在(zài)渲染、图(tú)形和(hé)人(rén)工智能(néng)方(fāng)面(miàn)的(de)專業知識驅动。

　　DRIVESim作(zuò)为一(yī)个(gè)模块(kuài)化(huà)平台(tái)，在(zài)确定(dìng)性(xìng)仿真(zhēn)的(de)基礎上(shàng)支持(chí)这(zhè)些(xiē)功能(néng)。它(tā)提(tí)供基于(yú)人(rén)工智能(néng)的(de)车輛动态、交通(tòng)模型、场(chǎng)景工具和(hé)綜合SDK，以構建所(suǒ)需的(de)任何工具。

　　通(tòng)过(guò)这(zhè)两(liǎng)種(zhǒng)強(qiáng)大(dà)而(ér)新(xīn)颖的(de)人(rén)工智能(néng)方(fāng)法(fǎ)，開(kāi)發(fà)者(zhě)可(kě)以很容易地(dì)從現(xiàn)實(shí)世界轉(zhuǎn)移到(dào)虛拟世界，從而(ér)加快(kuài)自(zì)主(zhǔ)駕駛的(de)發(fà)展(zhǎn)和(hé)部(bù)署(shǔ)。