雖然AI時(shí)代早已開(kāi)始，但因?yàn)樯墒紸I的出現(xiàn)，人類已經(jīng)來(lái)到了AI時(shí)代新的突破點(diǎn)。而汽車這個(gè)既古老又現(xiàn)代的交通工具，無(wú)疑是當(dāng)前AI最好的落地場(chǎng)景。

　　那么，AI將如何改變汽車本身乃至整個(gè)汽車產(chǎn)業(yè)？作為AI時(shí)代霸主的NVIDIA又將如何賦能萬(wàn)物？4月24日，NVIDIA在北京辦公室召開(kāi)了北京車展媒體溝通會(huì)。NVIDIA全球副總裁、汽車事業(yè)部負(fù)責(zé)人吳新宙，NVIDIA汽車事業(yè)部數(shù)據(jù)中心副總裁Norm Marks， NVIDIA全球副總裁、中國(guó)區(qū)汽車事業(yè)部負(fù)責(zé)人劉通與太平洋汽車等多家媒體進(jìn)行了深度對(duì)話，也讓外界得以探尋NVIDIA的AI野心。

　　盡管履新NVIDIA僅僅7個(gè)月，但吳新宙顯然已經(jīng)非常適應(yīng)現(xiàn)在的工作狀態(tài)。在臺(tái)上的他，不僅能對(duì)AI和智能駕駛侃侃而談，而且有時(shí)還會(huì)拋個(gè)梗，幽默一把，引得臺(tái)下媒體發(fā)出一陣笑聲。

　　吳新宙說(shuō)，過(guò)去十年是軟件定義汽車，通過(guò)OTA技術(shù)，把汽車這樣一個(gè)固定不變的硬件產(chǎn)品變成可以自學(xué)習(xí)、不斷變化的用戶產(chǎn)品。但隨著生成式AI的大規(guī)模進(jìn)展，接下來(lái)AI定義汽車一定會(huì)是一個(gè)很大的趨勢(shì)。而且，生成式AI在未來(lái)會(huì)把自動(dòng)駕駛的天花板進(jìn)一步提升。

　　如同在人臉識(shí)別、計(jì)算機(jī)視覺(jué)已經(jīng)發(fā)生的三段式發(fā)展過(guò)程一樣，在吳新宙看來(lái)，自動(dòng)駕駛也會(huì)是三段式的發(fā)展：剛開(kāi)始第一代的自動(dòng)駕駛系統(tǒng)是完全基于規(guī)則，有著大量人工Engineer Feature（工程師特征），通過(guò)很多算法去完成自動(dòng)駕駛這樣一個(gè)讓車自己開(kāi)的動(dòng)作。第二代就是現(xiàn)在市場(chǎng)上可以看到的，已經(jīng)開(kāi)始用大量的AI取代原有的人工Engineer Feature，現(xiàn)在不管是預(yù)測(cè)還是規(guī)劃都在用模型去做。第三代則會(huì)變成端到端大模型的方式。而且這個(gè)過(guò)程是不可避免的，在未來(lái)五年內(nèi)就會(huì)發(fā)生。

　　既然不可避免，那未來(lái)的AI汽車會(huì)是怎樣的呢？吳新宙認(rèn)為，屆時(shí)會(huì)比現(xiàn)在的自動(dòng)駕駛開(kāi)發(fā)簡(jiǎn)單很多，因?yàn)樗且粋€(gè)大模型，更多地是集中在云端。NVIDIA希望大部分模型都能夠在云端完成訓(xùn)練，通過(guò)數(shù)據(jù)驅(qū)動(dòng)的方式，車端觸發(fā)Edge Case案例，然后通過(guò)自動(dòng)數(shù)據(jù)驅(qū)動(dòng)完成模型的自我迭代，也希望在云端通過(guò)仿真完成大部分的驗(yàn)證，極大地減少車端大規(guī)模設(shè)備部署和測(cè)試的依賴性。未來(lái)的部署也可以簡(jiǎn)化成模型更新的工作，而不是巨大的代碼更新。

　　當(dāng)然，AI對(duì)于汽車的影響遠(yuǎn)不只自動(dòng)駕駛領(lǐng)域，生成式AI對(duì)智能座艙的提升也是巨大的。吳新宙希望未來(lái)的車端AI 計(jì)算平臺(tái)既可以支持智能駕駛，也可以支持車端智能，包括座艙的一些配置。

　　要做到這一切，一顆強(qiáng)大的AI芯片不可或缺。NVIDIA DRIVE Thor的出現(xiàn)，有望把車端的仿真模型的運(yùn)算能力推到下一個(gè)高點(diǎn)。同時(shí)，NVIDIA在DRIVE Thor上也做了大量的思考，以便能夠更好地支持LLM模型。

　　DRIVE Thor的算力相比上一代有了比較大的提升，安全等級(jí)也更高，而且能夠?qū)ι墒紸I、LLM給予最好的支持。吳新宙透露，大概2025年開(kāi)始有第一代的SOP，芯片也會(huì)比較快地拿到樣片。國(guó)內(nèi)包括蔚小理，比亞迪、廣汽等都已經(jīng)確定了下一代自動(dòng)駕駛平臺(tái)會(huì)通過(guò)DRIVE Thor開(kāi)發(fā)。

　　隨著本輪汽車革命進(jìn)入到以智能化為標(biāo)志的下半場(chǎng)，當(dāng)前幾乎所有瞄準(zhǔn)智能駕駛的車企和智駕公司都在研究端到端。

　　吳新宙認(rèn)為，端到端是自動(dòng)駕駛?cè)角淖罱K一步。不過(guò)他也強(qiáng)調(diào)，不能僅僅從字面上理解端到端就是從像素到動(dòng)作，可能會(huì)有一些別的東西配合。比如在控制這一環(huán)，后面可能還會(huì)有優(yōu)化幫助把控制做得更好，因?yàn)榭刂剖菙?shù)學(xué)問(wèn)題，但是這個(gè)問(wèn)題比較技術(shù)性。

　　“端到端的模型上線之前一定會(huì)有一個(gè)「護(hù)欄」，因?yàn)樾枰煌５貎?yōu)化和成長(zhǎng)，要是一開(kāi)始就上線端到端的模型是非常困難的”。吳新宙說(shuō)，能夠把端到端模型做好的企業(yè)一定也需要非常好的第二代甚至第一代的自動(dòng)駕駛堆棧。就比如，端到端的模型像是未來(lái)可以成為博士生甚至博士后的學(xué)生，但在成長(zhǎng)的過(guò)程中需要小學(xué)老師、初中老師去帶去教，讓它能夠有時(shí)間去成長(zhǎng)。顯然，這并不是一個(gè)一蹴而就的過(guò)程。吳新宙表示，在未來(lái)幾年，端到端的模型和原有模型的相輔相成，某些情況下比如比較難的路口處理可以顯示出更加擬人化的東西，通過(guò)原有的模型和方法保證安全性，這些是把端到端模型真正大規(guī)模部署，變成主流的一個(gè)過(guò)程。

　　盡管業(yè)內(nèi)普遍看好端到端的前景，但同樣也擔(dān)心端到端的黑盒問(wèn)題，人們并不知道神經(jīng)網(wǎng)絡(luò)內(nèi)部是如何工作的。不過(guò)吳新宙覺(jué)得這個(gè)問(wèn)題并非無(wú)解，首先通過(guò)原有的第一代和第二代算法棧，可以保證端到端模型的安全性，也可以不停地判斷端到端模型決定的合理性，把雙方有差異的地方作為輸入。這有點(diǎn)像大語(yǔ)言模型訓(xùn)練的反饋，能夠讓結(jié)果更加合理化。

　　此外，還可以嘗試給“黑盒”開(kāi)幾扇窗。吳新宙說(shuō)，未來(lái)的大模型、端到端模型有周邊的輸出點(diǎn)可以觀測(cè)，比如可以觀測(cè)DEV輸出的結(jié)果，訓(xùn)練的時(shí)候也是部分訓(xùn)練?？梢钥吹叫盘?hào)是怎樣的模式，通過(guò)這樣的方式在最后運(yùn)行的時(shí)候不需要運(yùn)行仿真，那些窗其實(shí)就是輸出口。最后正式運(yùn)行的時(shí)候不一定要運(yùn)行那些東西，但如果需要觀測(cè)為什么、了解怎么想的話可以通過(guò)那個(gè)窗口看一下。

　　無(wú)獨(dú)有偶，同濟(jì)大學(xué)教授朱西產(chǎn)日前在“智能汽車之夜”上對(duì)于端到端黑盒的問(wèn)題也表達(dá)過(guò)類似的觀點(diǎn)，他認(rèn)為完全黑盒并不正確。人類需要在副駕駛安排一個(gè)座位，就像教練教學(xué)徒。沒(méi)危險(xiǎn)時(shí)你可以自由發(fā)揮，一旦碰到安全邊界，教練可以隨時(shí)踩一腳剎車。

　　盡管挑戰(zhàn)重重，但吳新宙堅(jiān)信可以在2026年量產(chǎn)L3。屆時(shí)可以完全把人從系統(tǒng)中拿掉。“我們的核心是讓大家在車?yán)锊皇情_(kāi)車，而是可以玩手機(jī)，這是大家的剛需。開(kāi)車不是剛需，從A點(diǎn)到B點(diǎn)是剛需，玩手機(jī)也是剛需。”吳新宙笑著說(shuō)道。

　　Norm Marks是一位汽車軟件領(lǐng)域的老將，他已經(jīng)在這個(gè)行業(yè)工作了25年。然而生成式AI以及大語(yǔ)言模型對(duì)汽車行業(yè)的影響依然令他印象深刻。他說(shuō)，自己從來(lái)沒(méi)有看到過(guò)生成式AI被采用的速度像過(guò)去的18-24個(gè)月這么快的情況。

　　自動(dòng)駕駛汽車1.0時(shí)代主要是基于標(biāo)注圖像的訓(xùn)練，并在上面開(kāi)發(fā)和部署深度神經(jīng)網(wǎng)絡(luò)的集成，可能會(huì)有40-50個(gè)深度神經(jīng)網(wǎng)絡(luò)從L2+層級(jí)往更高級(jí)的自動(dòng)駕駛方向去走。假設(shè)有50輛測(cè)試車的車隊(duì)，每周生成的數(shù)據(jù)可能是2PB，其中只有10%-15%會(huì)得到標(biāo)注，所以可以想象繼續(xù)往上走的規(guī)模會(huì)有多大。受限于此，1.0時(shí)代智駕只能走這么遠(yuǎn)，可以實(shí)現(xiàn)ADAS和領(lǐng)航自動(dòng)駕駛LLM，或者是高速和城市環(huán)境的自動(dòng)駕駛，但如果想要實(shí)現(xiàn)完全的自動(dòng)駕駛以及最高等級(jí)的安全，需要向2.0轉(zhuǎn)型。

　　Norm Marks說(shuō)，2.0就是基于視頻進(jìn)行模型的訓(xùn)練，就像真人看世界那樣，不是像1.0時(shí)代40-50張深度神經(jīng)網(wǎng)絡(luò)的部署，2.0時(shí)代是一整個(gè)大的融合世界的統(tǒng)一模型，基于GPT或者基于Transformer建立，采用多模態(tài)的大語(yǔ)言模型，包括視覺(jué)語(yǔ)言模型和生成式AI的其它技術(shù)。

　　同時(shí)，目前NVIDIA還在使用生成式數(shù)據(jù)，特別是其自研渲染工具Omniverse，它既可以部署在云端，也可以部署在本地OES服務(wù)器。Omniverse能夠?qū)崿F(xiàn)數(shù)據(jù)生成，補(bǔ)足仿真Corner Case，從而快速轉(zhuǎn)成虛擬數(shù)據(jù)，然后進(jìn)行隨機(jī)處理，衍生出更多的Corner Case?，F(xiàn)場(chǎng)，吳新宙也講到了Omniverse的一些應(yīng)用場(chǎng)景，最核心的就是可以實(shí)現(xiàn)統(tǒng)一的數(shù)字孿生，所有的數(shù)據(jù)源收集上來(lái)以后構(gòu)建起來(lái)的數(shù)字孿生是統(tǒng)一的視圖。

　　毫無(wú)疑問(wèn)，自動(dòng)駕駛汽車技術(shù)的發(fā)展對(duì)算力和規(guī)模都提出了更高的要求。Norm Marks預(yù)計(jì)，未來(lái)三年自動(dòng)駕駛汽車2.0轉(zhuǎn)型的模型規(guī)模將增長(zhǎng)13倍，數(shù)據(jù)存儲(chǔ)規(guī)模將增長(zhǎng)17倍。Norm Marks說(shuō)，從早期的工作繼續(xù)往后看，基于Transformer需要的是3000個(gè)服務(wù)器節(jié)點(diǎn)，相當(dāng)于24000個(gè)GPU，再往上用到最先進(jìn)的GPT4作為基礎(chǔ)的話需要上萬(wàn)的服務(wù)器節(jié)點(diǎn)，到了1萬(wàn)個(gè)就已經(jīng)是超算的場(chǎng)景。

　　生成式AI的大爆發(fā)，NVIDIA顯然是最大的贏家，甚至沒(méi)有之一。隨著汽車智能化的推進(jìn)，NVIDIA在中國(guó)乃至世界的智駕版圖必然再次擴(kuò)大。

　　劉通深耕中國(guó)市場(chǎng)多年，他表示NVIDIA在中國(guó)的汽車客戶數(shù)量非常龐大。比如全球新能源汽車銷冠比亞迪跟NVIDIA的合作就是端到端全棧式合作。包括車端芯片、DRIVE Orin、DRIVE Thor，智駕芯片、數(shù)據(jù)中心端的解決方案，GPU產(chǎn)品、數(shù)據(jù)中心的網(wǎng)絡(luò)，以及NVIDIA用于AI開(kāi)發(fā)和自動(dòng)駕駛算法開(kāi)發(fā)或者大模型的開(kāi)發(fā)的軟件系列產(chǎn)品NVIDIA AI Enterprise。在智能工廠環(huán)節(jié)，NVIDIA和比亞迪也在做機(jī)器人領(lǐng)域的合作。劉通透露，NVIDIA與比亞迪有全系列合作，包括DRIVE Thor、DRIVE Orin、Omniverse，是最完整的合作代表。

　　當(dāng)然，這種端到端的合作模式不只是和比亞迪，比如和理想也是這種合作模式。理想是第一批采用DRIVE Orin的高端客戶，現(xiàn)在也宣布應(yīng)用DRIVE Thor。劉通說(shuō)，理想與NVIDIA有著多方面的合作，包括大規(guī)模的數(shù)據(jù)中心的合作和在車端芯片開(kāi)發(fā)高端智駕的合作。此外，很早就用DRIVE Orin發(fā)布非常先進(jìn)的智駕方案的小鵬也宣布采用下一代的DRIVE Thor。事實(shí)上，許多前期DRIVE Orin客戶都在紛紛向DRIVE Thor遷移。

　　據(jù)不完全統(tǒng)計(jì)，采用DRIVE Orin的中國(guó)車企包括上汽的智己、飛凡，吉利的極氪、極越、路特斯，長(zhǎng)城汽車等30多家主流車企，覆蓋了50余款車型，就連時(shí)下最火的小米SU7全系搭載的也是DRIVE Orin系列。劉通表示，在中高端的智能汽車領(lǐng)域，NVIDIA的占有率非常高。

　　可以想見(jiàn)，隨著AI定義汽車時(shí)代的到來(lái)，NVIDIA在汽車行業(yè)的地位必將得到進(jìn)一步提升，王者的王冠或?qū)⒏咏鸸忾W閃。