商湯絕影智能汽車事業(yè)群總裁王曉剛：智能汽車時(shí)代，駕艙云三位一體的創(chuàng)新范式

    上周，在“2022T-EDGE全球創(chuàng)新大會(huì)暨鈦媒體十年致敬盛典”上，商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛發(fā)表《智能汽車時(shí)代下，商湯絕影駕艙云三位一體的創(chuàng)新范式》主題演講。王曉剛表示，商湯科技智能汽車平臺(tái)品牌“商湯絕影”的定位，是做智能汽車時(shí)代的人工智能（AI）核心供應(yīng)商，同時(shí)為智慧城市提供管理中樞�；�于在感知、決策規(guī)劃控制和AI云三大核心能力方面，絕影打造了駕、艙、云三位一體的產(chǎn)品體系。而且商湯還擁有包括智慧健康、元宇宙、智慧城市、智慧交通等眾多業(yè)務(wù)和場(chǎng)景，這些跨場(chǎng)景智慧產(chǎn)業(yè)生態(tài)的融合，給絕影帶來了創(chuàng)新的新范式。

    截至目前，商湯絕影已經(jīng)與30家車企合作，擁有超過50個(gè)生態(tài)合作伙伴，商湯絕影智能駕駛和智能座艙產(chǎn)品累計(jì)前裝定點(diǎn)數(shù)量超過2700萬臺(tái)。憑借行業(yè)領(lǐng)先的量產(chǎn)成績(jī)與深厚的技術(shù)實(shí)力，在上周舉辦的中國(guó)汽車供應(yīng)鏈峰會(huì)暨第七屆鈴軒獎(jiǎng)盛典上，商湯絕影智能車艙產(chǎn)品及商湯絕影賦能引擎產(chǎn)品分別斬獲2022鈴軒獎(jiǎng)的量產(chǎn)·智能座艙優(yōu)秀獎(jiǎng)、前瞻·工具及工藝優(yōu)秀獎(jiǎng)。經(jīng)歷7載，鈴軒獎(jiǎng)已成為中國(guó)最具權(quán)威的汽車零部件產(chǎn)業(yè)評(píng)獎(jiǎng)之一，是中國(guó)汽車零部件行業(yè)的風(fēng)向標(biāo)、主流汽車廠商重要供應(yīng)鏈選擇的考量標(biāo)準(zhǔn)。

    本文為王曉剛教授在“2022T-EDGE全球創(chuàng)新大會(huì)暨鈦媒體十年致敬盛典”演講內(nèi)容梳理。大家好，我是商湯科技王曉剛。很榮幸有機(jī)會(huì)跟大家分享智能汽車時(shí)代下，商湯絕影駕、艙、云三位一體的創(chuàng)新范式。首先，我們來看一下智能汽車時(shí)代的行業(yè)發(fā)展趨勢(shì)。未來 5~10 年，是 L3、L2++ 智能駕駛高速發(fā)展的黃金窗口期。我們可以看到，2030 年，中國(guó)汽車的銷量預(yù)計(jì)達(dá)到 3,420 萬臺(tái)。其中，具備L2 級(jí)及以上智能駕駛功能的新車滲透率將會(huì)達(dá)到 82%。

    與此同時(shí)，國(guó)家也出臺(tái)了一系列的政策，加速推動(dòng)智能汽車的落地應(yīng)用。例如，國(guó)家自然資源部選擇了北、上、廣等 6 個(gè)城市去推廣智能汽車的高精度地圖的試點(diǎn)，為 L2++ 的自動(dòng)駕駛進(jìn)入城區(qū)打開了窗口；最近，工信部也發(fā)布了《關(guān)于開展智能網(wǎng)聯(lián)汽車準(zhǔn)入和上路通行試點(diǎn)工作的通知（征求意見稿）》；此外，若干地區(qū)也通過立法的方式，去界定 L3 和 L4 自動(dòng)駕駛的責(zé)任邊界，這也為 L3、L4 自動(dòng)駕駛大規(guī)模的量產(chǎn)奠定了法律基礎(chǔ)。  打造駕、艙、云三位一體的產(chǎn)品體系在這樣的大背景下，商湯絕影的定位，是做智能汽車時(shí)代的人工智能（AI）核心供應(yīng)商，同時(shí)為智慧城市提供管理中樞。面向前裝量產(chǎn)，我們?yōu)橹鳈C(jī)廠提供智能座艙、AI云、智能駕駛?cè)�位一體的智能化服務(wù)。同時(shí)，我們還為智慧城市高效地管理智能汽車，提供強(qiáng)大的 AI 云控中樞，提供如市政養(yǎng)護(hù)、智慧交通、公共安全、城市管理等一系列增值服務(wù)。

    經(jīng)過多年積淀，商湯絕影擁有了駕、艙、云三位一體的核心產(chǎn)品。那么在未來，消費(fèi)者駕駛體驗(yàn)會(huì)發(fā)生質(zhì)變的一個(gè)關(guān)鍵點(diǎn)，就是智能駕駛和智能座艙的一個(gè)深入融合，從而大幅降低硬件成本，提升開發(fā)效率，也提升系統(tǒng)的安全性與可靠度。在駕、艙、云三位一體的智能化服務(wù)中，AI 云起到了非常關(guān)鍵的作用。在 L3、L4 級(jí)自動(dòng)駕駛規(guī)�；�落地的同時(shí)，需要一個(gè)強(qiáng)大的云控平臺(tái)作為支撐，能夠?qū)�車輛進(jìn)行監(jiān)管，進(jìn)行責(zé)任的界定；AI 云也可以為智能駕駛?cè)ヌ峁��?shù)據(jù)閉環(huán)，通過數(shù)據(jù)回流，不斷地在線更新自動(dòng)駕駛模型，提升系統(tǒng)的核心體驗(yàn)和安全性；AI 云還為智能座艙提供了“大腦”，提供了很多智能推薦與定制化服務(wù)，讓智能車艙成為我們真正的“第三生活空間”。打造駕、艙、云三位一體的產(chǎn)品體系，需要具有感知、決策規(guī)劃控制和 AI 云三方面的核心能力。首先，商湯基于自建人工智能計(jì)算中心（AIDC）去打造絕影的核心能力。在感知方面，絕影率先將BEVFormer++的感知算法，實(shí)現(xiàn)大規(guī)模量產(chǎn)落地。在2022年Waymo挑戰(zhàn)賽當(dāng)中，絕影也得到了感知算法的冠軍。此外，商湯推動(dòng)的OpenMMLab，是業(yè)內(nèi)最具有影響力的智能感知開源算法框架平臺(tái)，里面有超過200種算法，上千種的預(yù)訓(xùn)練的模型，已經(jīng)有超過100多個(gè)國(guó)家和地區(qū)的開發(fā)者參與和使用OpenMMLab。在GitHub上，它的星數(shù)已經(jīng)超過了PyTorch。同時(shí)，我們也基于AIDC去打造全球最大、擁有超過300億參數(shù)的視覺模型。在 AI 決策方面，商湯聯(lián)合上海人工智能實(shí)驗(yàn)室推出了OpenDILab決策AI平臺(tái)。這也是結(jié)合了學(xué)術(shù)界和工業(yè)界最全面的決策AI平臺(tái)。基于 OpenDILab，我們開發(fā)的 AI 模型 DI-star，在《星際爭(zhēng)霸》 當(dāng)中戰(zhàn)勝了曾經(jīng)的大中華地區(qū)冠軍，跟世界冠軍相比的話也是互有勝負(fù)，這都展示了 OpenDILab 強(qiáng)大的決策 AI 能力。決策 AI 平臺(tái)也可以用到自動(dòng)駕駛當(dāng)中，去實(shí)現(xiàn)規(guī)劃和控制。當(dāng)前的自動(dòng)駕駛，規(guī)劃控制還是大多基于規(guī)則，靠人工去調(diào)整各種參數(shù)，編寫各種規(guī)則。這帶來的問題一個(gè)是駕乘體驗(yàn)不好，另外也沒有辦法通過大數(shù)據(jù)閉環(huán)，自動(dòng)更新迭代智能駕駛中的規(guī)劃控制。因此，我們將決策 AI 運(yùn)用到自動(dòng)駕駛中的規(guī)劃控制，以期打造業(yè)內(nèi)領(lǐng)先的自動(dòng)駕駛解決方案。在自動(dòng)駕駛權(quán)威的排行榜CARLA Leaderboard上，我們亦排名第一。在 AI 云方面，商湯在上海臨港建設(shè)了AIDC，基于強(qiáng)大的AIDC，我們具備了智算、智控雙重能力，為車輛實(shí)時(shí)保駕護(hù)航。  數(shù)據(jù)閉環(huán)能力賦能產(chǎn)品創(chuàng)新高效研發(fā)高速迭代基于 AI 云，我們?yōu)橹悄荞{駛和智能座艙提供了數(shù)據(jù)閉環(huán)的能力，賦能產(chǎn)品的創(chuàng)新研發(fā)及高速迭代。

    從智能汽車終端，我們可以回流大量數(shù)據(jù)，這些數(shù)據(jù)無法通過人工標(biāo)注來完成，無論是成本，還是效率都不能滿足要求。而有了超大視覺模型，就可以自動(dòng)對(duì)這些數(shù)據(jù)進(jìn)行標(biāo)注，標(biāo)注好的數(shù)據(jù)又重新對(duì)車端 AI 模型進(jìn)行訓(xùn)練和更新。那么對(duì)于一些當(dāng)前表現(xiàn)不好的場(chǎng)景，我們也可以依托超大模型，從海量數(shù)據(jù)庫當(dāng)中做Hard Case挖掘，找到類似的場(chǎng)景和樣本，對(duì)模型進(jìn)行有針對(duì)性的訓(xùn)練，從而在較短時(shí)間讓問題得到解決。  加速量產(chǎn)落地：合作車企30+、定點(diǎn)車2700萬+臺(tái)過去幾年里，商湯絕影不斷去拓展自身的生態(tài)圈，去推進(jìn) AI 技術(shù)規(guī)�；�落地。目前，30多個(gè)車廠成為了絕影的合作客戶，我們有超過50個(gè)生態(tài)合作伙伴，定點(diǎn)車的數(shù)量超過2,700萬臺(tái)。絕影的客戶包括了全球品牌、國(guó)內(nèi)品牌，還有造車新勢(shì)力，以及眾多的Tier 1（一級(jí)供應(yīng)商）和知名芯片廠商。接下來，我就智能車艙、智能駕駛和車路協(xié)同三個(gè)方面，將絕影取得的一些成績(jī)做如下闡述。在智能車艙方面，我們目前已累計(jì)發(fā)布了24款功能。2022年有6款創(chuàng)新產(chǎn)品行業(yè)首發(fā)，其中包括如多模交互、哨兵模式、智能救援、Air Touch、AR K歌、智能屏保等功能。同時(shí)，絕影智能座艙項(xiàng)目落地速度也在不斷提升，我們目前有10+個(gè)行業(yè)產(chǎn)品首發(fā)，新產(chǎn)品研發(fā)速度提升50%，國(guó)內(nèi)智能座艙視覺 AI 軟件市場(chǎng)份額絕影排名第一，累計(jì)交付了超過40款車型。其中，僅今年就交付了20+款，交付量同比提升超過170%。在智能駕駛方面，我們以領(lǐng)先的技術(shù)能力，賦能頭部車廠，實(shí)現(xiàn)廣泛落地。近期，我們L2++自動(dòng)駕駛量產(chǎn)方案，會(huì)在頭部車廠和造車新勢(shì)力中實(shí)現(xiàn)量產(chǎn)落地。我們的量產(chǎn)方案包括了如5Radar 7Vision的高速領(lǐng)航方案，當(dāng)然也包括與車廠合作打造，即將到來的5Radar 7Vision 3Lidar的城市領(lǐng)航方案。方案覆蓋了高算力平臺(tái)NVIDIA Orin、Huawei MDC以及中算力Ti TDA4等。我們實(shí)現(xiàn)了業(yè)內(nèi)首個(gè)雙TDA4的方案，用于L2++自動(dòng)駕駛。同時(shí)，我們也給眾多的車廠提供了數(shù)據(jù)脫敏服務(wù)。此外，絕影還將全棧的駕駛能力和領(lǐng)先的感知技術(shù)，賦能重點(diǎn)客戶，給客戶提供數(shù)據(jù)閉環(huán)產(chǎn)品，其中包括標(biāo)注、訓(xùn)練、評(píng)測(cè)、部署等一系列技術(shù)。而且，我們也提供相機(jī)和激光雷達(dá)的感知算法，以及全棧的自動(dòng)駕駛算法，包括了多傳感器融合、預(yù)測(cè)、決策規(guī)劃控制、高精定位及泊車等。這些全棧能力支持了眾多的場(chǎng)景落地，如高速公路的場(chǎng)景，城市復(fù)雜的場(chǎng)景，以及汽車“元宇宙”等。舉一個(gè)例子，這是商湯絕影與廣汽埃安合作的L2++自動(dòng)駕駛解決方案，從廣州到深圳100公里路程里完成一鏡到底視頻的拍攝，全程零接管。在這個(gè)視頻中，我們也可以看到開啟輔助駕駛的車輛自動(dòng)去變道超車、上下匝道，去應(yīng)對(duì)各種復(fù)雜的場(chǎng)景。  AI云助力智能汽車全局調(diào)度，驅(qū)動(dòng)城市感知新范式我們也能看到，自動(dòng)駕駛和智能車艙的駕艙一體融合，是未來智能汽車發(fā)展的核心趨勢(shì)。商湯也是業(yè)內(nèi)少數(shù)同時(shí)擁有這兩方面能力的供應(yīng)商。在產(chǎn)品方面，駕駛和車艙的融合能夠帶來更好的駕乘體驗(yàn)。智能汽車可以自動(dòng)識(shí)別駕駛員的狀態(tài)和意圖，更好的實(shí)現(xiàn)人機(jī)共駕�，F(xiàn)在，駕駛和座艙的智能化功能還是實(shí)現(xiàn)在不同的芯片平臺(tái)、不同的域控制器上。未來，二者可以通過融合、實(shí)現(xiàn)在同一個(gè)芯片平臺(tái)和計(jì)算平臺(tái)上，這樣可以大幅降低硬件的成本，提升開發(fā)效率，提升系統(tǒng)的安全性與可靠度。在車路協(xié)同方面，絕影推出了車、路、云一體化的產(chǎn)品矩陣。其中，商湯自動(dòng)駕駛接駁小巴已經(jīng)在上海、西安、無錫等多個(gè)城市開始常態(tài)化運(yùn)營(yíng)；今年還推出了自動(dòng)駕駛無人清掃車等全新產(chǎn)品�；�于強(qiáng)大計(jì)算平臺(tái)，云控平臺(tái)、邊緣計(jì)算平臺(tái)和車聯(lián)網(wǎng)平臺(tái)，商湯絕影可以將智能汽車終端和各種路側(cè)終端結(jié)合在一起，實(shí)現(xiàn)“軟件定義”的車路協(xié)同，讓其真正得以低成本規(guī)模化鋪開。Al云也在助力智能汽車全局調(diào)度，驅(qū)動(dòng)城市感知新范式。我們將單車智能拓展到車路協(xié)同，能夠把感知范圍提升1000倍。AI云包括了數(shù)據(jù)連接與傳輸，數(shù)據(jù)挖掘，應(yīng)用協(xié)同，中心云、區(qū)域云和邊緣云等，可以實(shí)時(shí)多維感知、虛擬測(cè)試、信息匯總和數(shù)據(jù)閉環(huán)，去支撐路側(cè)的智能感知和車路協(xié)同的云控。

    在此基礎(chǔ)上，智能駕駛與 AI 云的結(jié)合，也可以去推動(dòng)智能汽車和智慧城市的加速落地。在自動(dòng)駕駛方面，單車智能必然有盲區(qū)，那么單車的優(yōu)化決策不等于全局最優(yōu)，基于軟件定義的絕影車路協(xié)同產(chǎn)品矩陣，可以為單車智能規(guī)避99%以上盲區(qū)問題，并基于全局信息制定最優(yōu)決策，為自動(dòng)駕駛?cè)ヌ峁┬侣窂�；在智慧交通領(lǐng)域，目前是存在強(qiáng)中心、重基建、輕應(yīng)用的情況，協(xié)同的效率不高，服務(wù)能力不足，未來，我們通過軟件定義的模式去推動(dòng)車路云高效協(xié)同，推出新應(yīng)用提升運(yùn)行效率與服務(wù)能力，推動(dòng)智慧交通的轉(zhuǎn)型和升級(jí)；在雙智城市維度上，單車作為移動(dòng)感知源未被重視，車輛移動(dòng)數(shù)據(jù)價(jià)值未被充分挖掘，所以未來，我們的智慧城市和智能汽車可以互為基礎(chǔ)設(shè)施，汽車能夠得以真正成為城市數(shù)字化移動(dòng)終端，去全面賦能雙智城市的建設(shè)。  跨場(chǎng)景智慧產(chǎn)業(yè)生態(tài)融合，為商湯絕影帶來創(chuàng)新新范式商湯有眾多的產(chǎn)品線、業(yè)務(wù)線和賦能場(chǎng)景，包括如智慧健康、智能網(wǎng)聯(lián)、元宇宙、智慧城市、智慧交通、移動(dòng)互聯(lián)網(wǎng)、智能娛樂和 AI 教育等。這些跨場(chǎng)景智慧產(chǎn)業(yè)生態(tài)的融合，給絕影帶來了創(chuàng)新的新范式。

    商湯的智能汽車業(yè)務(wù)不是作為單一行業(yè)存在的，而是與其他業(yè)務(wù)板塊緊密融合，成為商湯智慧產(chǎn)業(yè)生態(tài)，在智能汽車上的一個(gè)重要出口。舉例來說，正是因?yàn)檫@些跨界的融合，產(chǎn)生了如智能援助、虛擬助手、云控平臺(tái)、車聯(lián)網(wǎng)等一系列的創(chuàng)新產(chǎn)品。未來，絕影將持續(xù)推動(dòng)跨界融合，提升我們創(chuàng)新的速度，把絕影創(chuàng)新的新范式不斷推廣，為我們的客戶提供駕、艙、云三位一體的智能化服務(wù)。