上周,在“2022T-EDGE全球創新大會暨鈦媒體十年致敬盛典”上,商湯科技聯合創始人、首席科學家、絕影智能汽車事業群總裁王曉剛發表《智能汽車時代下,商湯絕影駕艙云三位一體的創新范式》主題演講。王曉剛表示,商湯科技智能汽車平臺品牌“商湯絕影”的定位,是做智能汽車時代的人工智能(AI)核心供應商,同時為智慧城市提供管理中樞;谠诟兄Q策規劃控制和AI云三大核心能力方面,絕影打造了駕、艙、云三位一體的產品體系。而且商湯還擁有包括智慧健康、元宇宙、智慧城市、智慧交通等眾多業務和場景,這些跨場景智慧產業生態的融合,給絕影帶來了創新的新范式。
截至目前,商湯絕影已經與30家車企合作,擁有超過50個生態合作伙伴,商湯絕影智能駕駛和智能座艙產品累計前裝定點數量超過2700萬臺。憑借行業領先的量產成績與深厚的技術實力,在上周舉辦的中國汽車供應鏈峰會暨第七屆鈴軒獎盛典上,商湯絕影智能車艙產品及商湯絕影賦能引擎產品分別斬獲2022鈴軒獎的量產·智能座艙優秀獎、前瞻·工具及工藝優秀獎。經歷7載,鈴軒獎已成為中國最具權威的汽車零部件產業評獎之一,是中國汽車零部件行業的風向標、主流汽車廠商重要供應鏈選擇的考量標準。
本文為王曉剛教授在“2022T-EDGE全球創新大會暨鈦媒體十年致敬盛典”演講內容梳理。大家好,我是商湯科技王曉剛。很榮幸有機會跟大家分享智能汽車時代下,商湯絕影駕、艙、云三位一體的創新范式。首先,我們來看一下智能汽車時代的行業發展趨勢。未來 5~10 年,是 L3、L2++ 智能駕駛高速發展的黃金窗口期。我們可以看到,2030 年,中國汽車的銷量預計達到 3,420 萬臺。其中,具備L2 級及以上智能駕駛功能的新車滲透率將會達到 82%。
與此同時,國家也出臺了一系列的政策,加速推動智能汽車的落地應用。例如,國家自然資源部選擇了北、上、廣等 6 個城市去推廣智能汽車的高精度地圖的試點,為 L2++ 的自動駕駛進入城區打開了窗口;最近,工信部也發布了《關于開展智能網聯汽車準入和上路通行試點工作的通知(征求意見稿)》;此外,若干地區也通過立法的方式,去界定 L3 和 L4 自動駕駛的責任邊界,這也為 L3、L4 自動駕駛大規模的量產奠定了法律基礎。 打造駕、艙、云三位一體的產品體系在這樣的大背景下,商湯絕影的定位,是做智能汽車時代的人工智能(AI)核心供應商,同時為智慧城市提供管理中樞。面向前裝量產,我們為主機廠提供智能座艙、AI云、智能駕駛三位一體的智能化服務。同時,我們還為智慧城市高效地管理智能汽車,提供強大的 AI 云控中樞,提供如市政養護、智慧交通、公共安全、城市管理等一系列增值服務。
經過多年積淀,商湯絕影擁有了駕、艙、云三位一體的核心產品。那么在未來,消費者駕駛體驗會發生質變的一個關鍵點,就是智能駕駛和智能座艙的一個深入融合,從而大幅降低硬件成本,提升開發效率,也提升系統的安全性與可靠度。在駕、艙、云三位一體的智能化服務中,AI 云起到了非常關鍵的作用。在 L3、L4 級自動駕駛規;涞氐耐瑫r,需要一個強大的云控平臺作為支撐,能夠對車輛進行監管,進行責任的界定;AI 云也可以為智能駕駛去提供數據閉環,通過數據回流,不斷地在線更新自動駕駛模型,提升系統的核心體驗和安全性;AI 云還為智能座艙提供了“大腦”,提供了很多智能推薦與定制化服務,讓智能車艙成為我們真正的“第三生活空間”。打造駕、艙、云三位一體的產品體系,需要具有感知、決策規劃控制和 AI 云三方面的核心能力。首先,商湯基于自建人工智能計算中心(AIDC)去打造絕影的核心能力。在感知方面,絕影率先將BEVFormer++的感知算法,實現大規模量產落地。在2022年Waymo挑戰賽當中,絕影也得到了感知算法的冠軍。此外,商湯推動的OpenMMLab,是業內最具有影響力的智能感知開源算法框架平臺,里面有超過200種算法,上千種的預訓練的模型,已經有超過100多個國家和地區的開發者參與和使用OpenMMLab。在GitHub上,它的星數已經超過了PyTorch。同時,我們也基于AIDC去打造全球最大、擁有超過300億參數的視覺模型。在 AI 決策方面,商湯聯合上海人工智能實驗室推出了OpenDILab決策AI平臺。這也是結合了學術界和工業界最全面的決策AI平臺。基于 OpenDILab,我們開發的 AI 模型 DI-star,在《星際爭霸》 當中戰勝了曾經的大中華地區冠軍,跟世界冠軍相比的話也是互有勝負,這都展示了 OpenDILab 強大的決策 AI 能力。決策 AI 平臺也可以用到自動駕駛當中,去實現規劃和控制。當前的自動駕駛,規劃控制還是大多基于規則,靠人工去調整各種參數,編寫各種規則。這帶來的問題一個是駕乘體驗不好,另外也沒有辦法通過大數據閉環,自動更新迭代智能駕駛中的規劃控制。因此,我們將決策 AI 運用到自動駕駛中的規劃控制,以期打造業內領先的自動駕駛解決方案。在自動駕駛權威的排行榜CARLA Leaderboard上,我們亦排名第一。在 AI 云方面,商湯在上海臨港建設了AIDC,基于強大的AIDC,我們具備了智算、智控雙重能力,為車輛實時保駕護航。 數據閉環能力賦能產品創新高效研發高速迭代基于 AI 云,我們為智能駕駛和智能座艙提供了數據閉環的能力,賦能產品的創新研發及高速迭代。
從智能汽車終端,我們可以回流大量數據,這些數據無法通過人工標注來完成,無論是成本,還是效率都不能滿足要求。而有了超大視覺模型,就可以自動對這些數據進行標注,標注好的數據又重新對車端 AI 模型進行訓練和更新。那么對于一些當前表現不好的場景,我們也可以依托超大模型,從海量數據庫當中做Hard Case挖掘,找到類似的場景和樣本,對模型進行有針對性的訓練,從而在較短時間讓問題得到解決。 加速量產落地:合作車企30+、定點車2700萬+臺過去幾年里,商湯絕影不斷去拓展自身的生態圈,去推進 AI 技術規;涞亍D壳埃30多個車廠成為了絕影的合作客戶,我們有超過50個生態合作伙伴,定點車的數量超過2,700萬臺。絕影的客戶包括了全球品牌、國內品牌,還有造車新勢力,以及眾多的Tier 1(一級供應商)和知名芯片廠商。接下來,我就智能車艙、智能駕駛和車路協同三個方面,將絕影取得的一些成績做如下闡述。在智能車艙方面,我們目前已累計發布了24款功能。2022年有6款創新產品行業首發,其中包括如多模交互、哨兵模式、智能救援、Air Touch、AR K歌、智能屏保等功能。同時,絕影智能座艙項目落地速度也在不斷提升,我們目前有10+個行業產品首發,新產品研發速度提升50%,國內智能座艙視覺 AI 軟件市場份額絕影排名第一,累計交付了超過40款車型。其中,僅今年就交付了20+款,交付量同比提升超過170%。在智能駕駛方面,我們以領先的技術能力,賦能頭部車廠,實現廣泛落地。近期,我們L2++自動駕駛量產方案,會在頭部車廠和造車新勢力中實現量產落地。我們的量產方案包括了如5Radar 7Vision的高速領航方案,當然也包括與車廠合作打造,即將到來的5Radar 7Vision 3Lidar的城市領航方案。方案覆蓋了高算力平臺NVIDIA Orin、Huawei MDC以及中算力Ti TDA4等。我們實現了業內首個雙TDA4的方案,用于L2++自動駕駛。同時,我們也給眾多的車廠提供了數據脫敏服務。此外,絕影還將全棧的駕駛能力和領先的感知技術,賦能重點客戶,給客戶提供數據閉環產品,其中包括標注、訓練、評測、部署等一系列技術。而且,我們也提供相機和激光雷達的感知算法,以及全棧的自動駕駛算法,包括了多傳感器融合、預測、決策規劃控制、高精定位及泊車等。這些全棧能力支持了眾多的場景落地,如高速公路的場景,城市復雜的場景,以及汽車“元宇宙”等。舉一個例子,這是商湯絕影與廣汽埃安合作的L2++自動駕駛解決方案,從廣州到深圳100公里路程里完成一鏡到底視頻的拍攝,全程零接管。在這個視頻中,我們也可以看到開啟輔助駕駛的車輛自動去變道超車、上下匝道,去應對各種復雜的場景。 AI云助力智能汽車全局調度,驅動城市感知新范式我們也能看到,自動駕駛和智能車艙的駕艙一體融合,是未來智能汽車發展的核心趨勢。商湯也是業內少數同時擁有這兩方面能力的供應商。在產品方面,駕駛和車艙的融合能夠帶來更好的駕乘體驗。智能汽車可以自動識別駕駛員的狀態和意圖,更好的實現人機共駕,F在,駕駛和座艙的智能化功能還是實現在不同的芯片平臺、不同的域控制器上。未來,二者可以通過融合、實現在同一個芯片平臺和計算平臺上,這樣可以大幅降低硬件的成本,提升開發效率,提升系統的安全性與可靠度。在車路協同方面,絕影推出了車、路、云一體化的產品矩陣。其中,商湯自動駕駛接駁小巴已經在上海、西安、無錫等多個城市開始常態化運營;今年還推出了自動駕駛無人清掃車等全新產品;趶姶笥嬎闫脚_,云控平臺、邊緣計算平臺和車聯網平臺,商湯絕影可以將智能汽車終端和各種路側終端結合在一起,實現“軟件定義”的車路協同,讓其真正得以低成本規模化鋪開。Al云也在助力智能汽車全局調度,驅動城市感知新范式。我們將單車智能拓展到車路協同,能夠把感知范圍提升1000倍。AI云包括了數據連接與傳輸,數據挖掘,應用協同,中心云、區域云和邊緣云等,可以實時多維感知、虛擬測試、信息匯總和數據閉環,去支撐路側的智能感知和車路協同的云控。
在此基礎上,智能駕駛與 AI 云的結合,也可以去推動智能汽車和智慧城市的加速落地。在自動駕駛方面,單車智能必然有盲區,那么單車的優化決策不等于全局最優,基于軟件定義的絕影車路協同產品矩陣,可以為單車智能規避99%以上盲區問題,并基于全局信息制定最優決策,為自動駕駛去提供新路徑;在智慧交通領域,目前是存在強中心、重基建、輕應用的情況,協同的效率不高,服務能力不足,未來,我們通過軟件定義的模式去推動車路云高效協同,推出新應用提升運行效率與服務能力,推動智慧交通的轉型和升級;在雙智城市維度上,單車作為移動感知源未被重視,車輛移動數據價值未被充分挖掘,所以未來,我們的智慧城市和智能汽車可以互為基礎設施,汽車能夠得以真正成為城市數字化移動終端,去全面賦能雙智城市的建設。 跨場景智慧產業生態融合,為商湯絕影帶來創新新范式商湯有眾多的產品線、業務線和賦能場景,包括如智慧健康、智能網聯、元宇宙、智慧城市、智慧交通、移動互聯網、智能娛樂和 AI 教育等。這些跨場景智慧產業生態的融合,給絕影帶來了創新的新范式。
商湯的智能汽車業務不是作為單一行業存在的,而是與其他業務板塊緊密融合,成為商湯智慧產業生態,在智能汽車上的一個重要出口。舉例來說,正是因為這些跨界的融合,產生了如智能援助、虛擬助手、云控平臺、車聯網等一系列的創新產品。未來,絕影將持續推動跨界融合,提升我們創新的速度,把絕影創新的新范式不斷推廣,為我們的客戶提供駕、艙、云三位一體的智能化服務。