2025年4月23日，中國(guó)上海——第二十一屆上海國(guó)際汽車工業(yè)展覽會(huì)(下稱“2025上海車展”)今日隆重開幕，商湯絕影攜系列生成式AI汽車創(chuàng)新產(chǎn)品亮相。
作為最專注于汽車行業(yè)的AI公司，商湯絕影全面展示了生成式智駕R-UniAD技術(shù)方案，并發(fā)布近實(shí)時(shí)在線交互的4D世界模型“絕影開悟2.0”，打造智能駕駛的新路標(biāo)。同時(shí)，絕影厚積薄發(fā)，全力推進(jìn)輔助駕駛方案的量產(chǎn)交付。
面向智能座艙，商湯絕影行業(yè)首發(fā)專為車載AIOS打造的AI內(nèi)核“絕影千機(jī)”，助力車企打造下一代AIOS，“家庭新成員”New Member全新升級(jí)，車展現(xiàn)場(chǎng)可以沉浸式體驗(yàn)New Member多模態(tài)識(shí)人、深度思考、免喚醒多人多輪對(duì)話等功能。此外，商湯絕影的健康管家、安全衛(wèi)士和3D交互等AI座艙創(chuàng)新產(chǎn)品也相繼亮相，全場(chǎng)景守護(hù)出行體驗(yàn)。
商湯絕影CEO、商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家王曉剛表示：“真正的AI汽車是將生成式AI深度融入智駕和座艙，既讓輔助駕駛安全變得更有確定性，也要讓每一輛車擁有‘有趣的靈魂’，成為真正懂你、愛你、守護(hù)你的家庭新成員。絕影也希望能和更多合作伙伴攜手前行，共創(chuàng)AI汽車的新進(jìn)程。”
全面展示以VLAR為核心的生成式智駕R-UniAD，商湯絕影打造智能駕駛的新路標(biāo)
算法、算力和數(shù)據(jù)三者共同推動(dòng)著人工智能技術(shù)的螺旋式上升和進(jìn)步，隨著強(qiáng)化學(xué)習(xí)等算法引入到大模型訓(xùn)練的思路得到驗(yàn)證，新的尺度定律正在開啟，數(shù)據(jù)價(jià)值被進(jìn)一步深入挖掘，模型能力天花板被打開。與此同時(shí)，智能駕駛范式也正在加速演進(jìn)。
2025年2月，商湯絕影發(fā)布行業(yè)首個(gè)與世界模型協(xié)同交互的端到端技術(shù)路線R-UniAD，通過世界模型生成在線交互的仿真環(huán)境，以此進(jìn)行端到端模型的強(qiáng)化學(xué)習(xí)訓(xùn)練，以打破數(shù)據(jù)瓶頸，提升系統(tǒng)性能上限。本屆上海車展上，商湯絕影全面展示了R-UniAD技術(shù)方案，基于世界模型和強(qiáng)化學(xué)習(xí)兩大核心技術(shù)，構(gòu)建集“視覺-語(yǔ)言-行動(dòng)-強(qiáng)化學(xué)習(xí)”于一體的VLAR技術(shù)架構(gòu)，實(shí)現(xiàn)生成式智駕的核心突破。
施工占道場(chǎng)景是輔助駕駛領(lǐng)域的棘手難題，也是交通事故頻發(fā)的重要場(chǎng)景。商湯絕影現(xiàn)場(chǎng)演示了針對(duì)“施工占道剎?！眻?chǎng)景，R-UniAD如何依托“VLAR”增強(qiáng)模型能力。
首先，以“施工占道剎?！甭窚y(cè)視頻作為輸入，R-UniAD基于“絕影開悟”世界進(jìn)行模型4D仿真復(fù)現(xiàn)，然后端到端模型生成該場(chǎng)景下各種可能駕駛策略，并與世界模型生成的環(huán)境交互，反復(fù)強(qiáng)化學(xué)習(xí)中找到最優(yōu)路徑，能預(yù)判施工占道，絲滑變道繞行。經(jīng)過泛化訓(xùn)練后，遇到類似場(chǎng)景，端到端模型也能及時(shí)變道，并顯著提升對(duì)此類施工場(chǎng)景的泛化交互能力。
生成式R-UniAD突破了現(xiàn)階段端到端范式下數(shù)據(jù)、安全和性能的三大瓶頸，將實(shí)采場(chǎng)景數(shù)據(jù)的需求降低兩個(gè)數(shù)量級(jí)；同時(shí)，基于強(qiáng)化學(xué)習(xí)算法，模型充分探索多元場(chǎng)景的安全邊界；最終，R-UniAD將能夠?qū)崿F(xiàn)遠(yuǎn)超人類的駕駛能力，打造智能駕駛的新路標(biāo)。
“絕影開悟”世界模型2.0，決勝智駕戰(zhàn)場(chǎng)的重磅武器
世界模型是生成式智駕的基石所在。2024年，在2024年11月“絕影實(shí)力AI DAY”上，商湯絕影發(fā)布了行業(yè)標(biāo)桿級(jí)別的“絕影開悟”世界模型，并已經(jīng)應(yīng)用于真值數(shù)據(jù)的生產(chǎn)。
去年“絕影開悟”世界模型主要聚焦2D視頻生成技術(shù)的打磨，今年上海車展，“絕影開悟”升級(jí)為2.0版本，進(jìn)化為近實(shí)時(shí)在線交互的4D世界模型，能夠?qū)崿F(xiàn)“4D空間自由交互”，成為商湯絕影決勝智駕戰(zhàn)場(chǎng)的重磅武器。
“絕影開悟2.0”具備三大能力，首先是“面向量產(chǎn)的數(shù)據(jù)生成”，它具有多樣性場(chǎng)景的可控生成的能力，能一鍵生成極端高風(fēng)險(xiǎn)場(chǎng)景，為模型訓(xùn)練提供了海量且豐富的訓(xùn)練數(shù)據(jù)。
其次它能夠?qū)崿F(xiàn)“復(fù)雜場(chǎng)景自由復(fù)現(xiàn)”，可以根據(jù)不同的需求，隨心所欲地修改和調(diào)整場(chǎng)景中的各種要素，改變道路的布局、車輛的速度和類型，助力重構(gòu)仿真測(cè)試場(chǎng)景。
最后，“絕影開悟2.0”具備近實(shí)時(shí)交互能力，比行業(yè) SOTA 提升 5 倍之多，讓仿真訓(xùn)練過程更加高效和逼真，車輛的決策和反饋能夠幾乎在瞬間得到響應(yīng)；同時(shí)感知結(jié)果接近真實(shí)精標(biāo)數(shù)據(jù)98%，能避免因數(shù)據(jù)風(fēng)格差異帶來的 Sim-to-Real 遷移時(shí)能力退化問題，為端到端模型打造“云端虛擬訓(xùn)練場(chǎng)”。
行業(yè)首發(fā)AI內(nèi)核“絕影千機(jī)”，商湯絕影助力車企打造下一代AIOS
生成式AI不僅帶來了智駕新范式，同時(shí)也在深度融入智能座艙。商湯絕影重磅發(fā)布行業(yè)首個(gè)專為車載AIOS打造的AI內(nèi)核“絕影千機(jī)”，助力車企打造下一代AIOS。最核心的三大技術(shù)包括MOE多模態(tài)大模型、類人記憶框架以及原生智能體框架。同時(shí)，AI 基礎(chǔ)系統(tǒng)模塊、AIOS 工具鏈和生成式 UI等外圍技術(shù)，為三大核心模塊提供支持與交互。
依托于“日日新SenseNova V6”基模型，商湯絕影構(gòu)建了覆蓋 0.1B 至 70B汽車垂類模型矩陣，模型首字延遲小于 300ms，吐字速度高達(dá) 47 Tokens/s，性能超越DeepSeek，還能在快慢思考之間自如切換，契合每一種場(chǎng)景需求。
同時(shí)，具備類人情感的座艙系統(tǒng)，離不開記憶。商湯絕影構(gòu)建了業(yè)內(nèi)首個(gè)端側(cè)類人記憶框架，賦予AIOS真正的認(rèn)知力與成長(zhǎng)性，每一次交互都讓它更懂用戶。
為了便于打造智能體生態(tài)，絕影構(gòu)建了業(yè)內(nèi)首個(gè)支持 MCP 協(xié)議的端側(cè)原生智能體框架。它具備強(qiáng)大的自主規(guī)劃能力，可進(jìn)行多步的精準(zhǔn)規(guī)劃和執(zhí)行。它支持 MCP 規(guī)范，能快速接入各類生態(tài)服務(wù)和工具能力，目前已集成 100+ 智能體與 1000+ API。這個(gè)框架還支持多智能體協(xié)調(diào)機(jī)制，能夠?qū)崿F(xiàn)并發(fā)、串行及混合模式下的高效協(xié)同，整體性能提升超過 30%。
New Member全新升級(jí)，車展可沉浸式體驗(yàn)實(shí)車，展現(xiàn)“有趣靈魂”該有的模樣
商湯絕影去年發(fā)布了“A New Member For U”(你的家庭新成員)，讓每一輛車擁有“有趣的靈魂”。今年上海車展，New Member全新升級(jí)，還能在車展現(xiàn)場(chǎng)上車進(jìn)行沉浸式體驗(yàn)。
首先New Member擁有了多模態(tài)識(shí)人能力，不需要用戶專門進(jìn)行注冊(cè)，它在座艙多人交互的過程推測(cè)出每個(gè)人的名字，與相貌的結(jié)合，人物之間的關(guān)系。New member不僅“認(rèn)識(shí)你”，還能“理解你”，在和用戶長(zhǎng)期的互動(dòng)過程當(dāng)中，它不但能夠記住興趣愛好，還能記住生活的點(diǎn)滴，產(chǎn)生共情，從而更貼心地進(jìn)行互動(dòng)。
同時(shí)，它還具備深度思考的能力，表達(dá)會(huì)更加生動(dòng)有趣。同時(shí)，當(dāng)用戶提出需求時(shí)，小影不是被動(dòng)響應(yīng)，而是會(huì)結(jié)合記憶與場(chǎng)景，主動(dòng)分析疲憊情緒、家庭需求甚至天氣變化進(jìn)行綜合性的深度思考，然后給出最合適的方案，成為懂你、會(huì)揣摩的“聰明搭子”。
最后，New Member在業(yè)內(nèi)首次實(shí)現(xiàn)免喚醒的多人多輪對(duì)話能力。之前行業(yè)做到的是大模型一對(duì)一的交流，如今New Member未被喚醒也能關(guān)注并理解座艙內(nèi)成員間的對(duì)話，并能隨時(shí)參與到對(duì)話當(dāng)中，做到“不過度打擾，但時(shí)刻陪伴”，展現(xiàn)“有趣靈魂”該有的模樣。
在現(xiàn)場(chǎng)的演示視頻中，車內(nèi)四人正在討論去雨崩徒步需要的裝備，New Member會(huì)主動(dòng)搭話，稱贊那位提示大家注意低溫要帶羽絨服的朋友；在查漏補(bǔ)缺攜帶物品的同時(shí)，它記得車主喜歡攝影，主動(dòng)提醒攜帶單反和三腳架，可以拍攝山頂星空。
另一個(gè)場(chǎng)景中，四個(gè)同事下班后臨時(shí)決定一起聚餐，但四個(gè)人住的地方分散在上海各區(qū)，彼此距離較遠(yuǎn)，同時(shí)飲食偏好也有差異，New Member能夠聽懂每個(gè)人的潛臺(tái)詞，綜合回家的距離、口味訴求，就像一個(gè)“規(guī)劃大師”，給出了大家都能接受的推薦餐廳。
New Member還能提供有溫度的情感互動(dòng)和陪伴。一對(duì)情侶想去南京旅游，但因?yàn)槭情_車還是乘坐高鐵出行產(chǎn)生了分歧和爭(zhēng)論，后來女生質(zhì)問“男生是不是不愛她了”，New Member能理解語(yǔ)言背后的情緒，對(duì)女生進(jìn)行安撫，并提供建議和幫助，給予情感支持。
AI座艙創(chuàng)新產(chǎn)品矩陣，全場(chǎng)景守護(hù)出行體驗(yàn)
基于語(yǔ)言大模型、多模態(tài)大模型、文生圖大模型和“大醫(yī)”醫(yī)療大模型等組成的 AI 大模型體系，商湯絕影構(gòu)建了健康管家、安全衛(wèi)士、3D交互等AI座艙創(chuàng)新產(chǎn)品矩陣。
商湯絕影已量產(chǎn)上車行業(yè)首個(gè)醫(yī)療AI大模型產(chǎn)品“旅醫(yī)”。依托行業(yè)領(lǐng)先的醫(yī)療檢測(cè)模型和「大醫(yī)」大模型，絕影對(duì)用戶進(jìn)行對(duì)標(biāo)醫(yī)療級(jí)的健康監(jiān)測(cè)，打造用戶專屬健康檔案，針對(duì)性推送健康科普內(nèi)容，打造全出行周期的健康管家，同時(shí)，還將通過整合第三方線上醫(yī)療服務(wù)的能力，貫通車艙醫(yī)療生態(tài)圈，助力“旅醫(yī)”成長(zhǎng)為用戶的全場(chǎng)景私人醫(yī)生。
安全始終是智能汽車的基石。商湯絕影將展示行業(yè)領(lǐng)先的DMS/OMS、多模態(tài)哨兵等多項(xiàng)安全產(chǎn)品，守護(hù)全場(chǎng)景的生命與財(cái)產(chǎn)安全。本屆上海車展，絕影發(fā)布“駕駛失能”產(chǎn)品，通過傳感器檢測(cè)駕駛員面部、肢體姿態(tài)，結(jié)合車輛操控行為和呼氣酒精含量，實(shí)時(shí)判斷其狀態(tài)并及時(shí)提醒，一旦駕駛員失去駕駛能力，自動(dòng)安全停車并撥打求救電話，保障出行安全。
得益于絕影車艙量產(chǎn)數(shù)據(jù)積累與人眼3D重建算法突破，商湯絕影3D視線交互算法技術(shù)達(dá)到新高度。艙內(nèi)3D視線結(jié)合車外前視相機(jī)，能夠辨識(shí)人眼所關(guān)注的人、車、建筑、二維碼、花草樹木等目標(biāo)，真正實(shí)現(xiàn)“視線所及，所見即所得”。
3D視線與輔助駕駛深度融合，帶來更安全的駕乘體驗(yàn)。結(jié)合對(duì)艙外的人、車及其他障礙物的檢測(cè)，3D視線可實(shí)時(shí)識(shí)別潛在風(fēng)險(xiǎn)。如當(dāng)前方有行人突然奔跑欲橫穿馬路，而駕駛員視線未關(guān)注該方向，系統(tǒng)便會(huì)主動(dòng)預(yù)警，提醒注意行人穿越風(fēng)險(xiǎn)。同時(shí)，AEB等安全功能的觸發(fā)靈敏度可根據(jù)3D視線智能調(diào)整，若駕駛員持續(xù)注視接近的障礙物，系統(tǒng)會(huì)降低預(yù)警頻率，甚至無需提醒；反之，若駕駛員視線偏離，系統(tǒng)則保持正常靈敏度，及時(shí)響應(yīng)。
打通艙內(nèi)外的3D視線還能讓用車體驗(yàn)更流暢。以離開停車場(chǎng)為例，現(xiàn)在用戶要拿出手機(jī)掃碼，流程長(zhǎng)、體驗(yàn)差。通過3D視線結(jié)合車外攝像頭，用戶只需注視出口處二維碼的同時(shí)說“我要繳費(fèi)”，系統(tǒng)即可自動(dòng)完成掃碼支付，實(shí)現(xiàn)更便捷的無感通行。
加速推進(jìn)量產(chǎn)交付，與合作伙伴攜手共創(chuàng)AI新進(jìn)程
商湯絕影的生成式AI技術(shù)和產(chǎn)品持續(xù)創(chuàng)新，商業(yè)化落地也全面開花，量產(chǎn)交付正在加速推進(jìn)。
在“絕影2025上海車展發(fā)布會(huì)”上，東風(fēng)汽車集團(tuán)研發(fā)總院智能化技術(shù)首席總工程師張振林透露，他們和絕影團(tuán)隊(duì)正在攜手推動(dòng)UniAD一段式端到端方案的量產(chǎn)落地，“除了端到端的合作，未來東風(fēng)汽車也將持續(xù)加大在智能化領(lǐng)域的研發(fā)投入，與絕影在開悟世界模型、DriveAGI等方面展開深度合作。”
在輔助駕駛領(lǐng)域，商湯絕影的量產(chǎn)方案目前已合作4家車企，上車7款車型，2025年更將厚積薄發(fā)，全力推進(jìn)輔助駕駛方案的量產(chǎn)交付。今年3月底，絕影和廣汽聯(lián)合打造的行業(yè)首批基于地平線征程?6M的輔助駕駛方案正式量產(chǎn)上市。今年還有更多基于地平線征程?6打造的輔助駕駛方案量產(chǎn)落地奇瑞等眾多車企伙伴，在英偉達(dá)DIRVE AGX Thor平臺(tái)部署的絕影UniAD一段式端到端量產(chǎn)方案也將于2025年第四季度量產(chǎn)交付東風(fēng)汽車。
不止如此，絕影基于地平線征程?6打造的量產(chǎn)方案得到中汽研的認(rèn)證，是首個(gè)獲得中汽研《CATARC 標(biāo)志認(rèn)證實(shí)施規(guī)則–“征程之星”領(lǐng)航輔助駕駛認(rèn)證》的輔助駕駛產(chǎn)品。
此外，本次上海車展期間，無論是基于地平線征程?6打造的高速輔助駕駛、城區(qū)輔助駕駛，還是一段式端到端量產(chǎn)方案的城區(qū)泛化，商湯絕影都在展館外開放了實(shí)車體驗(yàn)。
作為中國(guó)智能座艙AI軟件的領(lǐng)頭羊，商湯絕影的座艙 AI 軟件市場(chǎng)份額已連續(xù)5年位列行業(yè)第一，并打造了超過20個(gè)行業(yè)首發(fā)的智能座艙產(chǎn)品與功能。2025年初，商湯絕影聯(lián)手知名車企伙伴，實(shí)現(xiàn)行業(yè)首個(gè)原生流式多模態(tài)座艙產(chǎn)品量產(chǎn)上車。行業(yè)首個(gè)醫(yī)療AI大模型產(chǎn)品“旅醫(yī)”于2025年3月正式量產(chǎn)上車 星途攬?jiān)? （ 參數(shù) 丨 圖片 ），為用戶打造全場(chǎng)景的健康管家。
截至2024年底，商湯絕影已與超30家國(guó)內(nèi)外車企達(dá)成合作，覆蓋130余款車型，量產(chǎn)交付累計(jì)突破360萬(wàn)輛。
隨著生成式AI深度融入并重構(gòu)智能汽車產(chǎn)業(yè)，作為加速智能汽車駛?cè)階GI時(shí)代的戰(zhàn)略合作伙伴，商湯絕影致力于打造“共生共創(chuàng)共享”合作新模式，在基礎(chǔ)設(shè)施、大模型能力和數(shù)據(jù)閉環(huán)等領(lǐng)域開展深度合作的基礎(chǔ)上，雙方進(jìn)一步挖掘生成式AI在智能駕駛和智能座艙領(lǐng)域的潛力，共創(chuàng)AI新進(jìn)程。
注：本文所提及的“智駕”、“智能駕駛”等，指L2級(jí)輔助駕駛。
熱門跟貼