當(dāng)前的車載操作系統(tǒng)不夠“聰明”，無法感知環(huán)境變化和用戶意圖，人車交互仍在“指令-執(zhí)行”，缺少主動(dòng)交互能力，也沒有跨場(chǎng)景的數(shù)據(jù)整合和記憶能力，不具備數(shù)據(jù)驅(qū)動(dòng)的自主學(xué)習(xí)和自我成長(zhǎng)的能力。傳統(tǒng)的車載OS也缺乏針對(duì)智能體(Agent)的開發(fā)和運(yùn)行框架，模型服務(wù)接口標(biāo)準(zhǔn)和Agent協(xié)同工作標(biāo)準(zhǔn)，無法適應(yīng)大模型時(shí)代的技術(shù)進(jìn)步。
4月23日，商湯絕影在上海車展上重磅發(fā)布行業(yè)首個(gè)專為車載AIOS打造的AI內(nèi)核“絕影千機(jī)”，助力車企打造下一代AIOS。
商湯絕影行業(yè)首發(fā)AI內(nèi)核“絕影千機(jī)”
通過整合語言、多模態(tài)等AI大模型能力、類人記憶框架、原生智能體框架等創(chuàng)新技術(shù)，“絕影千機(jī)”AI內(nèi)核，深度融入并重構(gòu)傳統(tǒng)車載操作系統(tǒng)，使智能汽車具備自主感知、動(dòng)態(tài)學(xué)習(xí)、主動(dòng)決策與實(shí)時(shí)優(yōu)化的能力。
基于全新的AI內(nèi)核，New Member實(shí)現(xiàn)突破性技術(shù)升級(jí)，能夠多模態(tài)識(shí)人、深度思考，還能免喚醒參與多人多輪的對(duì)話，展現(xiàn)出“有趣靈魂”該有的模樣。
車企打造下一代AIOS，需要全新的AI內(nèi)核
當(dāng)大模型上車成為行業(yè)共識(shí)，越來越多的汽車公司也意識(shí)到，只是簡(jiǎn)單把AI大模型或者智能體應(yīng)用(Agent)接入車機(jī)并不能真正實(shí)現(xiàn)智能座艙體驗(yàn)的跨越式提升，生成式AI深度融入智能座艙需要體系化革新，從操作系統(tǒng)到交互體驗(yàn)，再到智能體應(yīng)用進(jìn)行全方位升級(jí)。
車企需要打造下一代座艙AIOS，來領(lǐng)航汽車智能化的新航向。AIOS是一種以人工智能為核心驅(qū)動(dòng)力的新型操作系統(tǒng)，它通過深度整合AI模型，從底層架構(gòu)到交互邏輯全面重構(gòu)傳統(tǒng)操作系統(tǒng)。
以AI內(nèi)核為核心樞紐的AIOS新范式
為此，商湯絕影行業(yè)首發(fā)專為車載AIOS打造的AI內(nèi)核“絕影千機(jī)”，它可以與車企OS、應(yīng)用生態(tài)深度融合，助力車企打造AIOS生態(tài)體系，推動(dòng)智能座艙全面進(jìn)化。
“絕影千機(jī)”最核心的三大技術(shù)模塊是MOE多模態(tài)大模型、類人記憶框架以及原生智能體框架。同時(shí)， AI 運(yùn)行提供底層支撐的AI 基礎(chǔ)系統(tǒng)模塊，助力系統(tǒng)的開發(fā)與優(yōu)化AIOS 工具鏈，以及個(gè)性化交互的生成式 UI等外圍技術(shù)，為三大核心模塊提供支持與交互。
商湯絕影MOE多模態(tài)大模型，完美契合汽車垂類場(chǎng)景
商湯絕影行業(yè)領(lǐng)先的大模型能力為“絕影千機(jī)”提供了強(qiáng)有力的底層技術(shù)支撐。4月上旬，商湯科技發(fā)布行業(yè)領(lǐng)先的多模態(tài)大模型“日日新V6”，多模態(tài)推理能力國(guó)內(nèi)第一。在此基礎(chǔ)上，商湯絕影打造了更加契合汽車垂類場(chǎng)景的MOE多模態(tài)大模型。
絕影的汽車垂類端云模型矩陣覆蓋 0.1B 至 70B 的參數(shù)范圍，支持模型的靈活擴(kuò)展，可以滿足適配不同算力芯片的需求，為不同場(chǎng)景、不同客戶需求定制最優(yōu)解。
從性能上來看，商湯絕影的模型首字延遲小于 300ms，吐字速度高達(dá) 47 Tokens/s，相比DeepSeek的 480ms首字延遲和27 Tokens/s吐字速度，性能更加強(qiáng)大。
不僅如此，車端場(chǎng)景千變?nèi)f化，時(shí)效要求各不相同，絕影的模型能在快慢思考之間，自如切換節(jié)奏，該快時(shí)極速響應(yīng)，該慢時(shí)深度思考，真正契合每一種場(chǎng)景需求。
類人記憶，讓AIOS越用越懂你
強(qiáng)大的模型能力之外，類人情感座艙系統(tǒng)，離不開記憶。商湯絕影模擬人類認(rèn)知機(jī)制，基于“瞬時(shí)記憶—場(chǎng)景記憶—長(zhǎng)期記憶”結(jié)構(gòu)，打造了端側(cè)類人記憶框架。
絕影的類人記憶框架會(huì)感知和理解， 通過對(duì)人、車、物、環(huán)境四大類數(shù)據(jù)的實(shí)時(shí)融合，能夠敏銳地感知車內(nèi)外環(huán)境的每一次變化，動(dòng)態(tài)構(gòu)建對(duì)當(dāng)前場(chǎng)景的理解。
它還會(huì)總結(jié)和反思，會(huì)在智能體與用戶的每一次交互中，記住用戶的需求和反饋，持續(xù)對(duì)用戶的行為模式與偏好深度總結(jié)和反思，沉淀出屬于用戶的專屬經(jīng)驗(yàn)和知識(shí)。
更重要的是，它會(huì)保密和守護(hù)。在絕影的類人記憶框架里，用戶的私密記憶，永遠(yuǎn)只屬于個(gè)人，任何人都無法越權(quán)訪問，不僅能記憶，更懂得保密。
類人記憶賦予AIOS真正的認(rèn)知力與成長(zhǎng)性，每一次交互都讓它更懂用戶。
業(yè)內(nèi)首個(gè)支持MCP協(xié)議的端側(cè)原生智能體框架，助力打造全新汽車智能體生態(tài)
為了方便在全新的AIOS上打造智能體生態(tài)，商湯絕影在AI內(nèi)核中構(gòu)建了業(yè)內(nèi)首個(gè)支持 MCP 協(xié)議的端側(cè)原生智能體框架，通過建立統(tǒng)一的通信標(biāo)準(zhǔn)與動(dòng)態(tài)資源調(diào)度機(jī)制，解決智能體開發(fā)過程中工具調(diào)用復(fù)雜、數(shù)據(jù)獲取困難以及多源信息整合的難題。
商湯絕影的原生智能體框架具備強(qiáng)大的自主規(guī)劃能力，能夠基于用戶的需求和各類信息，自主理解用戶意圖，最多可以進(jìn)行10步的精準(zhǔn)規(guī)劃和執(zhí)行，提供貼心的解決方案。
它還支持 MCP 規(guī)范，能夠快速接入各類生態(tài)服務(wù)和工具能力。目前已集成 100多個(gè)智能體與超過1000個(gè) API，覆蓋如高德地圖、百度地圖等主流服務(wù)，可為用戶提供豐富的出行場(chǎng)景服務(wù)與內(nèi)容。
同時(shí)，面向未來車機(jī)形態(tài)，多智能體分工協(xié)作將成為主流趨勢(shì)。我們的框架原生支持多智能體協(xié)調(diào)機(jī)制，能夠?qū)崿F(xiàn)并發(fā)、串行及混合模式下的高效協(xié)同，有效提升任務(wù)執(zhí)行效率，整體性能提升超過 30%。
New Member突破性技術(shù)升級(jí)，展現(xiàn)“有趣靈魂”該有的模樣
“絕影千機(jī)”AI內(nèi)核的能力外顯就是一種全新的座艙交互體驗(yàn)。2024年11月，商湯絕影發(fā)布了“A New Member For U”(你的家庭新成員)，能夠察言觀色、無時(shí)不在、與你心有靈犀，讓每一輛車擁有“有趣的靈魂”。今年上海車展，在全新AI內(nèi)核的支撐下，New Member實(shí)現(xiàn)了突破性技術(shù)升級(jí)，還能在車展現(xiàn)場(chǎng)上車進(jìn)行沉浸式體驗(yàn)。
首先New Member擁有了多模態(tài)識(shí)人能力，不需要用戶專門進(jìn)行注冊(cè)，它在座艙多人交互的過程推測(cè)出每個(gè)人的名字，與相貌的結(jié)合，人物之間的關(guān)系。New member不僅“認(rèn)識(shí)你”，還能“理解你”，在和用戶長(zhǎng)期的互動(dòng)過程當(dāng)中，它不但能夠記住興趣愛好，還能記住生活的點(diǎn)滴，產(chǎn)生共情，從而更貼心地進(jìn)行互動(dòng)。
同時(shí)，它還具備深度思考的能力，表達(dá)會(huì)更加生動(dòng)有趣。同時(shí)，當(dāng)用戶提出需求時(shí)，小影不是被動(dòng)響應(yīng)，而是會(huì)結(jié)合記憶與場(chǎng)景，主動(dòng)分析疲憊情緒、家庭需求甚至天氣變化進(jìn)行綜合性的深度思考，然后給出最合適的方案，成為懂你、會(huì)揣摩的“聰明搭子”。
最后，New Member在業(yè)內(nèi)首次實(shí)現(xiàn)免喚醒的多人多輪對(duì)話能力。之前行業(yè)做到的是大模型一對(duì)一的交流，如今New Member未被喚醒也能關(guān)注并理解座艙內(nèi)成員間的對(duì)話，并能隨時(shí)參與到對(duì)話當(dāng)中，做到“不過度打擾，但時(shí)刻陪伴”。展現(xiàn)“有趣靈魂”該有的模樣。
在現(xiàn)場(chǎng)的演示視頻中，車內(nèi)四人正在討論去雨崩徒步需要的裝備，New Member會(huì)主動(dòng)搭話，稱贊那位提示大家注意低溫要帶羽絨服的朋友；在查漏補(bǔ)缺攜帶物品的同時(shí)，它記得車主喜歡攝影，主動(dòng)提醒攜帶單反和三腳架，可以拍攝山頂星空。
針對(duì)“雨崩徒步”的多人對(duì)輪對(duì)話，New Member結(jié)合記憶進(jìn)行深度思考后的接話
另一個(gè)場(chǎng)景中，四個(gè)同事下班后臨時(shí)決定一起聚餐，但四個(gè)人住的地方分散在上海各區(qū)，彼此距離較遠(yuǎn)，同時(shí)飲食偏好也有差異，New Member能夠聽懂每個(gè)人的潛臺(tái)詞，綜合回家的距離、口味訴求，就像一個(gè)“規(guī)劃大師”，給出了大家都能接受的推薦餐廳。
New Member還能提供有溫度的情感互動(dòng)和陪伴。一對(duì)情侶想去南京旅游，但因?yàn)槭情_車還是乘坐高鐵出行產(chǎn)生了分歧和爭(zhēng)論，后來女生質(zhì)問“男生是不是不愛她了”，New Member能理解語言背后的情緒，對(duì)女生進(jìn)行安撫，并提供建議和幫助，給予情感支持。
在汽車智能化變革的浪潮中，車載AIOS正在構(gòu)建全新的AI汽車生態(tài)。商湯絕影將以“絕影千機(jī)”AI內(nèi)核為核心樞紐、New Member為標(biāo)桿產(chǎn)品，攜手車企、芯片廠商、硬件廠商、內(nèi)容服務(wù)商和開發(fā)者，共同打造智能座艙的新生態(tài)、新體驗(yàn)、新未來。
熱門跟貼