
近日,中國(guo)(guo)汽(qi)車工程學會向斑(ban)馬智(zhi)(zhi)行頒發(fa)先進科技(ji)成果評價,經專家組嚴(yan)格評審,認(ren)定斑(ban)馬智(zhi)(zhi)行"基于多模態端側大(da)模型的智(zhi)(zhi)能座艙技(ji)術(shu)(shu)(Auto Omni)研發(fa)及應用",總體技(ji)術(shu)(shu)達到國(guo)(guo)內先進水平(ping),標(biao)志著我(wo)國(guo)(guo)智(zhi)(zhi)能座艙AI技(ji)術(shu)(shu)實(shi)現(xian)重(zhong)大(da)突破。
中國汽車工程學(xue)會是國內最(zui)具權(quan)威的汽車技(ji)術(shu)學(xue)術(shu)組(zu)織,先進(jin)科技(ji)成果(guo)評(ping)價不(bu)僅針對(dui)技(ji)術(shu)先進(jin)性(xing),更要看實際市場應用價值,被視(shi)為行(xing)業發展風向標。本次成果(guo)評(ping)價由學(xue)會組(zu)織行(xing)業專家組(zu)成評(ping)審組(zu),對(dui)斑馬智行(xing)Auto Omni技(ji)術(shu)進(jin)行(xing)了全面(mian)、嚴(yan)格的評(ping)審。
專家組一致認為(wei),該項目(mu)"系統復雜、技(ji)術(shu)難度大、創新性強,開(kai)發了多模態端側智能核心(xin)技(ji)術(shu),知識(shi)產權自主可控(kong),總體(ti)技(ji)術(shu)達到(dao)國(guo)內先進水平",推(tui)動智能座艙從“語(yu)音助手(shou)”升級為(wei)“類人伙(huo)伴”。
評審專家組的(de)(de)評價意見指出(chu),Auto Omni技術的(de)(de)突破性(xing)創(chuang)新,主要體現在三大核心(xin)技術領域(yu):
第一,構建了基于(yu)端側多模(mo)(mo)態大(da)模(mo)(mo)型的車(che)載智(zhi)能(neng)架構體系(xi)。基于(yu)通義千問(wen)Qwen-Omni,面向智(zhi)艙(cang)場景打造(zao)、深度定制的車(che)載多模(mo)(mo)態大(da)模(mo)(mo)型技術(shu),創新性地(di)提出(chu)"原(yuan)始多模(mo)(mo)態數據(ju)直接(jie)輸入(ru)、統一理解、決策行動"的端側閉環(huan)開發方(fang)法,使(shi)多模(mo)(mo)態輸入(ru)下的任務響應(ying)準確率提升30%,端側首字(zi)響應(ying)速度提升50%,真正(zheng)實現了"即問(wen)即答"的流(liu)暢體驗。
第二,首次提出(chu)"短期(qi)-長期(qi)-時空"三級全時空記憶(yi)建(jian)模(mo)方法(fa)。 該方法(fa)發(fa)明了基(ji)于(yu)上下文免(mian)喚醒(xing)+場(chang)景免(mian)喚醒(xing)的(de)主(zhu)動服務估(gu)計(ji)算法(fa),創建(jian)了基(ji)于(yu)端(duan)側向量數(shu)據庫的(de)記憶(yi)精準管控技術,研制(zhi)了隱私保護下的(de)個性化成長記憶(yi)系統,實現(xian)了"喚醒(xing)依賴(lai)+無狀態服務",使座艙交互(hu)自然度提升40%,用戶可享(xiang)受(shou)更(geng)(geng)貼(tie)心(xin)、更(geng)(geng)智能的(de)主(zhu)動服務體(ti)驗。
第三(san),突(tu)破車(che)載(zai)服(fu)務(wu)生態協同(tong)技術。 項目提出基于"場景引擎"的平臺級Agent控制策略,實現了車(che)載(zai)OS、全模態大(da)模型(xing)與云端實時調節與無(wu)縫銜接(jie)(jie),使(shi)車(che)載(zai)服(fu)務(wu)場景覆蓋廣度提升50%,銜接(jie)(jie)成(cheng)功率(lv)提升35%,為用戶帶來更加連(lian)貫、自然的智能交互(hu)體驗。
在2025云棲大會(hui)上(shang),斑馬智(zhi)行聯合通義及高(gao)通全(quan)球首發(fa)全(quan)模態端側大模型(xing)實車(che)方(fang)案Auto Omni,助(zhu)力(li)車(che)企客(ke)戶實現智(zhi)能(neng)座艙體驗從指令式(shi)交互到Always On主(zhu)動服(fu)務的代際提升(sheng)。
“圣誕想和幾家朋友去(qu)美國(guo)”,“看到車(che)里落東西提醒我一下”,“播一首我們幾個人(ren)都喜歡的(de)(de)歌”,“你覺(jue)得我和副駕誰好(hao)看?”……在即時型(xing)(xing)(xing)(xing)場(chang)(chang)景(jing)、條件型(xing)(xing)(xing)(xing)場(chang)(chang)景(jing)、規劃型(xing)(xing)(xing)(xing)場(chang)(chang)景(jing)、閑聊型(xing)(xing)(xing)(xing)場(chang)(chang)景(jing),類人(ren)AI助手(shou)都能提供主(zhu)動服務、隱(yin)私無憂的(de)(de)產品體驗(yan),90%的(de)(de)場(chang)(chang)景(jing)斷網可用。
斑馬(ma)智行CTO司羅表示,傳統智能(neng)座艙存在交互(hu)模式單一、服務被動滯后、依賴(lai)云端(duan)推理、無個(ge)性化(hua)記(ji)憶等痛點,遠(yuan)遠(yuan)未能(neng)滿足用戶需求。
Auto Omni從“技(ji)術(shu)突破-場景落地(di)-生態(tai)構(gou)建(jian)”三層開展系(xi)統(tong)(tong)性研發,針(zhen)對傳統(tong)(tong)座艙智(zhi)能(neng)系(xi)統(tong)(tong)的四大瓶頸,斑馬智(zhi)行創(chuang)新(xin)性地(di)提出"端到端全模態(tai)架構(gou)+端側原生智(zhi)能(neng)體+全時空記憶系(xi)統(tong)(tong)"的技(ji)術(shu)路線,實現(xian)智(zhi)能(neng)座艙交互體驗的代際提升。
斑馬智(zhi)行Auto Omni自(zi)2025年(nian)9月(yue)發布之(zhi)后,3個(ge)月(yue)定點了4家國內(nei)頭(tou)部自(zi)主車企。2026年(nian)將實現量產落地。斑馬智(zhi)行將以此次技術突破為新起(qi)點,持續(xu)加大在智(zhi)能(neng)座艙領域的研發投入(ru),加速Auto Omni技術在更多車型(xing)上的規(gui)模化應用(yong),進一步提升(sheng)用(yong)戶(hu)體驗。(斑馬智(zhi)行)

