
近日,中國汽(qi)車工程學會向(xiang)斑(ban)馬(ma)智(zhi)行頒發先進科技(ji)(ji)(ji)成果(guo)評價,經專家(jia)組嚴格評審,認定斑(ban)馬(ma)智(zhi)行"基于多模態端側大模型(xing)的智(zhi)能座(zuo)艙(cang)技(ji)(ji)(ji)術(Auto Omni)研發及(ji)應用",總(zong)體技(ji)(ji)(ji)術達到(dao)國內(nei)先進水(shui)平,標(biao)志著我(wo)國智(zhi)能座(zuo)艙(cang)AI技(ji)(ji)(ji)術實現重(zhong)大突(tu)破。
中(zhong)國汽車(che)工程學(xue)(xue)會(hui)是國內最具(ju)權威(wei)的(de)汽車(che)技(ji)術(shu)學(xue)(xue)術(shu)組織,先(xian)進科技(ji)成果(guo)評價(jia)不僅針(zhen)對技(ji)術(shu)先(xian)進性,更要看實際市場應用(yong)價(jia)值,被視為行業發(fa)展(zhan)風向標。本次成果(guo)評價(jia)由學(xue)(xue)會(hui)組織行業專家組成評審(shen)組,對斑馬智行Auto Omni技(ji)術(shu)進行了全面、嚴格的(de)評審(shen)。
專家(jia)組一致認為,該(gai)項目"系統復雜、技術難度(du)大、創新性強(qiang),開發了多模態端(duan)側智能核心技術,知(zhi)識產權自主可控(kong),總體技術達(da)到國內(nei)先進水平(ping)",推動智能座艙從“語音助手(shou)”升級(ji)為“類人伙伴(ban)”。
評審專家組(zu)的評價意見(jian)指(zhi)出,Auto Omni技術的突破性創新,主要體(ti)現在三大(da)核(he)心技術領域:
第一,構(gou)建了(le)基于(yu)(yu)端(duan)側多模(mo)(mo)態大模(mo)(mo)型的(de)車(che)載智(zhi)能架構(gou)體系(xi)。基于(yu)(yu)通義(yi)千問Qwen-Omni,面向智(zhi)艙場景打造、深(shen)度(du)定制的(de)車(che)載多模(mo)(mo)態大模(mo)(mo)型技術,創新性地提(ti)出"原始(shi)多模(mo)(mo)態數據直(zhi)接輸入、統(tong)一理解、決策行動"的(de)端(duan)側閉(bi)環開發(fa)方法(fa),使多模(mo)(mo)態輸入下的(de)任務響(xiang)應準(zhun)確率(lv)提(ti)升30%,端(duan)側首(shou)字響(xiang)應速度(du)提(ti)升50%,真(zhen)正實現(xian)了(le)"即問即答"的(de)流暢體驗(yan)。
第二,首次提出(chu)"短(duan)期(qi)-長期(qi)-時空"三級(ji)全(quan)時空記(ji)憶建模方法(fa)。 該方法(fa)發明了(le)基于上下(xia)(xia)文免喚醒(xing)(xing)+場(chang)景(jing)免喚醒(xing)(xing)的主動(dong)服務(wu)估計(ji)算法(fa),創(chuang)建了(le)基于端側向量數據庫的記(ji)憶精準(zhun)管控技術,研(yan)制了(le)隱私保護下(xia)(xia)的個性化成長記(ji)憶系統,實現了(le)"喚醒(xing)(xing)依賴+無狀態服務(wu)",使(shi)座艙交互(hu)自然度提升(sheng)40%,用戶可享受更(geng)(geng)貼心、更(geng)(geng)智能的主動(dong)服務(wu)體驗。
第三,突破車載(zai)(zai)(zai)服務生態協同技(ji)術。 項(xiang)目(mu)提(ti)出基(ji)于"場景引擎"的(de)平臺級(ji)Agent控制策(ce)略,實現了(le)車載(zai)(zai)(zai)OS、全模態大模型(xing)與(yu)云端實時調節與(yu)無(wu)縫銜接,使車載(zai)(zai)(zai)服務場景覆(fu)蓋廣度提(ti)升50%,銜接成(cheng)功率提(ti)升35%,為用戶帶來更加連貫(guan)、自然(ran)的(de)智能交互體(ti)驗。
在2025云棲大會上,斑馬智行聯合通(tong)(tong)義及高(gao)通(tong)(tong)全(quan)球首(shou)發全(quan)模(mo)態(tai)端側大模(mo)型實(shi)車(che)方案Auto Omni,助力車(che)企客(ke)戶實(shi)現智能座艙體驗從指(zhi)令式(shi)交互到Always On主動(dong)服務的代際(ji)提升。
“圣誕想和(he)幾家朋友去美國”,“看(kan)到車里落東(dong)西提(ti)醒(xing)我(wo)一下”,“播一首我(wo)們幾個人都(dou)喜歡的歌(ge)”,“你覺(jue)得(de)我(wo)和(he)副駕誰好(hao)看(kan)?”……在即時型(xing)場(chang)景、條件型(xing)場(chang)景、規劃型(xing)場(chang)景、閑聊型(xing)場(chang)景,類人AI助手都(dou)能提(ti)供主動(dong)服務、隱私無憂的產品(pin)體驗(yan),90%的場(chang)景斷網可用。
斑馬智(zhi)行CTO司(si)羅表示(shi),傳統智(zhi)能座(zuo)艙(cang)存(cun)在交互模式單一、服務被(bei)動滯后(hou)、依(yi)賴云端推理、無(wu)個性(xing)化記憶(yi)等痛點,遠(yuan)遠(yuan)未(wei)能滿(man)足用戶需求。
Auto Omni從“技術突破-場景落地-生(sheng)態(tai)構(gou)建”三層開展系統(tong)性(xing)(xing)研(yan)發,針對傳(chuan)統(tong)座艙(cang)智(zhi)能系統(tong)的(de)四大瓶(ping)頸,斑馬(ma)智(zhi)行創(chuang)新性(xing)(xing)地提(ti)出"端(duan)到端(duan)全模態(tai)架構(gou)+端(duan)側(ce)原(yuan)生(sheng)智(zhi)能體(ti)+全時空記憶系統(tong)"的(de)技術路線,實現智(zhi)能座艙(cang)交互體(ti)驗(yan)的(de)代際提(ti)升(sheng)。
斑馬(ma)智行Auto Omni自(zi)2025年9月(yue)發(fa)布之后,3個(ge)月(yue)定點了4家國內頭部自(zi)主車企(qi)。2026年將(jiang)實現量產落地。斑馬(ma)智行將(jiang)以(yi)此次技(ji)術突破(po)為新起點,持續加大在(zai)智能座艙領域的研發(fa)投入(ru),加速Auto Omni技(ji)術在(zai)更(geng)多(duo)車型上的規(gui)模化應用,進一步提升用戶體驗。(斑馬(ma)智行)

