
近日,中國汽車工程學會向斑馬智(zhi)行頒發(fa)先(xian)(xian)進科技成果評(ping)價,經專(zhuan)家(jia)組(zu)嚴格評(ping)審,認定斑馬智(zhi)行"基于(yu)多模態端側大(da)模型的(de)智(zhi)能座艙技術(Auto Omni)研發(fa)及應用",總體技術達(da)到國內(nei)先(xian)(xian)進水平,標志著我國智(zhi)能座艙AI技術實現重(zhong)大(da)突破。
中(zhong)國汽(qi)車工程學會(hui)是國內最具權威(wei)的汽(qi)車技術(shu)(shu)學術(shu)(shu)組(zu)(zu)織,先進科(ke)技成(cheng)果(guo)評價不僅針(zhen)對(dui)技術(shu)(shu)先進性(xing),更要(yao)看實際市場應用價值,被視為行業發展風向標(biao)。本(ben)次成(cheng)果(guo)評價由學會(hui)組(zu)(zu)織行業專家組(zu)(zu)成(cheng)評審組(zu)(zu),對(dui)斑馬智行Auto Omni技術(shu)(shu)進行了全面、嚴格的評審。
專家組一致認為(wei),該(gai)項目"系統復(fu)雜、技術難度大、創新性強,開(kai)發了多模態端側智(zhi)能核(he)心技術,知識產(chan)權自主(zhu)可控,總體技術達(da)到(dao)國(guo)內先進水平",推動智(zhi)能座艙從“語音助手”升級為(wei)“類人伙伴”。
評審專家組(zu)的(de)評價意見指出,Auto Omni技術(shu)的(de)突破性(xing)創新,主要體(ti)現在三(san)大核心(xin)技術(shu)領(ling)域(yu):
第一(yi),構建了基于端(duan)(duan)側(ce)(ce)多(duo)模(mo)(mo)態(tai)大模(mo)(mo)型的(de)(de)車載智能架構體(ti)系。基于通義千(qian)問Qwen-Omni,面向智艙(cang)場(chang)景(jing)打(da)造、深度定制的(de)(de)車載多(duo)模(mo)(mo)態(tai)大模(mo)(mo)型技(ji)術,創新性地(di)提出(chu)"原始多(duo)模(mo)(mo)態(tai)數(shu)據直接(jie)輸(shu)入、統一(yi)理解、決策(ce)行動"的(de)(de)端(duan)(duan)側(ce)(ce)閉環(huan)開(kai)發方法,使(shi)多(duo)模(mo)(mo)態(tai)輸(shu)入下的(de)(de)任務響(xiang)應準確率提升30%,端(duan)(duan)側(ce)(ce)首字響(xiang)應速度提升50%,真正(zheng)實現了"即問即答"的(de)(de)流暢體(ti)驗。
第二,首次(ci)提(ti)出"短期(qi)-長(chang)期(qi)-時空(kong)"三級全(quan)時空(kong)記憶(yi)(yi)建模(mo)方(fang)法(fa)。 該(gai)方(fang)法(fa)發明了(le)基于上(shang)下文免(mian)喚(huan)醒(xing)(xing)+場景免(mian)喚(huan)醒(xing)(xing)的(de)(de)主動(dong)服務(wu)估計(ji)算法(fa),創建了(le)基于端側向(xiang)量數(shu)據庫的(de)(de)記憶(yi)(yi)精準管控技術,研制(zhi)了(le)隱(yin)私保護下的(de)(de)個性化成長(chang)記憶(yi)(yi)系(xi)統,實現了(le)"喚(huan)醒(xing)(xing)依賴(lai)+無狀態服務(wu)",使座艙交互(hu)自然(ran)度提(ti)升40%,用戶可(ke)享受更(geng)(geng)貼心、更(geng)(geng)智(zhi)能的(de)(de)主動(dong)服務(wu)體(ti)(ti)驗。
第三,突(tu)破(po)車(che)載(zai)服務生(sheng)態協(xie)同技術(shu)。 項(xiang)目(mu)提出基于(yu)"場景(jing)引擎"的(de)平臺級Agent控制(zhi)策略(lve),實現了車(che)載(zai)OS、全(quan)模態大模型與云端實時調(diao)節(jie)與無縫(feng)銜接(jie)(jie),使車(che)載(zai)服務場景(jing)覆(fu)蓋廣度提升50%,銜接(jie)(jie)成功率提升35%,為(wei)用戶(hu)帶來更加連貫、自然(ran)的(de)智(zhi)能(neng)交互體驗。
在2025云棲大會上,斑馬智(zhi)(zhi)行聯合通(tong)義及(ji)高通(tong)全球(qiu)首發全模態端側大模型實車方案Auto Omni,助力車企(qi)客(ke)戶實現智(zhi)(zhi)能座艙體驗(yan)從指(zhi)令(ling)式交互到Always On主(zhu)動服務的(de)代(dai)際提升(sheng)。
“圣誕想和幾(ji)家朋友去美國”,“看到(dao)車(che)里落東西(xi)提醒我(wo)一(yi)(yi)下(xia)”,“播一(yi)(yi)首我(wo)們幾(ji)個人(ren)都(dou)喜歡的歌”,“你覺得我(wo)和副駕誰好看?”……在即時型場(chang)景(jing)、條件(jian)型場(chang)景(jing)、規(gui)劃型場(chang)景(jing)、閑聊型場(chang)景(jing),類(lei)人(ren)AI助手都(dou)能提供主(zhu)動服務、隱私無憂(you)的產品體驗,90%的場(chang)景(jing)斷網可用。
斑馬智行CTO司羅表(biao)示,傳統智能(neng)座(zuo)艙存(cun)在交互模(mo)式(shi)單一(yi)、服(fu)務被動滯后、依賴(lai)云端推理、無個(ge)性化記憶等痛點,遠(yuan)遠(yuan)未能(neng)滿足用戶需求。
Auto Omni從“技術突破-場景落地-生(sheng)態構(gou)建”三層開展系統(tong)性(xing)研發,針對傳統(tong)座(zuo)艙(cang)智能系統(tong)的(de)(de)四大(da)瓶頸,斑馬智行創新性(xing)地提出"端到端全模態架構(gou)+端側原(yuan)生(sheng)智能體(ti)+全時空記憶系統(tong)"的(de)(de)技術路線(xian),實現智能座(zuo)艙(cang)交(jiao)互體(ti)驗的(de)(de)代際提升(sheng)。
斑馬智(zhi)行(xing)Auto Omni自(zi)2025年(nian)9月(yue)(yue)發布之(zhi)后,3個月(yue)(yue)定(ding)點(dian)(dian)了4家國(guo)內(nei)頭部自(zi)主車(che)企(qi)。2026年(nian)將(jiang)實現量產落地。斑馬智(zhi)行(xing)將(jiang)以此次技術突(tu)破(po)為新起點(dian)(dian),持續加大在(zai)智(zhi)能座(zuo)艙(cang)領域的(de)研發投入(ru),加速Auto Omni技術在(zai)更(geng)多(duo)車(che)型上的(de)規模化應用,進一步(bu)提升用戶體驗(yan)。(斑馬智(zhi)行(xing))

