由南京經(jīng)濟(jì)技術(shù)開(kāi)發(fā)區(qū)管理委員會(huì)、南京市工業(yè)和信息化局主辦，中國(guó)信息通信研究院、中國(guó)人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟承辦的“2024南京人工智能產(chǎn)業(yè)發(fā)展論壇”在南京漢府飯店舉行。思必馳智能汽車事業(yè)部副總經(jīng)理曾春華受中國(guó)人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟邀請(qǐng)參加同期舉辦的汽車行業(yè)推進(jìn)組聯(lián)合組會(huì)，并作《AI中樞大模型打造多維生態(tài)融合》主題分享。

思必馳提出“AI中樞大模型”技術(shù)架構(gòu)

從AI技術(shù)應(yīng)用于智能座艙的產(chǎn)品方案演進(jìn)來(lái)看，車載語(yǔ)音交互方案經(jīng)歷了“以AI技術(shù)提升現(xiàn)有語(yǔ)音交互功能”“以AI賦能車內(nèi)高頻剛需應(yīng)用場(chǎng)景”“以AI賦能車內(nèi)創(chuàng)新場(chǎng)景”三個(gè)階段。

在第一階段中，AI主要幫助語(yǔ)音助手實(shí)現(xiàn)從語(yǔ)音指令到意圖理解的進(jìn)化升級(jí)，達(dá)到隨意說(shuō)、聽(tīng)得懂，以及人格化、情感化的個(gè)性化交互方式。到了第二階段，通過(guò)分析車內(nèi)高頻剛需應(yīng)用場(chǎng)景，AI技術(shù)可跨域打通出行、用車、娛樂(lè)等資源，協(xié)助語(yǔ)音助手實(shí)現(xiàn)汽車大師、行程規(guī)劃、美食助理、新聞助理、導(dǎo)航助理、音視頻助理等功能。而在大模型時(shí)代，隨著大模型在智能座艙的不斷落地，AI技術(shù)正賦能車內(nèi)的創(chuàng)新場(chǎng)景應(yīng)用，使車載語(yǔ)音助手從語(yǔ)言智能向工具智能、主動(dòng)智能演進(jìn)。

這其中，車企在應(yīng)用大模型所面臨的挑戰(zhàn)主要體現(xiàn)在：大模型與車場(chǎng)景如何實(shí)現(xiàn)深度融合，包括與系統(tǒng)、環(huán)境的融合；車企在發(fā)揮各個(gè)大模型的優(yōu)勢(shì)時(shí)，需要通過(guò)“中樞”解決融合調(diào)度的問(wèn)題；以及如何以Agent框架為主體，以人為中心，建立大模型的端到端的體驗(yàn)。

對(duì)此，思必馳基于自研全鏈路智能語(yǔ)音語(yǔ)言交互技術(shù)、DFM大模型以及大數(shù)據(jù)構(gòu)建“中樞大模型”架構(gòu)，打造“1+N”模式，即“1”個(gè)百模中臺(tái)（中樞大模型）與“N”個(gè)專業(yè)大模型組合上車，打通前端語(yǔ)言處理、用車場(chǎng)景與后端模型生態(tài)，形成車載垂域的生態(tài)圈，使車載AI體驗(yàn)從“語(yǔ)音指令”邁向“語(yǔ)言智能”+“工具智能”。

曾春華表示，中樞大模型不是一個(gè)云服務(wù)，而是一套框架體系和方法論。通過(guò)將中樞大模型規(guī)范配合SDK可以將大模型的上車體驗(yàn)達(dá)到最佳。此外，中樞大模型的規(guī)范結(jié)合SDK可以有效減少集成適配的工作量，通過(guò)中樞體系化輸出的產(chǎn)品化方案將更具優(yōu)勢(shì)。

更專注用車場(chǎng)景，打造多維生態(tài)融合

智能座艙中樞大模型方案將更專注于用車場(chǎng)景，通過(guò)將多維度垂域與大模型垂域串聯(lián)打通，中樞大模型方案可對(duì)用戶的指令完成情境理解與推理，并實(shí)現(xiàn)自由跨域，從而為用戶提供更加完善、全面的個(gè)性化服務(wù)。

在智能出行場(chǎng)景，通過(guò)打通車載垂域生態(tài)，中樞大模型可為用戶提供智能出行規(guī)劃、路書分享、美食地圖、大模型日程提醒、智能多輪對(duì)話等內(nèi)容，實(shí)現(xiàn)出行場(chǎng)景大串聯(lián)。在用車場(chǎng)景，中樞大模型通過(guò)智能文本分析、智能切圖、智能多輪對(duì)話、內(nèi)容提取、串聯(lián)控制等功能，可以為用戶提供汽車售前、售后的咨詢，以及用車指導(dǎo)、AI說(shuō)明書、競(jìng)品對(duì)比等服務(wù)。此外，思必馳中樞大模型還可為用戶打造更加個(gè)性化的虛擬助理，具備超擬人的TTS（語(yǔ)音合成）、人設(shè)性格復(fù)刻、情感化交互等能力。

大模型端側(cè)部署的趨勢(shì)

近年來(lái)，得益于模型與芯片技術(shù)以及產(chǎn)業(yè)的快速發(fā)展，各終端（手機(jī)、PC、IOT等）的大模型端部產(chǎn)品化也在加速發(fā)展?？梢灶A(yù)見(jiàn)的是，AI+OS的全新技術(shù)底座將成為大模型時(shí)代新的人機(jī)交互趨勢(shì)。

曾春華認(rèn)為，大模型時(shí)代下，端側(cè)設(shè)備將成為大模型平權(quán)的重要觸點(diǎn)和入口，端側(cè)部署將極大程度降低推理與算力成本。通過(guò)端側(cè)大模型技術(shù)，用戶體驗(yàn)將在隱私安全保證下實(shí)現(xiàn)個(gè)性化以及低延遲高性能的優(yōu)化升級(jí)。以智能汽車為例，端側(cè)大模型技術(shù)將打造出車空間的全模態(tài)人機(jī)自然交互，以及以LLM為核心的車載OS全新軟件架構(gòu)，并實(shí)現(xiàn)車場(chǎng)景的多模態(tài)模型訓(xùn)練微調(diào)及部署。

作為汽車、電子信息、通信等領(lǐng)域跨界融合的產(chǎn)物，智能網(wǎng)聯(lián)汽車已成為全球技術(shù)革命和產(chǎn)業(yè)變革的前沿陣地，汽車行業(yè)有望借助大模型，鞏固和擴(kuò)大在智能網(wǎng)聯(lián)領(lǐng)域的優(yōu)勢(shì)，在新一輪產(chǎn)業(yè)革命中走在前列。在這一過(guò)程中，思必馳期待以自身技術(shù)積累賦能行業(yè)發(fā)展，打造汽車生態(tài)影響力。目前，思必馳的中樞大模型方案已在北汽、哪吒等多個(gè)項(xiàng)目實(shí)施落地，助力合作伙伴為用戶提供更加快速、便捷、智能化的駕乘體驗(yàn)。