7 月 17 日，涂鴉 OmniAI Foundation正式升級至 2.2 版本！本次迭代的核心亮點，在于我們對 AI 智能體技能進行了全面升級，顯著提升了系統(tǒng)在內(nèi)容理解、多技能協(xié)同以及泛化溝通方面的能力，讓 AI 助手能夠更自然、更精準地理解并響應用戶意圖。同時，我們聯(lián)合阿里云帶來了涂鴉私有版Qwen 模型，為用戶打造更快的 AI 對話響應時間，為各業(yè)務場景提供更加強大、靈活、貼近需求的 AI 能力支持，并實現(xiàn)以下幾方面的重大突破：

端到端響應速度提升 40%，弱網(wǎng)環(huán)境下語音延遲降低 50%

動態(tài)記憶架構(gòu)，破解 AI 長期交互中的性能衰退

精準識別語音起止點，最快可達到 350ms 的極限打斷速度

升級 AES 自適應專家系統(tǒng)，顯著抑制大模型幻覺（即 AI 有時會一本正經(jīng)地胡說八道）

什么是 OmniAI Foundation？
OmniAI Foundation 是致力于提供穩(wěn)定、智能、開放的 AI Agent 能力基座平臺，通過涂鴉持續(xù)的技術(shù)創(chuàng)新和功能升級，為各業(yè)務場景帶來更強大的 AI 體驗。

一、更卓越的 AI 對話體驗

1、全面提升全球弱網(wǎng)對抗能力

涂鴉全新優(yōu)化了通信傳輸協(xié)議，顯著提升網(wǎng)絡環(huán)境不佳時的 AI 響應速度。即使在 2G 網(wǎng)絡環(huán)境下，語音識別和響應的延遲也大幅降低，確保用戶在各種網(wǎng)絡條件下均能享受到流暢的對話體驗。依托涂鴉全球 7 大數(shù)據(jù)中心、100+ 網(wǎng)絡加速節(jié)點，在全球主流城市能達到網(wǎng)絡延時 <68ms(中位數(shù))，弱網(wǎng)對抗能力快速提升 50%。

2、全面升級個體記憶能力

基于涂鴉精心打造的 AI 記憶架構(gòu)，OmniAI Foundation 實現(xiàn)了更精準的用戶特征提取與動態(tài)記憶管理。它采用分層記憶模型，結(jié)合抗衰減機制與情境關聯(lián)檢索，能通過權(quán)重分類器自動降權(quán)沖突數(shù)據(jù)，高效保留用戶的關鍵信息（如用戶提問偏好類型、歷史交互細節(jié)）；同時智能過濾冗余內(nèi)容，最終輕松將記憶提取的響應速度提高 40%，有效抑制長期交互中的性能衰退。當用戶信息更新或提問存在沖突時（如偏好變更、前后矛盾），系統(tǒng)會自動標記舊記憶的有效性，并優(yōu)先激活最新信息，避免重復詢問或回答矛盾。確保在多輪跨會話對話中，每一次交互都更貼合用戶的當下需求。

（涂鴉 AI 記憶架構(gòu)圖）

3、更優(yōu)雅的打斷體驗

相比同行，涂鴉擁有更好的 AI 斷句能力。在優(yōu)化版本前，我們拜訪了大量的真實用戶，并結(jié)合真正的用戶使用場景，沉淀大量測試信息進行一一驗證，最終成功開發(fā)出更貼合用戶真實習慣的優(yōu)雅打斷策略（即低延遲動態(tài)打斷）。這一決策，并非過度追求無意義的極限數(shù)據(jù)，而是為了在確保整體響應速度有競爭力的前提下，能擁有最優(yōu)的打斷效果。

因此，OmniAI Foundation引入了基于深度學習的語音活動檢測（VAD）算法，能夠更實時精準地識別用戶說話的開始和結(jié)束，減少無效等待時間，同時大幅降低誤觸率，提升交互的自然度和流暢性。在實際對話中，涂鴉最快可支持 350ms 的極限打斷速度，但一般情況下，我們會更推薦用戶默認使用優(yōu)雅打斷。因為優(yōu)雅打斷在速度和連貫度之間擁有更恰到好處的平衡，能顯著降低誤切分和錯聽的概率，整體交互效率更高。

基于用戶真實情況調(diào)研，我們設計了眾多貼合真實場景的測試用例，下面分享其中一個。也歡迎大家拿出手上的設備，驗證是否會被打斷、以及打斷幾次：

【注】不同的硬件結(jié)構(gòu)和方案會對收音產(chǎn)生影響，我們同步也提供分貝數(shù)據(jù)的參考。

4、 阿里云+涂鴉私有版 AI 模型

涂鴉聯(lián)合阿里云重磅推出了私有版 Qwen 模型，提供了一整套密集型和混合專家型（MoE）模型，支持按對話場景，靈活地調(diào)度計算資源。基于廣泛的訓練，在邏輯推理、指令遵循、代理能力及多語言支持方面，實現(xiàn)了突破性的進展，可為用戶提供更加實時的秒級端到端響應體驗。

5、同步推出 AES 2.2 版本

基于涂鴉 AES（Adaptive Expert System）自適應專家系統(tǒng)，可有效降低大模型幻覺，幫助提升技能執(zhí)行成功率和響應時間。本次更新，溝通話術(shù)的泛化能力大幅提升，能夠更智能地應對各種使用場景；針對基礎技能模塊，涂鴉也進行了大幅優(yōu)化與各項能力的新增，功能更加全面。

基于 AES 2.2 版本，我們?nèi)嫣嵘烁黝I域技能體驗。

5.1 音樂/內(nèi)容技能

試聽版：支持試聽數(shù)百首音樂/兒歌和完整版本的童話故事，可滿足用戶在內(nèi)容試播、演示以及快速產(chǎn)品化的即時需求；

版權(quán)版：國內(nèi)現(xiàn)已支持網(wǎng)易云音樂，如果大家也想接入，可聯(lián)系與您對接的涂鴉商務BD。

【注】如目前沒有對接的 BD，可點擊文末“閱讀原文”，填寫表單后，將會給大家分配。

5.2 智能家居技能

基于 AES 2.2 系統(tǒng)，我們分別對不同設備規(guī)模的家庭場景(目前支持 5-40 個)進行了數(shù)十個品類的測試，本次發(fā)布重在提升設備準確率和降低響應時間。由于設備品類和應用場景眾多，我們將持續(xù)升級該領域能力。

5.3 AI 產(chǎn)品指令技能

如果你希望控制其它第三方設備，無需了解第三方設備的具體功能實現(xiàn)，只要直接開啟智能家居技能即可。

如果你僅需控制該產(chǎn)品本身，為了可以最大化發(fā)揮產(chǎn)品的 AI 能力，涂鴉為大家提供了便捷的“AI 產(chǎn)品指令”，你僅需在平臺上配置產(chǎn)品支持的功能即可。

比如：你的產(chǎn)品是只機器狗，你設置前進、后退、舞蹈等動作，以及音量、開關等基礎功能，即可實現(xiàn) AI 語音控制。

5.4 更泛化的實時查詢技能

5.4.1 天氣查詢

支持查詢國內(nèi)外城市的實時天氣、預報信息，適用于規(guī)劃出行。

5.4.2 日歷查詢

不僅可以查詢具體日期信息，更能獲取國內(nèi)節(jié)假日安排。

5.4.3 實時聯(lián)網(wǎng)查詢

涂鴉可一站式滿足用戶的多樣化信息需求，現(xiàn)已支持：

動態(tài)獲取新聞資訊

實時查看股票行情

查詢本地生活服務（如餐飲、交通）

規(guī)劃與查詢地圖導航

用戶自定義相關內(nèi)容的精準搜索能力

5.5 更便捷的個性化角色設定

涂鴉賦能 App 可根據(jù)用戶的需要靈活設定角色屬性（如傲嬌霸總、味覺探險家等），并提供多達數(shù)十種可選的音色（音色種類還在持續(xù)拓展中～）。如沒有你喜歡的音色，也可以上傳 10 秒鐘音頻，快速克隆一個新音色。該功能有效豐富了消費者對差異化角色的自定義和泛化玩法，提供更自然流暢、更具人情味的交流對話，提升整體交互溫度。

戳視頻，手把手教你配置個性化角色：