數(shù)千位開發(fā)者相逢在Baidu Create 2019百度 AI 開發(fā)者大會(huì)，一起見證 AI 力量催化產(chǎn)業(yè)智能化變革。

會(huì)上，百度 AR 宣布技術(shù)開放平臺(tái) DuMix AR 全面升級(jí)5.0，帶來一體化人機(jī)交互與大場景物理世界交互兩大 AR 技術(shù)系統(tǒng)級(jí)革新；并以持續(xù)構(gòu)建的虛實(shí)融合基礎(chǔ)設(shè)施和不斷變革的人機(jī)交互創(chuàng)新體驗(yàn)，推出六大行業(yè)解決方案。

兩大AR交互系統(tǒng)創(chuàng)新發(fā)布

2017年，百度 AR 在百度 AI 開發(fā)者大會(huì)上首次發(fā)布技術(shù)開放平臺(tái) DuMix AR ，將 AR 技術(shù)賦能廣大開發(fā)者。兩年后，百度 AR 交出新的成績單 —— 全面升級(jí) DuMix AR 5.0平臺(tái)，發(fā)布兩大 AR 交互系統(tǒng)，實(shí)現(xiàn)從認(rèn)識(shí)物到理解人，到探知世界的智能感知能力進(jìn)階，將 AR 技術(shù)應(yīng)用的邊界從眼前的空間擴(kuò)展至物理世界大場景。

由人臉、人體、手勢(shì)等相關(guān)視覺技術(shù)，及完備的環(huán)境特效能力共同構(gòu)成的一體化人機(jī)交互系統(tǒng)，實(shí)現(xiàn)了人與周遭環(huán)境的實(shí)時(shí)跟蹤互動(dòng)，目前正廣泛應(yīng)用于視頻拍攝和游戲互動(dòng)場景，為人們帶來持續(xù)創(chuàng)新的交互體驗(yàn)。

為實(shí)現(xiàn)人臉特征點(diǎn)和輪廓點(diǎn)的精準(zhǔn)定位，百度 AR 從自建人臉數(shù)據(jù)庫的海量數(shù)據(jù)中提取東方人臉型基底，并以此為基礎(chǔ)構(gòu)建了一套穩(wěn)定高效的用戶臉型三維重建算法，使得在進(jìn)行人臉驅(qū)動(dòng)表情估計(jì)時(shí)，能夠提取到更精確的表情結(jié)果。

此外，基于百度飛槳 Paddle Paddle 高性能深度學(xué)習(xí)框架，人臉關(guān)鍵點(diǎn)檢測(cè)在大姿態(tài)、極端表情、遮擋等復(fù)雜場景下都表現(xiàn)出可靠的魯棒性和準(zhǔn)確性。在這之上，拓展出人臉美型、美妝、 3D 道具及 3D 動(dòng)畫表情等十余項(xiàng)豐富的?臉特效能力，為全民小視頻、好看視頻等應(yīng)用和華為、魅族等企業(yè)級(jí)合作伙伴提供了視頻特效拍攝方案。

百度 AR 還建立了一系列業(yè)內(nèi)領(lǐng)先的超輕量級(jí)（計(jì)算量小，體積?。┦植拷换ニ惴芰仃嚕w手勢(shì)識(shí)別、指尖點(diǎn)檢測(cè)和手勢(shì)關(guān)鍵點(diǎn)檢測(cè)，除了常見的控雨等手勢(shì)控制操作，還能自定義手部特效、空間作畫等多種創(chuàng)意玩法。

在移動(dòng)端，百度率先實(shí)現(xiàn)了肢體骨骼點(diǎn)/輪廓點(diǎn)檢測(cè)跟蹤，支持人體實(shí)時(shí)定位與動(dòng)作捕捉；同時(shí)以18點(diǎn)/59點(diǎn)兩種不同輸出方式，跨平臺(tái)兼容各主流終端設(shè)備。包含人像分割、天空分割、頭發(fā)分割、物體檢測(cè)等多項(xiàng)算法能力在內(nèi)的環(huán)境特效能力矩陣，致力于打造人像與虛擬環(huán)境的自然融合，可以任意選擇背景替換、染發(fā)、天空特效、動(dòng)畫疊加等 AR 效果。

同時(shí)，我們將一體化人機(jī)交互系統(tǒng)全面接入百度智能云平臺(tái)，支持為企業(yè)提供更全面、更易用的智能化能力和更完善的視頻解決方案。

VPAS-視覺定位與增強(qiáng)服務(wù)首發(fā)，復(fù)現(xiàn)圓明園大水法盛景

未來是什么？是無數(shù)個(gè)過去和現(xiàn)在疊加在一起。當(dāng)我們站在此時(shí)此刻，能否借一雙未來的眼去回看歷史的景象？

在開發(fā)者大會(huì)上，百度 AR 首次發(fā)布 VPAS （視覺定位與增強(qiáng)服務(wù)），通過視覺定位與 AR 技術(shù)的突破性結(jié)合，將虛擬信息與真實(shí)地理位置準(zhǔn)確重合，實(shí)現(xiàn)大場景物理世界的 AR 交互。當(dāng)你跟隨百度地圖導(dǎo)航走進(jìn)圓明園西洋樓景區(qū)， VPAS 將自動(dòng)“找到”大水法遺址，在這片殘?jiān)珨啾谏现噩F(xiàn)100多年前雕欄玉砌、“獵狗逐鹿”的恢宏奇景。

VPAS 主要包含離線高精地圖構(gòu)建、在線定位與融合跟蹤三大基礎(chǔ)模塊，相比 GPS 具備更穩(wěn)定的實(shí)時(shí)跟蹤能力，支持室外大場景及室內(nèi)場景厘米級(jí)高精度定位。

百度 AR 在視覺信息要素積累的基礎(chǔ)上實(shí)現(xiàn)了一套完整的視覺地圖構(gòu)建方案，即實(shí)行眾源數(shù)據(jù)采集模式，對(duì)用戶通過手機(jī)收集反饋的圖像數(shù)據(jù)進(jìn)行處理分析，結(jié)合百度地圖的地理位置信息持續(xù)更新完善視覺地圖。

目前，百度 AR 已打通常見三維重建數(shù)據(jù)導(dǎo)入接口，并且兼容相同格式下的第三方數(shù)據(jù)，具備易集成特性和數(shù)據(jù)批量化生產(chǎn)能力。

VPAS 采用了最具前瞻性的視覺技術(shù)方案，以及兼容 Google 、 Apple 平臺(tái)的持續(xù)跟蹤能力與獨(dú)有自研跟蹤能力共同構(gòu)成的融合跟蹤方案，能夠支持當(dāng)前市場主流機(jī)型的全場景體驗(yàn)需求。同時(shí)結(jié)合百度視覺語義化能力，持續(xù)提升在線定位與實(shí)時(shí)跟蹤的穩(wěn)定性和精準(zhǔn)度。

在 AI+5G 論壇上，通過 VPAS 復(fù)現(xiàn)圓明園大水法為大家展現(xiàn)了百度 AI 能力與 5G 結(jié)合的一大可落地應(yīng)用場景，隨著 5G 時(shí)代到來， AI 與 5G /邊緣計(jì)算相互賦能不斷深化，我們將以大水法為起點(diǎn)，拓展景區(qū)、商圈等更多室內(nèi)外場景，結(jié)合 VPAS 為物理世界可視化導(dǎo)航服務(wù)帶來體驗(yàn)式變革。

六大行業(yè)解決方案，助力產(chǎn)業(yè)智能化升級(jí)

在技術(shù)能力持續(xù)積累的同時(shí)，百度 AR 與開發(fā)者和生態(tài)伙伴一起不斷探索 AR 在各個(gè)行業(yè)的實(shí)用場景和解決方案。

本次 AI 開發(fā)者大會(huì)上，百度 AR 發(fā)布全新 DuMix AR 5.0平臺(tái)，針對(duì)娛樂互動(dòng)、智能營銷、智能設(shè)備、景區(qū)行業(yè)、教育行業(yè)及汽車行業(yè)，發(fā)布六大解決方案，覆蓋從 AR 內(nèi)容生產(chǎn)到消費(fèi)應(yīng)用全場景。

01. 娛樂互動(dòng)解決方案

百度 DuMix AR 聚焦精細(xì)美化方向，在人臉特效、美化特效、人體及環(huán)境特效方面都帶來了出色表現(xiàn)，實(shí)現(xiàn)了虛擬特效貼紙、動(dòng)畫表情、美化濾鏡等與人臉/人體的精準(zhǔn)貼合，人像與虛擬環(huán)境的自然融合。

在兼容性方面，百度 DuMix AR 人機(jī)交互能力進(jìn)行全機(jī)型覆蓋，兼容市場上絕大多數(shù)高中低端移動(dòng)設(shè)備，支持和滿足各類視頻、直播、實(shí)時(shí)通話等應(yīng)用需求。

此外，百度 AR 還將內(nèi)容平臺(tái)服務(wù)向視頻特效方向延伸，為廣大開發(fā)者/設(shè)計(jì)師提供低門檻的 AR 特效內(nèi)容制作工具，擴(kuò)大 AR 內(nèi)容規(guī)模和開發(fā)效率；平臺(tái)提供內(nèi)容的管理與存儲(chǔ)服務(wù)，開發(fā)者也可以通過平臺(tái)將自己的作品上傳至全民小視頻等接入百度 AR 能力的應(yīng)用，形成從內(nèi)容生產(chǎn)、管理到分發(fā)的一站式解決方案，打造 AR 娛樂互動(dòng)領(lǐng)域的開放閉環(huán)。

02. 智能營銷解決方案

在智能營銷領(lǐng)域，百度將 AR 的趣味性與交互性融入虛實(shí)結(jié)合的全新場景，定義創(chuàng)意表達(dá)的不同形態(tài)，更多元化地向用戶傳遞品牌價(jià)值，提升營銷轉(zhuǎn)化率。

百度 AR 擁有專業(yè)的內(nèi)容生產(chǎn)團(tuán)隊(duì)和高效的內(nèi)容制作體系，提供 AR 內(nèi)容的個(gè)性化定制和一站式模板服務(wù)，幫助開發(fā)者實(shí)現(xiàn)創(chuàng)意內(nèi)容的快速 AR 化。此外，百度還擁有高效的分發(fā)優(yōu)勢(shì)，線上依托生態(tài)億級(jí)分發(fā)矩陣和大數(shù)據(jù)資源，精準(zhǔn)觸達(dá)目標(biāo)人群；線下通過 AR “掃一掃”入口延伸至線上場景，形成打通的營銷閉環(huán)。

03. 智能設(shè)備解決方案

2018年，百度將肢體互動(dòng)能力與智能大屏結(jié)合， AR 打太極項(xiàng)目落地全球首個(gè) AI 公園-海淀公園，獨(dú)特的健身互動(dòng)方式受到了大家的廣泛關(guān)注，天津南翠屏公園、福州飛鳳山公園等先后引入，每天都有絡(luò)繹不絕的游客前來體驗(yàn)。

通過將人機(jī)交互，智能感知和跟蹤等領(lǐng)先技術(shù)能力及視覺定位與增強(qiáng)服務(wù)（ VPAS ），與智能大屏、 AR 眼鏡、 PAD 等更多智能設(shè)備結(jié)合，AR 技術(shù)將突破手機(jī)的約束為人們帶來解放雙手的 AR 交互新體驗(yàn)，在公園、景區(qū)、商圈、店鋪等挖掘豐富的使用場景。

04. 景區(qū)行業(yè)解決方案

基于端云一體化的視覺定位與增強(qiáng)服務(wù)（ VPAS ），融合百度地圖場景化能力，百度 DuMix AR 為景區(qū)打造了覆蓋行前、行中、行后的全流程交互解決方案。用戶可以通過線上 AR 導(dǎo)覽進(jìn)行實(shí)景體驗(yàn)，依托 VPAS 探索景區(qū)知名地標(biāo)并將關(guān)聯(lián)信息在現(xiàn)實(shí)空間疊加呈現(xiàn)，豐富的人機(jī)交互能力為線下提供了多樣化的娛樂互動(dòng)形式，而通過設(shè)備攝像頭采集分析呈現(xiàn)的用戶畫像，將為景區(qū)管理和優(yōu)化提供可靠依據(jù)。

05. 教育行業(yè)解決方案

百度 DuMix AR 以領(lǐng)先 AR 技術(shù)為圖書/出版物進(jìn)行數(shù)字化改造，將 AR 內(nèi)容應(yīng)用于豐富的教學(xué)場景。面向教育行業(yè)開發(fā)者和從業(yè)者，提供從 SDK 接入到內(nèi)容生產(chǎn)制作全流程的平臺(tái)級(jí)解決方案，針對(duì)不同年齡段定制化 AR 內(nèi)容，推動(dòng)教育領(lǐng)域應(yīng)用的快速規(guī)模化落地。

人才培養(yǎng)方面，百度 DuMix AR 平臺(tái)與高校和教育培訓(xùn)機(jī)構(gòu)共同編撰專業(yè) AR 教育課程，并攜手百度云智學(xué)院推出 AR 技術(shù)認(rèn)證資質(zhì)體系，強(qiáng)化國內(nèi) AR 領(lǐng)域人才隊(duì)伍建設(shè)。百度擁有豐富的生態(tài)產(chǎn)品矩陣與線上教育平臺(tái)，百度 DuMix AR 將聯(lián)動(dòng)國內(nèi)優(yōu)質(zhì)教育出版資源，攜手專業(yè)教育垂類合作伙伴，建立更完善的 AR 教育生態(tài)。

06. 汽車行業(yè)解決方案

百度將 AR 技術(shù)應(yīng)用于汽車行業(yè)，可廣泛用于線上 AR 展示、產(chǎn)品說明及工業(yè)維修等各類產(chǎn)業(yè)相關(guān)場景，助力汽車產(chǎn)業(yè)上下游企業(yè)實(shí)現(xiàn)智能化轉(zhuǎn)型。同時(shí)，百度 DuMix AR 還將針對(duì)不同需求端場景，定制化提供從 SDK 到分發(fā)的整套嵌入式應(yīng)用方案。

以上六大解決方案涵蓋了當(dāng)前 AR 技術(shù)應(yīng)用的核心場景和領(lǐng)域。本次大會(huì)的 DuMix AR 解決方案應(yīng)用與實(shí)戰(zhàn)公開課，百度 AR 資深研發(fā)工程師、百度 AI 交互設(shè)計(jì)院資深用戶研究工程師及百度 AR 生態(tài)合作伙伴，為開發(fā)者解讀兩大交互系統(tǒng)背后的核心算法與技術(shù)，比較分享 AR 內(nèi)容制作的交互設(shè)計(jì)邏輯。

百度 AR 始終以開放心態(tài)將全棧 AR 核心技術(shù)、平臺(tái)產(chǎn)品與開發(fā)者共享，探索共建更多行業(yè)解決方案。依托視覺技術(shù)優(yōu)勢(shì)所構(gòu)建的虛實(shí)場景融合的基礎(chǔ)設(shè)施，不斷彌合虛擬世界與物理世界的間隙，攜 AR 能力擁抱 5G 時(shí)代與產(chǎn)業(yè)智能化時(shí)代的來臨。