近日,中科創(chuàng)達副總裁孫力在 Thunder World 2018 嵌入式 AI 人工智能技術大會上發(fā)表了主題演講,主要分享了以下三方面內容:
視覺的傳統(tǒng)技術和挑戰(zhàn)
嵌入式視覺+AI=智能視覺
智能視覺賦能行業(yè)的智能化升級轉型
視覺的傳統(tǒng)技術和挑戰(zhàn)
以手機相機為例,孫力講述了其視覺系統(tǒng)的復雜性。無論是底層驅動、核心算法的曝光、對焦,到最后視頻處理,相機的系統(tǒng)架構異常復雜。如果要做一個優(yōu)秀的圖像處理系統(tǒng),面臨攝像頭模組的光學特性、圖象處理的算法、芯片加速、畫質調優(yōu)等各方面的挑戰(zhàn)。
另一大麻煩是硬件碎片化,不同的操作系統(tǒng)要對畫質做一些復雜的調優(yōu)流程(實驗室和實際生活場景),此外需善用硬件加速,解決功耗和性能問題。
中科創(chuàng)達在畫質調優(yōu)方面的競爭力是調試整個圖像的 Pipeline 和 3A ,包括亮度、白平衡、對比度要精準對焦,不斷進行調試,做大量畫質的調優(yōu),以產(chǎn)生最優(yōu)圖像采集。調試過程分成三個階段:第一,先把基礎的軟件、驅動做好;第二,實驗室 tuning,包含 LSC, AWB, AE, Gamma, 對比度增強, CCM, DPC 等等;第三,真實場景 tuning,與參考設備對比拍攝。
他以汽車 ADAS 芯片為例講述了要滿足高畫質要求可能達到的技術趨勢,首先是從外置的 ISP,到 Bayer sensor 的轉變,目前主流的方案是用外置的 ISP,但在汽車里會經(jīng)歷類似于手機從功能機到智能機的演變。孫力稱,在自動駕駛芯片的圖像處理部分中科創(chuàng)達已有一定布局。
嵌入式 AI 算法應用的挑戰(zhàn)
目前很多算法都基于 2D 技術,但3D 技術會越來越普及。孫力指出,這主要取決于以下四個問題的解決:BOM 的成本,由于規(guī)?;膯栴},還沒有降低到平民化;其次,多種的光學設計,碎片化(ToF、結構光、雙目、主動雙目等);嵌入式的 SoC 的 depth map 的運算能力(pc 輔助到嵌入式 ARM based);多套使用的完整建模問題;RGBD,基于 3D 的人工智能學術進展。中科創(chuàng)達要解決的是圖像質量問題,比如寬動態(tài)/HDR、降噪,導入 AI 技術來解決圖像質量問題。
嵌入式 AI 算法挑戰(zhàn)主要在哪兒?孫力給出了三點:計算資源有限,終端處理平臺碎片化;另外應用場景和需求多樣化,準確率、速度等方面也需要做出取舍。
具體的優(yōu)化策略是什么?在他看來,最重要的還是要做深度結合的系統(tǒng)化設計。硬件上,在滿足功耗、發(fā)熱等限制條件的前提下,實現(xiàn) AI 運算加速引擎,其次是 DSP/GPU/NPU 等芯片的加速,同時要與芯片平臺進行深度合作。
而軟件方面,最核心的是降低算法模型的計算量,這需要設計適合的嵌入式平臺的模型架構,裁剪模型,與場景的深度整合和適配優(yōu)化以及共享深度學習模型中的超參數(shù)。
大會現(xiàn)場,中科創(chuàng)達展示了基于驍龍 845 芯片的終端智能分析盒子 AI Kit。
智能視覺賦能行業(yè)的智能化升級轉型
從智能視覺賦能行業(yè)方面,他的感受有三點:第一,客戶一定期望有一個整體解決方案,而不只是 AI。在整個過程中要幫客戶考慮數(shù)據(jù)獲取、數(shù)據(jù)隱私、訓練、私有云部署、生產(chǎn)管理系統(tǒng)等等。
第二,客戶衡量 AI 的價值不是多么高大上,而是根據(jù)生產(chǎn)力提升,運行效率優(yōu)化,及經(jīng)營業(yè)績能承受的預算能力來進行反推,這和目前昂貴的 AI 投入成本是個矛盾。
第三,行業(yè)客戶的工作流程,部門職能等還未能圍繞先進生產(chǎn)力來進行部署和優(yōu)化,客戶期望一次性投入建設一個人工智能平臺,可以一勞永逸否認自我訓練,升級和部署,對比于現(xiàn)在需要定制化的算法,未來圍繞需要解決的領域問題,少數(shù)的人力服務于算法的流程需要被建立。
最后,孫力再次強調,要給客戶提供整體解決方案,要從 AI 模型的構建到整個生命周期管理起來,而不僅是提供算法。另外,他表示不能太迷信 AI 算法,有時還要用傳統(tǒng)圖象處理算法,最終的目的是幫客戶解決問題。
-
人工智能
+關注
關注
1819文章
50170瀏覽量
266064 -
智能視覺
+關注
關注
0文章
135瀏覽量
9845 -
AI算法
+關注
關注
0文章
272瀏覽量
13176
原文標題:中科創(chuàng)達孫力:不迷信AI算法,智能視覺如何轉型升級?
文章出處:【微信號:rgznai100,微信公眾號:rgznai100】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
嵌入式AI視覺落地的那些事兒——直面AI視覺落地難的挑戰(zhàn)
嵌入式AI開發(fā)必看:杜絕幻覺,才是工業(yè)級IDE的核心底氣
半導體嵌入式單元測試的核心技術、工具選型與落地全流程
中科創(chuàng)達TurboX AI眼鏡亮相CES 2026
中科創(chuàng)達新一代AI座艙域控解決方案亮相CES 2026
嵌入式就業(yè)形勢好不好?
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+AI芯片的需求和挑戰(zhàn)
Java 在物聯(lián)網(wǎng)與嵌入式系統(tǒng)中的應用前景與挑戰(zhàn)
中科創(chuàng)達重磅發(fā)布ThunderSoft AI Box
中科創(chuàng)達2025上海車展圓滿收官
中科創(chuàng)達亮相微軟中國創(chuàng)想未來峰會
中科創(chuàng)達三大重磅產(chǎn)品發(fā)布
中科創(chuàng)達榮獲上汽通用“技術創(chuàng)領獎”
飛凌嵌入式「2025嵌入式及邊緣AI技術論壇」議程公布
中科創(chuàng)達孫力:視覺的傳統(tǒng)技術和挑戰(zhàn),嵌入式AI算法應用的挑戰(zhàn)
評論