肇觀電子產(chǎn)品總監(jiān)袁海先生受邀參加于10月在深圳舉辦的“智能無人機暨無人機反制技術(shù)應(yīng)用論壇”，并就【3D+AI視覺芯片讓無人機更加聰明懂“視”】發(fā)表主題演講。

在20世紀(jì)的最后10年，隨著視覺影像電子化跟數(shù)字化的落地，人們通過模式識別去解決工業(yè)場景下各類的故障檢出和異常檢出，這一點是被普遍認(rèn)為在視覺領(lǐng)域感知能力的起點。隨著21世紀(jì)計算能力的增強，包括圖像數(shù)字化能力的改善，該類的應(yīng)用逐步從工業(yè)領(lǐng)域往安防和農(nóng)業(yè)等各個行業(yè)進行快速的演進跟落地。 當(dāng)今到了21世紀(jì)的第二個10年，可以看到隨著神經(jīng)網(wǎng)絡(luò)模型的快速部署和成熟，特別是安防領(lǐng)域，大量通過模型完成對人體和人臉的識別追蹤與故障物的檢測分類等，極大加強了安防領(lǐng)域?qū)σ曈X感知的能力要求，同時在云端、邊端和端側(cè)都提出不同的算力要求。無人機作為一個自主可控、自主可飛、集群可飛等在復(fù)雜場景下具有自主飛行能力的機器人設(shè)備，對于整體環(huán)境的3D感知和對場景的理解都提出了更高程度的要求。

讓無人機能夠更好的滿足對環(huán)境的整體感知的能力，肇觀電子以D系列自研芯片為基礎(chǔ)，推出了一攬子的前端算力加速方案，為客戶盡早的打通整條技術(shù)線，同時以極優(yōu)的成本與性能比，配合客戶在不同產(chǎn)品平臺上的方案落地。以此為基礎(chǔ)，肇觀的五大技術(shù)方案可以充分應(yīng)對無人機市場的綜合性訴求。

3D雙目深度

01

肇觀以自研芯片獨立的硬件Depth引擎，能夠提供最高VGA120幀的深度計算能力，滿足無人機從320至800P不同分辨率等級下的3D深度計算能力。同時可支持多組雙目模組并行深度計算，以及提供豐富的后處理算法，針對不同的使用場景做對應(yīng)的異常場景的過濾與處理。

多目接入

02

肇觀芯片可以直接支持4路攝像頭的接入，并且可以通過集線器或密集的數(shù)據(jù)通道方式完成更多組攝像頭的同時接入和分時接入，能夠提供完整多目硬件幀同步的檢測與同步能力。

VIO加速

03

為了應(yīng)對整體無人機對自身位姿和位置能力的感知和計算的加速要求，肇觀提供了支持眾多OpenCV的前置算力與前置模型，并且提供了特征點加光流的一體化方案，供無人機快速的完成整個VIO計算的加速處理。

AI

04

為了更好的理解無人機所看到的場景以及現(xiàn)場的各種情況，肇觀內(nèi)置的NPU引擎，配合DSP算力，能夠為客戶提供全量神經(jīng)網(wǎng)絡(luò)模型的部署，并且支持INT8跟FP16的混合算力支持。

畫質(zhì)

05

針對無人機在遠(yuǎn)距離、夜晚、逆光等各種復(fù)雜光線場景下的圖像和視頻采集需求，肇觀可以提供高質(zhì)量的圖像和視頻效果，支持低延時的4K30FPS的H.265的實時視頻流的存儲和4G/Wi-Fi圖傳。

自標(biāo)定

06

針對無人機出現(xiàn)易損、易跌落后解決快速修復(fù)現(xiàn)實場景的問題，肇觀提供了自標(biāo)定的完整的功能，可以供客戶完成設(shè)備層面的功能整合，為無人機在現(xiàn)場的管損和快速修復(fù)提供了實戰(zhàn)化的基礎(chǔ)，最終能夠為無人機提供像素和亞像素級別的校準(zhǔn)能力。

肇觀電子作為一家國內(nèi)新興的智能芯片設(shè)計及視覺模組廠商，致力于以自研AI視覺芯片為基礎(chǔ)打造為各類智慧設(shè)備、移動設(shè)備、機器人提供核心的感知能力。肇觀電子由衷感謝本次深圳無人機協(xié)會的邀請，期待與行業(yè)專家和企業(yè)更加深入的交流與合作。

審核編輯：彭菁