肇觀電子產(chǎn)品總監(jiān)袁海先生受邀參加于10月在深圳舉辦的“智能無(wú)人機(jī)暨無(wú)人機(jī)反制技術(shù)應(yīng)用論壇”，并就【3D+AI視覺(jué)芯片讓無(wú)人機(jī)更加聰明懂“視”】發(fā)表主題演講。

在20世紀(jì)的最后10年，隨著視覺(jué)影像電子化跟數(shù)字化的落地，人們通過(guò)模式識(shí)別去解決工業(yè)場(chǎng)景下各類(lèi)的故障檢出和異常檢出，這一點(diǎn)是被普遍認(rèn)為在視覺(jué)領(lǐng)域感知能力的起點(diǎn)。隨著21世紀(jì)計(jì)算能力的增強(qiáng)，包括圖像數(shù)字化能力的改善，該類(lèi)的應(yīng)用逐步從工業(yè)領(lǐng)域往安防和農(nóng)業(yè)等各個(gè)行業(yè)進(jìn)行快速的演進(jìn)跟落地。 當(dāng)今到了21世紀(jì)的第二個(gè)10年，可以看到隨著神經(jīng)網(wǎng)絡(luò)模型的快速部署和成熟，特別是安防領(lǐng)域，大量通過(guò)模型完成對(duì)人體和人臉的識(shí)別追蹤與故障物的檢測(cè)分類(lèi)等，極大加強(qiáng)了安防領(lǐng)域?qū)σ曈X(jué)感知的能力要求，同時(shí)在云端、邊端和端側(cè)都提出不同的算力要求。無(wú)人機(jī)作為一個(gè)自主可控、自主可飛、集群可飛等在復(fù)雜場(chǎng)景下具有自主飛行能力的機(jī)器人設(shè)備，對(duì)于整體環(huán)境的3D感知和對(duì)場(chǎng)景的理解都提出了更高程度的要求。

讓無(wú)人機(jī)能夠更好的滿足對(duì)環(huán)境的整體感知的能力，肇觀電子以D系列自研芯片為基礎(chǔ)，推出了一攬子的前端算力加速方案，為客戶(hù)盡早的打通整條技術(shù)線，同時(shí)以極優(yōu)的成本與性能比，配合客戶(hù)在不同產(chǎn)品平臺(tái)上的方案落地。以此為基礎(chǔ)，肇觀的五大技術(shù)方案可以充分應(yīng)對(duì)無(wú)人機(jī)市場(chǎng)的綜合性訴求。

3D雙目深度

01

肇觀以自研芯片獨(dú)立的硬件Depth引擎，能夠提供最高VGA120幀的深度計(jì)算能力，滿足無(wú)人機(jī)從320至800P不同分辨率等級(jí)下的3D深度計(jì)算能力。同時(shí)可支持多組雙目模組并行深度計(jì)算，以及提供豐富的后處理算法，針對(duì)不同的使用場(chǎng)景做對(duì)應(yīng)的異常場(chǎng)景的過(guò)濾與處理。

多目接入

02

肇觀芯片可以直接支持4路攝像頭的接入，并且可以通過(guò)集線器或密集的數(shù)據(jù)通道方式完成更多組攝像頭的同時(shí)接入和分時(shí)接入，能夠提供完整多目硬件幀同步的檢測(cè)與同步能力。

VIO加速

03

為了應(yīng)對(duì)整體無(wú)人機(jī)對(duì)自身位姿和位置能力的感知和計(jì)算的加速要求，肇觀提供了支持眾多OpenCV的前置算力與前置模型，并且提供了特征點(diǎn)加光流的一體化方案，供無(wú)人機(jī)快速的完成整個(gè)VIO計(jì)算的加速處理。

AI

04

為了更好的理解無(wú)人機(jī)所看到的場(chǎng)景以及現(xiàn)場(chǎng)的各種情況，肇觀內(nèi)置的NPU引擎，配合DSP算力，能夠?yàn)榭蛻?hù)提供全量神經(jīng)網(wǎng)絡(luò)模型的部署，并且支持INT8跟FP16的混合算力支持。

畫(huà)質(zhì)

05

針對(duì)無(wú)人機(jī)在遠(yuǎn)距離、夜晚、逆光等各種復(fù)雜光線場(chǎng)景下的圖像和視頻采集需求，肇觀可以提供高質(zhì)量的圖像和視頻效果，支持低延時(shí)的4K30FPS的H.265的實(shí)時(shí)視頻流的存儲(chǔ)和4G/Wi-Fi圖傳。

自標(biāo)定

06

針對(duì)無(wú)人機(jī)出現(xiàn)易損、易跌落后解決快速修復(fù)現(xiàn)實(shí)場(chǎng)景的問(wèn)題，肇觀提供了自標(biāo)定的完整的功能，可以供客戶(hù)完成設(shè)備層面的功能整合，為無(wú)人機(jī)在現(xiàn)場(chǎng)的管損和快速修復(fù)提供了實(shí)戰(zhàn)化的基礎(chǔ)，最終能夠?yàn)闊o(wú)人機(jī)提供像素和亞像素級(jí)別的校準(zhǔn)能力。

肇觀電子作為一家國(guó)內(nèi)新興的智能芯片設(shè)計(jì)及視覺(jué)模組廠商，致力于以自研AI視覺(jué)芯片為基礎(chǔ)打造為各類(lèi)智慧設(shè)備、移動(dòng)設(shè)備、機(jī)器人提供核心的感知能力。肇觀電子由衷感謝本次深圳無(wú)人機(jī)協(xié)會(huì)的邀請(qǐng)，期待與行業(yè)專(zhuān)家和企業(yè)更加深入的交流與合作。

審核編輯：彭菁