近日，肇觀電子正式發(fā)布3D深度計算+AI加速芯片——D163A，可廣泛應用于包括各種形態(tài)機器人、AGV、無人機、可穿戴設(shè)備等多個領(lǐng)域。

我們所處的現(xiàn)實世界是一個三維空間，即3D立體空間；高級動物如哺乳類長了一雙眼睛，通過左右眼觀察到的信息的差別來判斷物體的遠近。而普通的照相機拍攝出來的照片卻是平面的，二維的。

如果要用計算機視覺的方式來獲得環(huán)境空間信息，根據(jù)二維照片的輸入，怎么實現(xiàn)呢？

對空間立體信息的感知能力是智能設(shè)備比如無人機、無人車、機器人的最重要的能力之一。四周物體和自己的相對位置比如方向、距離、運動方向、運動速度、運動加速度等信息，對于機器人在空間中判斷自身位置以及和周圍物體互動十分重要。

我們?nèi)绻胱寵C器人從點A到點B，機器人首先要確定什么是點A，什么是點B，如何從點A走到點B，如何規(guī)劃初始路徑，中間遇到障礙該如何動態(tài)調(diào)整路徑……完成這些任務都需要機器人具有幾何解算能力，而3D深度計算是幾何解算的基礎(chǔ)任務之一。

雙目立體視覺、結(jié)構(gòu)光、飛行時間傳感器（ToF）、激光雷達這些諸多技術(shù)路線都是為了解決3D深度信息獲取問題而生，每一種技術(shù)路線都由信號獲?。▊鞲衅鳎┖托盘柼幚恚ㄓ嬎悖﹥刹糠纸M成。

雙目立體視覺

雙目立體視覺是計算機視覺的一個經(jīng)典領(lǐng)域，其技術(shù)路線具有信息量大、不受陽光干擾、距離范圍從近到遠、無多徑干擾問題、傳感器成本低等諸多優(yōu)點，頗受學術(shù)界和工業(yè)界青睞；其代表應用為斯巴魯汽車的Eyesight高級輔助駕駛系統(tǒng)、無人機的飛行避障系統(tǒng)、火星車的視覺模塊、波士頓動力的機器人的視覺系統(tǒng)；但立體視覺需要消耗大量的計算力來處理，因此在傳統(tǒng)觀點來看代價十分高昂。

結(jié)構(gòu)光、飛行時間傳感器（ToF）、激光雷達這些技術(shù)主要是利用主動發(fā)射特定信息，然后讓接收器選擇性接收這些信息的原理，本質(zhì)上是通過增加傳感器的復雜度來降低對計算的要求，達到在算力不足的情況下獲取深度信息的目的，在各自領(lǐng)域有著諸多應用。

隨著應用日益復雜，工程師往往在通過傳感器獲取到這些原始信息之后，需要在后端計算引擎上面做降噪、增強、融合等各種進一步加工，這需要有充足算力的芯片來處理。

肇觀電子推出了D163A芯片，具有包括深度計算幾何引擎和AI計算引擎在內(nèi)的一系列加速器，將計算機視覺領(lǐng)域的應用推進了一大步。

D163A是一個完整的SoC主控芯片，其具有CPU、DSP、ISP、Codec、CV加速引擎、MCU、AI計算引擎和豐富的接口等在內(nèi)的一系列組件，支持Linux和RTOS操作系統(tǒng)，是一款適合作為信號處理的核心芯片。

D163A有著業(yè)界領(lǐng)先的數(shù)字信號處理能力，支持200余種通用數(shù)學計算算子，例如三角函數(shù)、對數(shù)、快速傅里葉變換、HoG、SVM、RANSAC，等等。

除了強大的3D深度計算能力和數(shù)字信號處理能力，D163A有著業(yè)界領(lǐng)先的AI計算加速能力包括領(lǐng)先的每TOPs處理幀數(shù)，實時數(shù)據(jù)流處理能力，支持高精度FP16神經(jīng)網(wǎng)絡模型無損部署以及高性能的INT8網(wǎng)絡支持能力。

D163A搭配肇觀電子推出的“5分鐘部署”的AI應用開發(fā)平臺Infer Studio，助力AI算法快速商用；

可支持雙目立體視覺、結(jié)構(gòu)光、飛行時間傳感器（ToF）、激光雷達等各種傳感器的信號處理，包括采集、降噪、增強、融合等后處理算法的加速；其高性能低功耗、適用于端側(cè)應用；

接口豐富，支持千兆以太網(wǎng)和USB3.0，支持各種操作系統(tǒng)，既可用作主控芯片也可用作協(xié)處理器芯片。

D163A在機器人自主避障、車與車之間的距離測算、活體檢測、手勢識別、空間定位、工業(yè)相機、AR/VR等各個方面具有廣泛的應用，搭載D163A的模組和系統(tǒng)已經(jīng)在包括智能叉車、可穿戴設(shè)備、無人機、工業(yè)檢測等多個領(lǐng)域批量商用。

讓智能設(shè)備具有人一樣的視覺感知和理解能力，在復雜的環(huán)境中完成復雜的工作，幫助到人們的工作和生活的方方面面，是肇觀電子始終不變的追求目標。肇觀電子此次發(fā)布3D深度計算+AI加速芯片D163A，是公司發(fā)展的又一項里程碑式事件，將助力打造機器人的“視覺系統(tǒng)”，推動智能機器人時代的加速到來。

原文標題：肇觀電子發(fā)布3D深度計算+AI加速芯片D163A，打造機器人的“視覺系統(tǒng)”

文章出處：【微信公眾號：你好張江】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。

責任編輯：haq