深度探索：Intel RealSense D400系列產(chǎn)品全方位解析

在當(dāng)今科技飛速發(fā)展的時(shí)代，深度相機(jī)在眾多領(lǐng)域展現(xiàn)出了巨大的應(yīng)用潛力。Intel RealSense D400系列作為一款備受矚目的深度相機(jī)系統(tǒng)，以其先進(jìn)的技術(shù)和卓越的性能，為開發(fā)者和工程師們帶來(lái)了全新的機(jī)遇。本文將深入剖析Intel RealSense D400系列產(chǎn)品，涵蓋其特點(diǎn)、組件規(guī)格、功能特性、固件與軟件支持以及系統(tǒng)集成等方面，為電子工程師們提供全面的參考。

文件下載：82635DSITR50P.pdf

一、產(chǎn)品概述

Intel RealSense D400系列是一套基于立體視覺技術(shù)的深度相機(jī)系統(tǒng)，具有小巧的體積和易于集成的特點(diǎn)，為系統(tǒng)集成商提供了極大的設(shè)計(jì)靈活性。該系列產(chǎn)品可應(yīng)用于無(wú)人機(jī)、機(jī)器人、家庭監(jiān)控、虛擬現(xiàn)實(shí)以及PC外設(shè)等多個(gè)領(lǐng)域。其具備第二代立體深度相機(jī)系統(tǒng)，搭載專用的Intel RealSense Vision Processor D4，運(yùn)用先進(jìn)算法，配備紅外激光投影儀系統(tǒng)，采用全高清分辨率圖像傳感器，并支持主動(dòng)電源管理。

產(chǎn)品特點(diǎn)

1. 先進(jìn)的視覺處理器：第二代專用的Intel RealSense Vision Processor D4，具備強(qiáng)大的深度立體視覺處理能力。
2. 紅外激光投影儀：采用Class 1激光合規(guī)的紅外投影儀，可在低紋理場(chǎng)景中提高深度計(jì)算的準(zhǔn)確性。
3. 高分辨率圖像傳感器：配備全高清分辨率的圖像傳感器，能夠提供清晰的圖像和深度數(shù)據(jù)。
4. 主動(dòng)電源管理：支持主動(dòng)電源管理，有效降低功耗。
5. 多種模塊可選：提供多種立體深度模塊選項(xiàng)，可滿足不同的使用需求。

產(chǎn)品型號(hào)

1. D415：具有高達(dá)1280x720的主動(dòng)立體深度分辨率和1920x1080的RGB分辨率，深度對(duì)角視野超過70°，采用雙滾動(dòng)快門傳感器，深度流幀率最高可達(dá)90 FPS，測(cè)量范圍為0.3m至超過10m。
2. D435/D435i：同樣具備高達(dá)1280x720的主動(dòng)立體深度分辨率和1920x1080的RGB分辨率，深度對(duì)角視野超過90°，采用雙全局快門傳感器，深度流幀率最高可達(dá)90 FPS，測(cè)量范圍為0.2m至超過10m。其中，D435i還配備了慣性測(cè)量單元（IMU），可提供6自由度（6DoF）數(shù)據(jù)。

二、組件規(guī)格

1. 視覺處理器D4

視覺處理器D4是整個(gè)系統(tǒng)的核心，采用28nm工藝技術(shù)，具備5個(gè)MIPI相機(jī)端口，每個(gè)MIPI通道的數(shù)據(jù)傳輸速率可達(dá)750 Mbps。它支持USB 2.0/USB 3.1 Gen 1或MIPI接口與主機(jī)系統(tǒng)連接，具備圖像校正、IR投影儀控制、SPI接口、I2C端口和通用輸入輸出引腳等功能，還支持主動(dòng)電源門控。

2. 時(shí)鐘和串行閃存

視覺處理器D4需要一個(gè)24 MHz的時(shí)鐘振蕩器，所有立體深度模塊所需的時(shí)鐘均由其生成。同時(shí)，它還需要一個(gè)16Mbit的串行閃存用于固件存儲(chǔ)，推薦使用IS25WP016或等效產(chǎn)品。

3. 立體深度模塊

立體深度模塊包含左右成像器、紅外投影儀、彩色傳感器、深度模塊連接器、隱私LED、加強(qiáng)件、標(biāo)簽以及其他組件（如激光驅(qū)動(dòng)器、EEPROM、電壓調(diào)節(jié)器等）。不同型號(hào)的立體深度模塊在基線、成像器類型、深度視野、紅外投影儀和彩色傳感器等方面存在差異。

4. 視覺處理器D4板

視覺處理器D4板為系統(tǒng)集成商提供了一種便捷的方式，將視覺處理器D4集成到系統(tǒng)中。它通過USB Type-C連接器和電纜連接到主機(jī)USB 3.1 Gen 1端口，包含視覺處理器D4、16Mb串行閃存、24MHz晶體時(shí)鐘、Realtek ISP、深度模塊插座、USB Type-C連接器、外部傳感器同步連接器、電壓調(diào)節(jié)器和安裝孔等組件。

5. 深度相機(jī)D400系列

深度相機(jī)D400系列集成了視覺處理器、立體深度模塊、RGB傳感器和慣性測(cè)量單元（部分型號(hào)），具有不同的機(jī)械尺寸、熱特性、存儲(chǔ)和操作條件。

三、功能特性

1. 數(shù)據(jù)傳輸

Intel RealSense Vision Processor D4深度成像系統(tǒng)通過立體視覺技術(shù)為主機(jī)系統(tǒng)提供高質(zhì)量的深度數(shù)據(jù)，可與彩色流同步。支持多種圖像格式，包括深度、亮度、顏色等，在USB 3.1 Gen1和USB 2.0接口下具有不同的分辨率和幀率組合。

2. 深度視野

深度視野是左右成像器視野的共同重疊區(qū)域，Vision Processor D4在此區(qū)域提供深度數(shù)據(jù)。不同型號(hào)的深度視野在水平、垂直和對(duì)角方向上有所不同，且會(huì)隨著場(chǎng)景距離的變化而變化。

3. 無(wú)效深度帶

由于立體視覺計(jì)算以左成像器為參考，在左右成像器視野中會(huì)存在一個(gè)非重疊區(qū)域，即無(wú)效深度帶。該區(qū)域的寬度與場(chǎng)景距離、基線、水平視野和焦距等因素有關(guān)。

4. 最小Z深度

最小Z深度是深度相機(jī)到場(chǎng)景的最小距離，Vision Processor D4在此距離以上提供深度數(shù)據(jù)。不同分辨率下，不同型號(hào)的最小Z深度有所不同。

5. 深度質(zhì)量

深度質(zhì)量通過一系列標(biāo)準(zhǔn)指標(biāo)進(jìn)行量化，包括深度準(zhǔn)確性、填充率、深度標(biāo)準(zhǔn)差和像素時(shí)間噪聲等。在80%的深度視野內(nèi)，D400/D410/D415和D420/D430/D435/D435i在2米范圍內(nèi)的深度質(zhì)量指標(biāo)均滿足一定要求。

6. 測(cè)量功率

不同型號(hào)的D400系列產(chǎn)品在不同操作系統(tǒng)（如Ubuntu 16.04和Windows 10）下的空閑功率、正常功率和最大功率有所不同，具體功率配置與分辨率、幀率和激光功率等因素有關(guān)。

7. 深度起始點(diǎn)和原點(diǎn)坐標(biāo)

深度起始點(diǎn)是深度測(cè)量的參考點(diǎn)，對(duì)于深度模塊和深度相機(jī)有不同的參考位置。深度原點(diǎn)X - Y坐標(biāo)是左成像器的X - Y中心。

8. 相機(jī)功能

深度相機(jī)提供了一系列控制功能，如手動(dòng)曝光、手動(dòng)增益、激光功率控制、自動(dòng)曝光模式、預(yù)設(shè)和元數(shù)據(jù)控制等。彩色相機(jī)也提供了多種控制功能，如自動(dòng)曝光模式、手動(dòng)曝光時(shí)間、亮度、對(duì)比度、增益、色相、飽和度、銳度、伽馬、白平衡溫度控制等。

9. IMU規(guī)格

D435i配備了慣性測(cè)量單元（IMU），提供6自由度（6DoF）數(shù)據(jù)，加速度計(jì)范圍為±4g，采樣率為62.5或250 Hz；陀螺儀范圍為±1000 deg/s，采樣率為200或400 Hz，采樣時(shí)間戳精度為50 usec。

四、固件與軟件

1. 固件更新與恢復(fù)

固件包含操作指令，Vision Processor D4在運(yùn)行時(shí)加載固件并編程組件寄存器。固件更新時(shí)，固件實(shí)用程序會(huì)向Vision Processor D4發(fā)出設(shè)備固件更新命令，Vision Processor D4將重置進(jìn)入固件更新模式。固件更新有一定的限制，更新引擎會(huì)建立一個(gè)基線版本，允許最多20次返回以前的版本，之后只能更新到比基線版本更高的版本。固件恢復(fù)通過將DFU引腳置低并重置成像系統(tǒng)進(jìn)入恢復(fù)模式，可通過固件客戶端實(shí)用程序觸發(fā)。

2. 軟件支持

Intel RealSense SDK 2.0是一個(gè)跨平臺(tái)的庫(kù)，用于與Intel RealSense D400系列產(chǎn)品配合使用。它是開源的，可從https://github.com/IntelRealSense/librealsense獲取。SDK至少包括Intel RealSense Viewer、深度質(zhì)量工具、調(diào)試工具、代碼示例和軟件包裝器等。

五、系統(tǒng)集成

1. 系統(tǒng)級(jí)框圖

系統(tǒng)主要由立體深度模塊、視覺處理器D4和主機(jī)處理器組成，通過USB 2.0/USB 3.1 Gen 1或MIPI接口連接。

2. 視覺處理器D4集成方式

有兩種集成方式：一是使用Vision Processor D4板，通過USB Type-C連接器和電纜連接到主機(jī)USB端口；二是將Vision Processor D4和支持組件直接放置在主機(jī)處理器主板上。

3. 電源供應(yīng)

D4相機(jī)系統(tǒng)必須確保立體深度模塊和視覺處理器D4在同一電源軌上，以保證安全邏輯的鎖定。電源供應(yīng)的實(shí)現(xiàn)應(yīng)遵循相關(guān)建議。

4. 熱設(shè)計(jì)

系統(tǒng)熱設(shè)計(jì)必須確保組件的外殼溫度不超過限制。Vision Processor D4板和深度模塊的熱模型可用于進(jìn)行熱評(píng)估和驗(yàn)證系統(tǒng)熱設(shè)計(jì)。

5. 立體深度模塊安裝

立體深度模塊在系統(tǒng)集成和使用過程中應(yīng)避免彎曲，可采用螺絲安裝或支架安裝的方式，安裝時(shí)應(yīng)使用熱界面材料以提高熱耦合。同時(shí)，建議在模塊最高組件與覆蓋窗口之間保留至少0.3mm的氣隙。

6. 覆蓋設(shè)計(jì)和材料

立體深度模塊組件應(yīng)覆蓋以減少灰塵和濕度，覆蓋材料應(yīng)提供可接受的傳輸率，建議使用抗反射涂層以增加傳輸率。墊片可用于提供光學(xué)隔離和防塵保護(hù)，但需注意其對(duì)視野和模塊的影響。

7. 固件恢復(fù)

為支持固件恢復(fù)，必須將一個(gè)3.3V可控中斷連接到Vision Processor D4的DFU引腳。當(dāng)固件損壞時(shí)，通過將D4復(fù)位并將DFU引腳拉高160ms，可使D4進(jìn)入DFU模式進(jìn)行恢復(fù)。

8. 校準(zhǔn)支持

需要一個(gè)可訪問的USB端口來(lái)訪問主機(jī)系統(tǒng)，以便可靠地將圖像流傳輸?shù)酵獠縋C，確定校準(zhǔn)參數(shù)并通過主機(jī)系統(tǒng)寫回相機(jī)校準(zhǔn)參數(shù)。

9. 多相機(jī)硬件同步

Intel RealSense D400系列支持硬件同步信號(hào)，可實(shí)現(xiàn)多相機(jī)配置。通過連接外部傳感器同步連接器上的引腳5（SYNC）和引腳9（Ground），可使多個(gè)相機(jī)在相同的時(shí)間和幀率下進(jìn)行捕獲。

10. 處理?xiàng)l件

在D4系統(tǒng)組裝和返工過程中，建議遵循JEDEC JESD625 - A要求標(biāo)準(zhǔn)，以提供一致的ESD保護(hù)水平。

六、平臺(tái)設(shè)計(jì)指南

1. 支持平臺(tái)

設(shè)計(jì)指南適用于Kaby Lake U/Y和Cherry Trail T4平臺(tái)，支持Vision Processor D4與USB主機(jī)接口、MIPI主機(jī)接口以及用于USB集成外設(shè)的Vision Processor D4板的實(shí)現(xiàn)。

2. 布線指南

不同接口的布線有不同的要求，包括最大段長(zhǎng)度、最大允許通道插入損耗、阻抗匹配、過孔數(shù)量等。例如，USB 3.1 Gen 1接口的總布線長(zhǎng)度應(yīng)不超過15英寸，插入損耗應(yīng)不超過15 dB @2.5GHz；MIPI接口的總插入損耗應(yīng)不超過5.5 dB @750MHz。

七、監(jiān)管合規(guī)

1. 系統(tǒng)激光合規(guī)

Intel RealSense D400系列的認(rèn)證可轉(zhuǎn)移到系統(tǒng)，無(wú)需系統(tǒng)重新認(rèn)證，但最終產(chǎn)品的用戶手冊(cè)中必須包含相關(guān)的認(rèn)證聲明、解釋標(biāo)簽、警示聲明、制造商信息、US FDA accession number和NRTL聲明。

2. 生態(tài)合規(guī)

產(chǎn)品需符合中國(guó)RoHS聲明和Waste Electrical and Electronic Equipment (WEEE)要求。

八、總結(jié)

Intel RealSense D400系列產(chǎn)品以其先進(jìn)的技術(shù)和豐富的功能，為電子工程師們提供了一個(gè)強(qiáng)大的深度相機(jī)解決方案。在設(shè)計(jì)和應(yīng)用過程中，工程師們需要充分考慮產(chǎn)品的組件規(guī)格、功能特性、固件與軟件支持以及系統(tǒng)集成等方面的要求，以確保系統(tǒng)的穩(wěn)定運(yùn)行和性能優(yōu)化。同時(shí)，遵循相關(guān)的平臺(tái)設(shè)計(jì)指南和監(jiān)管合規(guī)要求，也是保障產(chǎn)品質(zhì)量和安全性的重要環(huán)節(jié)。希望本文能為電子工程師們?cè)谑褂肐ntel RealSense D400系列產(chǎn)品時(shí)提供有益的參考。

在實(shí)際應(yīng)用中，你是否遇到過類似產(chǎn)品的集成難題？你對(duì)Intel RealSense D400系列產(chǎn)品的未來(lái)發(fā)展有什么期待？歡迎在評(píng)論區(qū)分享你的想法和經(jīng)驗(yàn)。