深度探索：Intel RealSense D400系列產(chǎn)品全方位解析

在當今科技飛速發(fā)展的時代，深度相機在眾多領域展現(xiàn)出了巨大的應用潛力。Intel RealSense D400系列作為一款備受矚目的深度相機系統(tǒng)，以其先進的技術和卓越的性能，為開發(fā)者和工程師們帶來了全新的機遇。本文將深入剖析Intel RealSense D400系列產(chǎn)品，涵蓋其特點、組件規(guī)格、功能特性、固件與軟件支持以及系統(tǒng)集成等方面，為電子工程師們提供全面的參考。

文件下載：82635DSITR50P.pdf

一、產(chǎn)品概述

Intel RealSense D400系列是一套基于立體視覺技術的深度相機系統(tǒng)，具有小巧的體積和易于集成的特點，為系統(tǒng)集成商提供了極大的設計靈活性。該系列產(chǎn)品可應用于無人機、機器人、家庭監(jiān)控、虛擬現(xiàn)實以及PC外設等多個領域。其具備第二代立體深度相機系統(tǒng)，搭載專用的Intel RealSense Vision Processor D4，運用先進算法，配備紅外激光投影儀系統(tǒng)，采用全高清分辨率圖像傳感器，并支持主動電源管理。

產(chǎn)品特點

1. 先進的視覺處理器：第二代專用的Intel RealSense Vision Processor D4，具備強大的深度立體視覺處理能力。
2. 紅外激光投影儀：采用Class 1激光合規(guī)的紅外投影儀，可在低紋理場景中提高深度計算的準確性。
3. 高分辨率圖像傳感器：配備全高清分辨率的圖像傳感器，能夠提供清晰的圖像和深度數(shù)據(jù)。
4. 主動電源管理：支持主動電源管理，有效降低功耗。
5. 多種模塊可選：提供多種立體深度模塊選項，可滿足不同的使用需求。

產(chǎn)品型號

1. D415：具有高達1280x720的主動立體深度分辨率和1920x1080的RGB分辨率，深度對角視野超過70°，采用雙滾動快門傳感器，深度流幀率最高可達90 FPS，測量范圍為0.3m至超過10m。
2. D435/D435i：同樣具備高達1280x720的主動立體深度分辨率和1920x1080的RGB分辨率，深度對角視野超過90°，采用雙全局快門傳感器，深度流幀率最高可達90 FPS，測量范圍為0.2m至超過10m。其中，D435i還配備了慣性測量單元（IMU），可提供6自由度（6DoF）數(shù)據(jù)。

二、組件規(guī)格

1. 視覺處理器D4

視覺處理器D4是整個系統(tǒng)的核心，采用28nm工藝技術，具備5個MIPI相機端口，每個MIPI通道的數(shù)據(jù)傳輸速率可達750 Mbps。它支持USB 2.0/USB 3.1 Gen 1或MIPI接口與主機系統(tǒng)連接，具備圖像校正、IR投影儀控制、SPI接口、I2C端口和通用輸入輸出引腳等功能，還支持主動電源門控。

2. 時鐘和串行閃存

視覺處理器D4需要一個24 MHz的時鐘振蕩器，所有立體深度模塊所需的時鐘均由其生成。同時，它還需要一個16Mbit的串行閃存用于固件存儲，推薦使用IS25WP016或等效產(chǎn)品。

3. 立體深度模塊

立體深度模塊包含左右成像器、紅外投影儀、彩色傳感器、深度模塊連接器、隱私LED、加強件、標簽以及其他組件（如激光驅(qū)動器、EEPROM、電壓調(diào)節(jié)器等）。不同型號的立體深度模塊在基線、成像器類型、深度視野、紅外投影儀和彩色傳感器等方面存在差異。

4. 視覺處理器D4板

視覺處理器D4板為系統(tǒng)集成商提供了一種便捷的方式，將視覺處理器D4集成到系統(tǒng)中。它通過USB Type-C連接器和電纜連接到主機USB 3.1 Gen 1端口，包含視覺處理器D4、16Mb串行閃存、24MHz晶體時鐘、Realtek ISP、深度模塊插座、USB Type-C連接器、外部傳感器同步連接器、電壓調(diào)節(jié)器和安裝孔等組件。

5. 深度相機D400系列

深度相機D400系列集成了視覺處理器、立體深度模塊、RGB傳感器和慣性測量單元（部分型號），具有不同的機械尺寸、熱特性、存儲和操作條件。

三、功能特性

1. 數(shù)據(jù)傳輸

Intel RealSense Vision Processor D4深度成像系統(tǒng)通過立體視覺技術為主機系統(tǒng)提供高質(zhì)量的深度數(shù)據(jù)，可與彩色流同步。支持多種圖像格式，包括深度、亮度、顏色等，在USB 3.1 Gen1和USB 2.0接口下具有不同的分辨率和幀率組合。

2. 深度視野

深度視野是左右成像器視野的共同重疊區(qū)域，Vision Processor D4在此區(qū)域提供深度數(shù)據(jù)。不同型號的深度視野在水平、垂直和對角方向上有所不同，且會隨著場景距離的變化而變化。

3. 無效深度帶

由于立體視覺計算以左成像器為參考，在左右成像器視野中會存在一個非重疊區(qū)域，即無效深度帶。該區(qū)域的寬度與場景距離、基線、水平視野和焦距等因素有關。

4. 最小Z深度

最小Z深度是深度相機到場景的最小距離，Vision Processor D4在此距離以上提供深度數(shù)據(jù)。不同分辨率下，不同型號的最小Z深度有所不同。

5. 深度質(zhì)量

深度質(zhì)量通過一系列標準指標進行量化，包括深度準確性、填充率、深度標準差和像素時間噪聲等。在80%的深度視野內(nèi)，D400/D410/D415和D420/D430/D435/D435i在2米范圍內(nèi)的深度質(zhì)量指標均滿足一定要求。

6. 測量功率

不同型號的D400系列產(chǎn)品在不同操作系統(tǒng)（如Ubuntu 16.04和Windows 10）下的空閑功率、正常功率和最大功率有所不同，具體功率配置與分辨率、幀率和激光功率等因素有關。

7. 深度起始點和原點坐標

深度起始點是深度測量的參考點，對于深度模塊和深度相機有不同的參考位置。深度原點X - Y坐標是左成像器的X - Y中心。

8. 相機功能

深度相機提供了一系列控制功能，如手動曝光、手動增益、激光功率控制、自動曝光模式、預設和元數(shù)據(jù)控制等。彩色相機也提供了多種控制功能，如自動曝光模式、手動曝光時間、亮度、對比度、增益、色相、飽和度、銳度、伽馬、白平衡溫度控制等。

9. IMU規(guī)格

D435i配備了慣性測量單元（IMU），提供6自由度（6DoF）數(shù)據(jù)，加速度計范圍為±4g，采樣率為62.5或250 Hz；陀螺儀范圍為±1000 deg/s，采樣率為200或400 Hz，采樣時間戳精度為50 usec。

四、固件與軟件

1. 固件更新與恢復

固件包含操作指令，Vision Processor D4在運行時加載固件并編程組件寄存器。固件更新時，固件實用程序會向Vision Processor D4發(fā)出設備固件更新命令，Vision Processor D4將重置進入固件更新模式。固件更新有一定的限制，更新引擎會建立一個基線版本，允許最多20次返回以前的版本，之后只能更新到比基線版本更高的版本。固件恢復通過將DFU引腳置低并重置成像系統(tǒng)進入恢復模式，可通過固件客戶端實用程序觸發(fā)。

2. 軟件支持

Intel RealSense SDK 2.0是一個跨平臺的庫，用于與Intel RealSense D400系列產(chǎn)品配合使用。它是開源的，可從https://github.com/IntelRealSense/librealsense獲取。SDK至少包括Intel RealSense Viewer、深度質(zhì)量工具、調(diào)試工具、代碼示例和軟件包裝器等。

五、系統(tǒng)集成

1. 系統(tǒng)級框圖

系統(tǒng)主要由立體深度模塊、視覺處理器D4和主機處理器組成，通過USB 2.0/USB 3.1 Gen 1或MIPI接口連接。

2. 視覺處理器D4集成方式

有兩種集成方式：一是使用Vision Processor D4板，通過USB Type-C連接器和電纜連接到主機USB端口；二是將Vision Processor D4和支持組件直接放置在主機處理器主板上。

3. 電源供應

D4相機系統(tǒng)必須確保立體深度模塊和視覺處理器D4在同一電源軌上，以保證安全邏輯的鎖定。電源供應的實現(xiàn)應遵循相關建議。

4. 熱設計

系統(tǒng)熱設計必須確保組件的外殼溫度不超過限制。Vision Processor D4板和深度模塊的熱模型可用于進行熱評估和驗證系統(tǒng)熱設計。

5. 立體深度模塊安裝

立體深度模塊在系統(tǒng)集成和使用過程中應避免彎曲，可采用螺絲安裝或支架安裝的方式，安裝時應使用熱界面材料以提高熱耦合。同時，建議在模塊最高組件與覆蓋窗口之間保留至少0.3mm的氣隙。

6. 覆蓋設計和材料

立體深度模塊組件應覆蓋以減少灰塵和濕度，覆蓋材料應提供可接受的傳輸率，建議使用抗反射涂層以增加傳輸率。墊片可用于提供光學隔離和防塵保護，但需注意其對視野和模塊的影響。

7. 固件恢復

為支持固件恢復，必須將一個3.3V可控中斷連接到Vision Processor D4的DFU引腳。當固件損壞時，通過將D4復位并將DFU引腳拉高160ms，可使D4進入DFU模式進行恢復。

8. 校準支持

需要一個可訪問的USB端口來訪問主機系統(tǒng)，以便可靠地將圖像流傳輸?shù)酵獠縋C，確定校準參數(shù)并通過主機系統(tǒng)寫回相機校準參數(shù)。

9. 多相機硬件同步

Intel RealSense D400系列支持硬件同步信號，可實現(xiàn)多相機配置。通過連接外部傳感器同步連接器上的引腳5（SYNC）和引腳9（Ground），可使多個相機在相同的時間和幀率下進行捕獲。

10. 處理條件

在D4系統(tǒng)組裝和返工過程中，建議遵循JEDEC JESD625 - A要求標準，以提供一致的ESD保護水平。

六、平臺設計指南

1. 支持平臺

設計指南適用于Kaby Lake U/Y和Cherry Trail T4平臺，支持Vision Processor D4與USB主機接口、MIPI主機接口以及用于USB集成外設的Vision Processor D4板的實現(xiàn)。

2. 布線指南

不同接口的布線有不同的要求，包括最大段長度、最大允許通道插入損耗、阻抗匹配、過孔數(shù)量等。例如，USB 3.1 Gen 1接口的總布線長度應不超過15英寸，插入損耗應不超過15 dB @2.5GHz；MIPI接口的總插入損耗應不超過5.5 dB @750MHz。

七、監(jiān)管合規(guī)

1. 系統(tǒng)激光合規(guī)

Intel RealSense D400系列的認證可轉(zhuǎn)移到系統(tǒng)，無需系統(tǒng)重新認證，但最終產(chǎn)品的用戶手冊中必須包含相關的認證聲明、解釋標簽、警示聲明、制造商信息、US FDA accession number和NRTL聲明。

2. 生態(tài)合規(guī)

產(chǎn)品需符合中國RoHS聲明和Waste Electrical and Electronic Equipment (WEEE)要求。

八、總結(jié)

Intel RealSense D400系列產(chǎn)品以其先進的技術和豐富的功能，為電子工程師們提供了一個強大的深度相機解決方案。在設計和應用過程中，工程師們需要充分考慮產(chǎn)品的組件規(guī)格、功能特性、固件與軟件支持以及系統(tǒng)集成等方面的要求，以確保系統(tǒng)的穩(wěn)定運行和性能優(yōu)化。同時，遵循相關的平臺設計指南和監(jiān)管合規(guī)要求，也是保障產(chǎn)品質(zhì)量和安全性的重要環(huán)節(jié)。希望本文能為電子工程師們在使用Intel RealSense D400系列產(chǎn)品時提供有益的參考。

在實際應用中，你是否遇到過類似產(chǎn)品的集成難題？你對Intel RealSense D400系列產(chǎn)品的未來發(fā)展有什么期待？歡迎在評論區(qū)分享你的想法和經(jīng)驗。