導(dǎo)語

友思特合作伙伴StereolabsZED SDK 5.1突破機(jī)器人平臺實時多相機(jī)感知技術(shù)極限，全新重構(gòu)采集與錄制管道，升級增強(qiáng)型位姿追蹤功能，新增近距深度感知能力，且官方原生支持 Jetson Thor 平臺。本次版本迭代讓 ZED 全生態(tài)體系，在工業(yè)場景中運(yùn)行更高速、更穩(wěn)定、更全能。

全新升級亮點(diǎn)

1. 為機(jī)器人場景重構(gòu)高性能采集系統(tǒng)

圖像采集系統(tǒng)完成全新重構(gòu)，全面支持實時低延遲多相機(jī)系統(tǒng)。ZED SDK 5.1 全新采集架構(gòu)，在采集、錄制、流媒體傳輸過程中，實現(xiàn)性能、可靠性雙提升，延遲進(jìn)一步降低。

在 Jetson 嵌入式設(shè)備上，流傳輸延遲現(xiàn)已低至100 毫秒以內(nèi)，為自主控制系統(tǒng)與遠(yuǎn)程操控打造更流暢的反饋閉環(huán)。錄制負(fù)載亦大幅優(yōu)化，SVO2 錄制模式的系統(tǒng)資源占用更少，長時連續(xù)錄制的穩(wěn)定性顯著增強(qiáng)。

NVIDIA Jetson AGX Thor 開發(fā)套件和 ZED 2i

基于 ZED Driver 1.3.1 版本，我們新增PREEMPT_RT 實時搶占內(nèi)核模式支持，為高時效性關(guān)鍵應(yīng)用提供更強(qiáng)的操控性與低延遲響應(yīng)能力，適配全系列 ZED Box、ZED Box Mini 及 NVIDIA AGX Orin 開發(fā)套件。

2. 原生支持 Jetson Thor 平臺

ZED SDK 性能

ZED SDK 5.1 同步適配英偉達(dá)全新嵌入式平臺 Jetson Thor，兼容 JetPack 7 開發(fā)套件，并搭載基于 Ubuntu 24.04 系統(tǒng)的全新板級支持包（BSP）。ZED 相機(jī)可充分發(fā)揮 Thor 的算力優(yōu)勢，性能提升最高達(dá) 2.5 倍，賦能邊緣端實現(xiàn)更豐富的感知能力（硬件編解碼功能將隨后續(xù) JetPack 版本更新正式上線）。

3. ZED Studio 全新登場：單應(yīng)用集成，無限相機(jī)掌控

多相機(jī)感知已成為新一代機(jī)器人技術(shù)的標(biāo)配方案。全新打造的 ZED Studio 工具，將所有相機(jī)、流傳輸及 SVO 文件管理功能，一站式整合至單款一體化應(yīng)用中。

全新 ZED Studio 多相機(jī)SDK

可同時查看并操控多臺相機(jī)，錄制同步數(shù)據(jù)流，并按需自定義布局，統(tǒng)籌回放內(nèi)容與實時畫面。

ZED Studio 核心功能支持：

?多相機(jī)實時可視化與同步錄制

?同步回放及流傳輸管理

?相機(jī)參數(shù)群組統(tǒng)一管控

?自動化命令行啟動配置

Windows 系統(tǒng)下，ZED Studio 已替代舊版查看器，成為打開 SVO 文件的默認(rèn)應(yīng)用程序 —— 為 ZED 生態(tài)管理打造統(tǒng)一跨平臺操作界面，體驗更一致。

4. Isaac? ROS 集成：ROS 2 實時性能全面加速

ZED ROS 2 封裝包完成重磅更新，實現(xiàn)與英偉達(dá) ?Isaac? ROS 框架無縫集成，助力開發(fā)者充分利用英偉達(dá) GPU 算力，高效完成實時感知及計算機(jī)視覺任務(wù)。

依托 NITROS（英偉達(dá) ?Isaac? ROS 傳輸協(xié)議），相較傳統(tǒng) CPU 傳輸方案，該封裝包的圖像話題發(fā)布延遲降低高達(dá) 90%。這一性能躍升源于 GPU 內(nèi)存共享機(jī)制，可徹底消除 CPU 與 GPU 之間高損耗的數(shù)據(jù)拷貝環(huán)節(jié)。

最終實現(xiàn)：數(shù)據(jù)流傳輸提速、CPU/GPU 算力負(fù)載降低，為高負(fù)載機(jī)器人及 AI 應(yīng)用，打造更流暢、更高效的 ROS 2 處理管道。

5. 近距深度感知能力重磅升級

全新升級的深度模塊，實現(xiàn)厘米級近距感知精度，成為操作、裝配、檢測類機(jī)器人的核心技術(shù)突破。即便目標(biāo)物體僅距相機(jī)數(shù)厘米，也能輸出穩(wěn)定無偽影的深度數(shù)據(jù) — 完美適配機(jī)械臂、人形機(jī)器人、夾爪、末端執(zhí)行器及近場場景重建等應(yīng)用場景。

近場場景下的自校準(zhǔn)能力同步優(yōu)化，對復(fù)雜工況的適配性大幅提升，可自動診斷并修正相機(jī)潛在標(biāo)定偏差，保障設(shè)備7×24 小時穩(wěn)定可靠運(yùn)行。

RGB 圖像（DROID 數(shù)據(jù)集） ZED SDK 5.0 版深度圖 ?VS ZED SDK 5.1 版深度圖

6. 面向?qū)嶋H部署場景的高魯棒性 SLAM 方案

第三代位姿追蹤模塊全面強(qiáng)化，抗動態(tài)遮擋、抗圖像失真能力大幅提升，可從容應(yīng)對更復(fù)雜的環(huán)境與動態(tài)移動物體，同時始終保持精準(zhǔn)定位。

視覺 SLAM 關(guān)鍵幀

全新SPATIAL_MEMORY 空間內(nèi)存狀態(tài)功能，可在相機(jī)重定位及回環(huán)檢測過程中提供更詳實的狀態(tài)反饋，助力工程師便捷監(jiān)控定位與追蹤性能。

更新后的示例可視化工具中新增的視覺 SLAM 2D模式

ZED SDK 5.1 新增2D 地面追蹤模式，專為地面移動機(jī)器人及輪式設(shè)備打造。該模式將追蹤范圍約束于運(yùn)動平面，有效減少定位漂移，大幅提升廠房車間、室內(nèi)導(dǎo)航等平面場景下的定位精度。

此外，SLAM 代碼示例同步升級，搭載更直觀的可視化界面，各類定位狀態(tài)與關(guān)鍵事件均可一鍵清晰呈現(xiàn)。

7. ZED X One 采集性能跨越式提升

依托全新實時虛擬立體視覺 API（Live Virtual Stereo API），雙 ZED X One 相機(jī)搭建立體成像對的效率實現(xiàn)質(zhì)的飛躍，CPU 算力效率提升約 2.5 倍。開發(fā)者可通過 SDK 直接配置虛擬成像對，甚至支持未標(biāo)定模式開展 SVO 錄制或原始圖像流傳輸，滿足后期校準(zhǔn)需求。

此次升級也正式宣告 ZED 媒體服務(wù)器（ZED Media Server）時代落幕，其原有功能已全面整合至 SDK 原生虛擬立體視覺工具中，且性能實現(xiàn)全面超越。

優(yōu)化后的虛擬立體視覺 CPU 負(fù)載

8. 原生魚眼標(biāo)定功能全新上線

ZED SDK 5.1 原生支持 OpenCV 魚眼標(biāo)定文件，實現(xiàn) ZED SDK 系列相機(jī)對魚眼鏡頭的直接適配應(yīng)用。這一功能可助力開發(fā)者輕松將廣角魚眼鏡頭集成至現(xiàn)有業(yè)務(wù)流程，是搭建大視場角導(dǎo)航系統(tǒng)或全景視覺設(shè)備的核心必備能力。如需為 ZED 相機(jī)搭配魚眼鏡頭完成標(biāo)定，可查閱 GitHub 官方開源倉庫。

原始魚眼視圖 校正后魚眼視圖

9. 更廣泛的兼容性，更精簡的安裝程序

ZED SDK 5.1 新增多項核心開發(fā)環(huán)境原生支持：

?支持 CUDA 13

?支持 JetPack 7

?支持 Python 3.14

?支持 C++17 及 C++20 標(biāo)準(zhǔn)

Python 開發(fā)者可通過CuPy 集成實現(xiàn) GPU 數(shù)據(jù)傳輸提速，配套全新示例腳本，直觀展示深度感知與目標(biāo)檢測功能的優(yōu)化調(diào)用方式。

SDK 安裝包同步完成輕量化優(yōu)化，Linux 系統(tǒng)下搭載 TensorRT 10 的安裝包體積縮減 40%；Docker 鏡像實現(xiàn)版本化管理，助力部署流程更便捷、開發(fā)環(huán)境復(fù)刻更高效。

結(jié)語：新一代空間AI感知方案

友思特合作伙伴Stereolabs ZED SDK 5.1 絕非只是進(jìn)行了簡單的版本迭代，更是空間 AI 技術(shù)在效率、精度、靈活性上的跨越式升級。從優(yōu)化的多相機(jī)采集、厘米級近距深度感知、增強(qiáng)型 SLAM 算法，到 Jetson Thor 平臺原生支持、全新 ZED Studio 工具上線，ZED 全生態(tài)模塊均完成深度迭代，助力您打造更高速、更智能、更可靠的視覺感知系統(tǒng)。

即刻體驗全新能力？立即下載ZED SDK 5.1，突破機(jī)器人與智能應(yīng)用的視覺感知邊界。

審核編輯 黃宇