?Firefly 所推出的 NVIDIA 系列的 AIBOX 可實現(xiàn)深度估計，該技術(shù)是一種從單張或者多張圖像預(yù)測場景深度信息的技術(shù)，廣泛應(yīng)用于計算機(jī)視覺領(lǐng)域，尤其是在三維重建、場景理解和環(huán)境感知等任務(wù)中起到了關(guān)鍵作用。

深度估計技術(shù)可以分為多目深度估計和單目深度估計。其中單目攝像頭具有成本低、設(shè)備普及、圖像獲取方便等優(yōu)勢，使得單目深度估計技術(shù)備受關(guān)注?。深度學(xué)習(xí)技術(shù)的快速發(fā)展也為單目深度估計提供了新的解決方案。

FastDepth

FastDepth 是一種用于嵌入式系統(tǒng)的深度估計算法，其核心特點是其在速度和準(zhǔn)確性之間的良好平衡，能夠在資源有限的設(shè)備上運(yùn)行，如智能手機(jī)或嵌入式系統(tǒng)。

網(wǎng)絡(luò)框架

為了減小模型體積，提高運(yùn)算效率，讓模型更適用于嵌入式設(shè)備，使用 NetAdapt 算法對 FastDepth 進(jìn)行了裁剪。

網(wǎng)絡(luò)裁剪：NetAdapt

下載源碼

$ git clone --recursive --depth=1 https://github.com/dusty-nv/jetson-inference

編譯 / 安裝

參考：https://github.com/dusty-nv/jetson-inference/blob/master/docs/building-repo-2.md

運(yùn)行示例

$ ./depthnet.py room_0.jpg output_room_0.jpg

應(yīng)用場景

自動駕駛

在自動駕駛汽車中，單目深度估計技術(shù)用于提供實時、低成本的深度信息，幫助車輛識別障礙物等，從而做出正確的駕駛決策?。

機(jī)器人導(dǎo)航

在工廠、倉庫和家庭等環(huán)境中，機(jī)器人需要精確的深度信息來識別障礙物并進(jìn)行避障。單目深度估計技術(shù)可以為機(jī)器人提供實時的深度感知能力，提高其導(dǎo)航和操作的準(zhǔn)確性?。

?增強(qiáng)現(xiàn)實（AR）

在增強(qiáng)現(xiàn)實應(yīng)用中，單目深度估計技術(shù)提供精確的深度信息，使得虛擬內(nèi)容能夠更加自然地融入現(xiàn)實場景，提升用戶體驗?。

?安全監(jiān)控

在安全監(jiān)控領(lǐng)域，單目深度估計技術(shù)幫助監(jiān)控系統(tǒng)識別出運(yùn)動物體的距離和速度，提高監(jiān)控的準(zhǔn)確性和實時性?。

?虛擬現(xiàn)實和游戲

在虛擬現(xiàn)實和游戲中，單目深度估計技術(shù)為用戶提供更加真實的沉浸式體驗，通過精確的深度信息，游戲和虛擬現(xiàn)實場景中的物體可以呈現(xiàn)出更加逼真的透視效果?。

硬件支持

搭載 NVIDIA 核心模組的 AIBOX 可實現(xiàn)單目深度估計。該系列產(chǎn)品均搭載 NVIDIA 原裝 Jetson Orin 核心板模組，可提供卓越的 AI 計算能力、大容量統(tǒng)一內(nèi)存和全面的軟件堆棧，能夠以超高能效驅(qū)動最新的生成式 AI 應(yīng)用。