?Firefly 所推出的 NVIDIA 系列的 AIBOX 可實(shí)現(xiàn)深度估計(jì)，該技術(shù)是一種從單張或者多張圖像預(yù)測(cè)場(chǎng)景深度信息的技術(shù)，廣泛應(yīng)用于計(jì)算機(jī)視覺領(lǐng)域，尤其是在三維重建、場(chǎng)景理解和環(huán)境感知等任務(wù)中起到了關(guān)鍵作用。

深度估計(jì)技術(shù)可以分為多目深度估計(jì)和單目深度估計(jì)。其中單目攝像頭具有成本低、設(shè)備普及、圖像獲取方便等優(yōu)勢(shì)，使得單目深度估計(jì)技術(shù)備受關(guān)注?。深度學(xué)習(xí)技術(shù)的快速發(fā)展也為單目深度估計(jì)提供了新的解決方案。

FastDepth

FastDepth 是一種用于嵌入式系統(tǒng)的深度估計(jì)算法，其核心特點(diǎn)是其在速度和準(zhǔn)確性之間的良好平衡，能夠在資源有限的設(shè)備上運(yùn)行，如智能手機(jī)或嵌入式系統(tǒng)。

網(wǎng)絡(luò)框架

為了減小模型體積，提高運(yùn)算效率，讓模型更適用于嵌入式設(shè)備，使用 NetAdapt 算法對(duì) FastDepth 進(jìn)行了裁剪。

網(wǎng)絡(luò)裁剪：NetAdapt

下載源碼

$ git clone --recursive --depth=1 https://github.com/dusty-nv/jetson-inference

編譯 / 安裝

參考：https://github.com/dusty-nv/jetson-inference/blob/master/docs/building-repo-2.md

運(yùn)行示例

$ ./depthnet.py room_0.jpg output_room_0.jpg

應(yīng)用場(chǎng)景

自動(dòng)駕駛

在自動(dòng)駕駛汽車中，單目深度估計(jì)技術(shù)用于提供實(shí)時(shí)、低成本的深度信息，幫助車輛識(shí)別障礙物等，從而做出正確的駕駛決策?。

機(jī)器人導(dǎo)航

在工廠、倉(cāng)庫(kù)和家庭等環(huán)境中，機(jī)器人需要精確的深度信息來識(shí)別障礙物并進(jìn)行避障。單目深度估計(jì)技術(shù)可以為機(jī)器人提供實(shí)時(shí)的深度感知能力，提高其導(dǎo)航和操作的準(zhǔn)確性?。

?增強(qiáng)現(xiàn)實(shí)（AR）

在增強(qiáng)現(xiàn)實(shí)應(yīng)用中，單目深度估計(jì)技術(shù)提供精確的深度信息，使得虛擬內(nèi)容能夠更加自然地融入現(xiàn)實(shí)場(chǎng)景，提升用戶體驗(yàn)?。

?安全監(jiān)控

在安全監(jiān)控領(lǐng)域，單目深度估計(jì)技術(shù)幫助監(jiān)控系統(tǒng)識(shí)別出運(yùn)動(dòng)物體的距離和速度，提高監(jiān)控的準(zhǔn)確性和實(shí)時(shí)性?。

?虛擬現(xiàn)實(shí)和游戲

在虛擬現(xiàn)實(shí)和游戲中，單目深度估計(jì)技術(shù)為用戶提供更加真實(shí)的沉浸式體驗(yàn)，通過精確的深度信息，游戲和虛擬現(xiàn)實(shí)場(chǎng)景中的物體可以呈現(xiàn)出更加逼真的透視效果?。

硬件支持

搭載 NVIDIA 核心模組的 AIBOX 可實(shí)現(xiàn)單目深度估計(jì)。該系列產(chǎn)品均搭載 NVIDIA 原裝 Jetson Orin 核心板模組，可提供卓越的 AI 計(jì)算能力、大容量統(tǒng)一內(nèi)存和全面的軟件堆棧，能夠以超高能效驅(qū)動(dòng)最新的生成式 AI 應(yīng)用。