一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

智能感知與物聯(lián)網(wǎng)技術(shù)研究所 ? 來源:未知 ? 2023-07-30 22:35 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

未來,HADAR 可能會徹底改變自動駕駛汽車和機器人感知周圍世界的方式。

環(huán)境感知是自動駕駛領(lǐng)域非常重要的一項任務(wù)。特別是在夜晚或者極端天氣的情況下,現(xiàn)有的視覺感知和激光雷達兩種方式對環(huán)境的感知和識別都效果不佳。這給自動駕駛等高風(fēng)險應(yīng)用帶來了挑戰(zhàn)。 有些研究提出使用熱像儀來彌補 LiDAR 和視覺攝像頭的缺陷。但由于物體不斷發(fā)出熱輻射,粒子會擴散到附近的環(huán)境中,導(dǎo)致熱成像變得模糊、無紋理,形成「鬼影ghost)」,使這種方法難以實際應(yīng)用。 現(xiàn)在,一種新的熱成像技術(shù)可以不受霧、煙和黑暗等視覺障礙的影響,使得自動駕駛汽車在黑暗中也能準(zhǔn)確感知環(huán)境。如下圖所示,與以前的熱成像(上)相比,新方法可以創(chuàng)建更清晰、更有質(zhì)感的夜間圖像(中和下)。

這種新方法是由來自普渡大學(xué)等機構(gòu)的研究者提出,他們開發(fā)了一種新的系統(tǒng), 稱為「熱輔助探測和測距系統(tǒng)(HADAR)」。借助該系統(tǒng),我們可以在環(huán)境不佳的情況下獲得精細(xì)的環(huán)境圖像,細(xì)節(jié)與精度和傳統(tǒng)相機在明亮日光下拍攝的圖像相當(dāng)。研究論文已登上 Nature 封面。

論文地址:https://www.nature.com/articles/s41586-023-06174-6 方法介紹 HADAR 能夠穿透光學(xué)雜波來檢測物體的溫度、材料成分和熱輻射模式,而不受霧、煙和黑暗等視覺障礙的影響。因此,無論一天中的時間或環(huán)境如何,HADAR 基于對深度和紋理的渲染都能創(chuàng)建極其詳細(xì)、清晰的圖像。

HADAR 與「鬼影」熱成像。 為了訓(xùn)練 HADAR 系統(tǒng),研究人員在夜間使用先進的熱成像相機和能夠顯示電磁波譜中能量輻射的成像傳感器,在戶外捕獲數(shù)據(jù)。他們還創(chuàng)建了對戶外環(huán)境的計算機模擬,以便進行額外的 AI 訓(xùn)練。 普渡大學(xué)電氣與計算機工程系教授、本文作者之一 Zubin Jacob 表示,「HADAR 學(xué)會了探測物體并估計與這些物體的距離,其精度是僅依靠傳統(tǒng)夜視技術(shù)的 10 倍。而且,HADAR 在夜間的性能與傳統(tǒng)物體檢測系統(tǒng)在白天的性能相當(dāng)?!?/span> 「聲納、雷達和激光雷達等會發(fā)出信號并返回反射,以推斷物體是否存在及其與物體的距離。除了相機所擁有的視覺能力之外,它們還提供了場景的額外信息,尤其是在環(huán)境照明較差的情況下,」Jacob 表示,「然而,HADAR 有著根本的不同,它利用不可見的紅外輻射來重建夜間場景,清晰度就像白天一樣?!?/span> 在沒有反射光的黑暗環(huán)境中, 傳統(tǒng)攝像頭無法很好地捕捉圖像,雷達和激光雷達也容易受到干擾。 熱成像技術(shù)通過捕獲環(huán)境中物體輻射的紅外光來重建場景。如下圖所示,新研究提出的 HADAR 方法改變了機器感知的方式:

76d0ad48-2ee5-11ee-815d-dac502259ad0.png

為了解決「鬼影」問題,該研究訓(xùn)練了一個神經(jīng)網(wǎng)絡(luò),用于對熱像儀發(fā)出的紅外信號進行分類,將物體的特征熱信號與導(dǎo)致「鬼影」的環(huán)境噪音分開。 該研究訓(xùn)練算法來識別已知材料(例如玻璃、木材或織物)的獨特發(fā)射光譜。通過識別場景中的這些已知特征,算法可以表征其觀察到的對象。那么剩下的就是環(huán)境信號和從這些物體反射到相機中的噪聲。通過向后評估噪聲信號的反射和散射方式,該算法可以填充每個對象的紋理信息,從而為圖像提供更高層次的細(xì)節(jié)。

772c40fe-2ee5-11ee-815d-dac502259ad0.png

處理后的圖像清晰地顯示了物體及其紋理,并且可以識別物體的材質(zhì)。最重要的是,HADAR 還能夠提供一種關(guān)鍵數(shù)據(jù) —— 環(huán)境物體的深度信息,這將有助于自動駕駛在復(fù)雜路況下進行環(huán)境感知。 773fcb92-2ee5-11ee-815d-dac502259ad0.png 下圖展示了一個 HADAR 的應(yīng)用實例。其中有一位真人和一個人形紙板。RGB 光學(xué)成像和稀疏 LiDAR 點云都無法區(qū)分真人和人形紙板,并且 LiDAR 還難以檢測到夜間條件下的車輛。而 HADAR 檢測到相應(yīng)材料區(qū)域(皮膚?+?織物)中的人,將其與紙板清楚地區(qū)分開來,克服了「幻象制動」問題。 7763d2d0-2ee5-11ee-815d-dac502259ad0.png ?下圖 6 展示了 HADAR 測距在夜間擊敗了最先進的熱測距技術(shù): 7849f90e-2ee5-11ee-815d-dac502259ad0.png 由于該方法能夠確定場景中的物體是由什么組成的,因此與傳統(tǒng)成像技術(shù)相結(jié)合,即使在白天,HADAR 也可以提供有關(guān)場景的獨特信息。


原文標(biāo)題:AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

文章出處:【微信公眾號:智能感知與物聯(lián)網(wǎng)技術(shù)研究所】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴

原文標(biāo)題:AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

文章出處:【微信號:tyutcsplab,微信公眾號:智能感知與物聯(lián)網(wǎng)技術(shù)研究所】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    卡車、礦車的自動駕駛和乘用車的自動駕駛在技術(shù)要求上有何不同?

    ,自動駕駛技術(shù)也得到了充足的應(yīng)用,但因應(yīng)用場景不同,技術(shù)的側(cè)重方向也有所區(qū)別。今天就來和大家聊聊這個話題。 應(yīng)用場景:開放道路vs封閉場地 首先要理解的是,
    的頭像 發(fā)表于 06-28 11:38 ?217次閱讀
    卡車、礦車的<b class='flag-5'>自動駕駛</b>和乘用車的<b class='flag-5'>自動駕駛</b>在技術(shù)要求上有何不同?

    自動駕駛安全基石:ODD

    和限制下可以正常工作,是自動駕駛安全的核心概念之。 ? 對于人類司機來說,在不同的道路上駕駛能力也有所區(qū)別,比如新手司機在些窄路、山路
    的頭像 發(fā)表于 05-19 03:52 ?5151次閱讀

    新能源車軟件單元測試深度解析:自動駕駛系統(tǒng)視角

    。 ?自動駕駛軟件的特殊性? ? 感知層: ?激光雷達、攝像頭等傳感器數(shù)據(jù)處理算法的單元測試需覆蓋極端場景。例如,激光雷達點云濾波算法在雨雪天氣下的噪聲抑制能力需通過邊界測試驗證。某廠商曾在測試中遺漏
    發(fā)表于 05-12 15:59

    AI將如何改變自動駕駛?

    [首發(fā)于智駕最前沿微信公眾號]五一假期繼續(xù)閑聊下,還歡迎大家隨意留言,隨著人工智能(AI)的發(fā)展,很多車企及自動駕駛供應(yīng)商正嘗試將AI融入自動駕駛
    的頭像 發(fā)表于 05-04 09:58 ?273次閱讀

    自動駕駛規(guī)控算法驗證到底需要什么場景仿真軟件?

    ModelBase-AD憑借其優(yōu)秀的靜態(tài)場景模型、隨機交通流模型、整車動力學(xué)模型,為各大主機廠和供應(yīng)商提供了準(zhǔn)確的自動駕駛規(guī)控算法驗證仿真環(huán)境,提升了自動駕駛規(guī)控算法驗證效率。
    的頭像 發(fā)表于 02-11 14:16 ?1581次閱讀
    <b class='flag-5'>自動駕駛</b>規(guī)控算法驗證到底需要什么<b class='flag-5'>樣</b>的<b class='flag-5'>場景</b>仿真軟件?

    NVIDIA DRIVE技術(shù)推動自動駕駛發(fā)展

    隨著 AI 技術(shù)的飛速發(fā)展,汽車行業(yè)正經(jīng)歷場深刻而全面的智能化轉(zhuǎn)型。以 NVIDIA DRIVE 技術(shù)為核心,NVIDIA 正在推動著自動駕駛技術(shù)不斷邁向新高度。2025 年,AI
    的頭像 發(fā)表于 12-29 16:02 ?770次閱讀

    文聊聊自動駕駛測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    隨著自動駕駛技術(shù)的飛速發(fā)展,自動駕駛測試的重要性也日益凸顯。自動駕駛測試不僅需要驗證車輛的感知、決策、控制模塊的獨立性能,還需確保系統(tǒng)在復(fù)雜場景中運行的整體可靠性。然而,
    的頭像 發(fā)表于 12-03 15:56 ?744次閱讀
    <b class='flag-5'>一</b>文聊聊<b class='flag-5'>自動駕駛</b>測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    什么是自動駕駛場景仿真軟件——VTD(Virtial Test Drive)?#ADAS #智能駕駛

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年11月20日 18:38:20

    自動駕駛算法數(shù)據(jù)鏈路是怎么的?#ADAS #智能駕駛

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年11月20日 13:05:51

    汽車?yán)走_回波發(fā)生器的技術(shù)原理和應(yīng)用場景

    的波束并向前傳播,以模擬真實的雷達工作環(huán)境。應(yīng)用場景 自動駕駛系統(tǒng)的開發(fā)和測試:在自動駕駛系統(tǒng)的開發(fā)和測試過程中,汽車電子雷達回波發(fā)生器可以模擬各種交通場景下的目標(biāo)回波,評估雷達系統(tǒng)在
    發(fā)表于 11-15 14:06

    基于場景自動駕駛驗證策略

    可選方案是將實際交通狀況做出總結(jié)生成具有高度代表性的交通場景,通過仿真分析自動駕駛系統(tǒng)在這些場景上的安全性。然而交通場景中元素的復(fù)雜性與失敗事件的罕見性導(dǎo)致難于準(zhǔn)確分析系統(tǒng)失敗的概率和
    的頭像 發(fā)表于 10-22 16:14 ?821次閱讀
    基于<b class='flag-5'>場景</b>的<b class='flag-5'>自動駕駛</b>驗證策略

    自動駕駛HiL測試方案 ——場景仿真3D演示#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年10月16日 10:55:35

    RISC-V適合什么的應(yīng)用場景

    解決方案,適用于邊緣計算、智能攝像頭、智能音箱等場景。 靈活性:RISC-V的開放性使得其能夠更容易地與各種AI框架和算法集成,滿足不同的AI應(yīng)用需求。 4. 自動駕駛和汽車電子 定制
    發(fā)表于 07-29 17:16

    FPGA在自動駕駛領(lǐng)域有哪些優(yōu)勢?

    FPGA(Field-Programmable Gate Array,現(xiàn)場可編程門陣列)在自動駕駛領(lǐng)域具有顯著的優(yōu)勢,這些優(yōu)勢使得FPGA成為自動駕駛技術(shù)中不可或缺的部分。以下是FPGA在
    發(fā)表于 07-29 17:11

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    是FPGA在自動駕駛領(lǐng)域的主要應(yīng)用: 、感知算法加速 圖像處理:自動駕駛中需要通過攝像頭獲取并識別道路信息和行駛環(huán)境,這涉及到大量的圖像處理任務(wù)。FPGA在處理圖像上的運算速度快,可并行性強,且功耗
    發(fā)表于 07-29 17:09