一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

激光雷達(dá)+攝像頭融合傳感器,有沒(méi)有搞頭?

Hobby觀察 ? 來(lái)源:電子發(fā)燒友 ? 作者:梁浩斌 ? 2025-01-17 00:19 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/梁浩斌)對(duì)于自動(dòng)駕駛而言,除了自動(dòng)駕駛算法之外,傳感器標(biāo)定一直都是一個(gè)難題,一般會(huì)在車輛出廠前駛?cè)氲綄iT(mén)的場(chǎng)地使用特定設(shè)備來(lái)對(duì)各種傳感器進(jìn)行校準(zhǔn)。尤其是多傳感器硬件下,激光雷達(dá)、攝像頭、毫米波雷達(dá)等,由于各個(gè)傳感器的位置不同,提供的數(shù)據(jù)也不同,所以包括數(shù)據(jù)融合,時(shí)間同步等問(wèn)題。

最近在CES上,京瓷展示了一套獨(dú)特的方案,似乎可以解決這些問(wèn)題。

世界上第一個(gè)實(shí)現(xiàn)光軸對(duì)齊的攝像頭+激光雷達(dá)融合傳感器

自動(dòng)駕駛應(yīng)用中,激光雷達(dá)和攝像頭同時(shí)使用十分普遍,激光雷達(dá)能夠提供長(zhǎng)距離、高精度的3D環(huán)境感知信息,從而在復(fù)雜環(huán)境以高精度檢測(cè)障礙物。但過(guò)去在自動(dòng)駕駛應(yīng)用中,激光雷達(dá)和攝像頭都來(lái)自獨(dú)立的模塊,而獨(dú)立模塊的數(shù)據(jù)中由于部署位置不同,傳感器的視察會(huì)導(dǎo)致傳感器之間校準(zhǔn)出現(xiàn)延遲。

wKgZPGeI3WGABBBvAAp_6nPOCXQ018.png
來(lái)源:京瓷


而京瓷推出的攝像頭-激光雷達(dá)融合傳感器,將攝像頭和高分辨率激光雷達(dá)集成在一個(gè)單元中,用于無(wú)視差、實(shí)時(shí)數(shù)據(jù)融合,確保高效和準(zhǔn)確的輸出結(jié)果。

京瓷表示,這是世界上第一款將攝像頭和激光雷達(dá)集成到一個(gè)光軸對(duì)齊的單元上的產(chǎn)品,這使得攝像頭圖像數(shù)據(jù)和激光雷達(dá)距離數(shù)據(jù)的實(shí)時(shí)融合,可以實(shí)現(xiàn)迄今為止最先進(jìn)的物體識(shí)別能力。

光軸即光學(xué)系統(tǒng)中光線傳播的中心線,通常是透鏡或反射鏡的對(duì)稱軸。光軸對(duì)齊一個(gè)常見(jiàn)應(yīng)用就是手機(jī)攝像頭中,鏡頭的多個(gè)鏡片和CMOS圖像傳感器中心對(duì)齊,避免像差、失真或光損失。

但對(duì)于一個(gè)多傳感器融合的系統(tǒng)而言,就會(huì)給光軸對(duì)準(zhǔn)帶來(lái)了極高的難度。首先激光雷達(dá)通過(guò)發(fā)射激光束并接收反射回來(lái)的信號(hào)來(lái)測(cè)量距離,生成點(diǎn)云數(shù)據(jù);而攝像頭則捕捉環(huán)境的二維圖像。這兩種傳感器的數(shù)據(jù)格式不同,坐標(biāo)系也不同,使得直接對(duì)齊它們的光軸變得極為復(fù)雜。

京瓷的這款產(chǎn)品結(jié)構(gòu),是將前置激光雷達(dá)獲得圖像的光軸,與放置在激光雷達(dá)前方的攝像頭的半反射鏡進(jìn)行對(duì)齊,也就是說(shuō)通過(guò)半反射鏡,實(shí)現(xiàn)兩個(gè)傳感器的光軸對(duì)齊。即使用這個(gè)攝像頭-激光雷達(dá)融合傳感器模塊后,無(wú)需再在兩個(gè)傳感器之間進(jìn)行校準(zhǔn)工作,將原本后端處理的傳感器信息融合,轉(zhuǎn)移到了傳感器端,將無(wú)視差的數(shù)據(jù)在傳感器硬件端就實(shí)現(xiàn)了融合疊加。

一般激光雷達(dá)會(huì)使用MEMS振鏡或是電機(jī)進(jìn)行掃描,但采用MEMS振鏡的激光雷達(dá)分辨率較低,而電機(jī)又容易出現(xiàn)磨損?;诰┐稍谔沾煞庋b和半導(dǎo)體制造技術(shù)上的優(yōu)勢(shì),該激光雷達(dá)可以提供更高分辨率的同時(shí),也能夠?qū)崿F(xiàn)更強(qiáng)的耐用性。

京瓷攝像頭-激光雷達(dá)融合傳感器最終可以實(shí)現(xiàn)高達(dá)0.045°的角分辨率,可以在100米距離遠(yuǎn)處掉落的30cm大小物體。

不過(guò),由于采用半反射鏡會(huì)對(duì)進(jìn)入傳感器的光線造成難以避免的衰減,所以這款融合傳感器在京瓷的規(guī)劃中分為兩個(gè)規(guī)格,分別是測(cè)距60m-100m,視場(chǎng)角100°×24°;測(cè)距120m-200m,視場(chǎng)角縮小至50°×15°。

“二合一傳感器”會(huì)成為自動(dòng)駕駛趨勢(shì)嗎?

將數(shù)據(jù)融合,從后端的算力芯片轉(zhuǎn)移到光學(xué)層面和傳感器端,對(duì)于自動(dòng)駕駛而言無(wú)疑具有重要意義。

在感知的準(zhǔn)確性上,當(dāng)不同類型的傳感器能夠精確對(duì)齊時(shí),它們提供的數(shù)據(jù)可以在同一坐標(biāo)系下進(jìn)行融合。這意味著可以更準(zhǔn)確地識(shí)別和定位環(huán)境中的物體,從而提高車輛對(duì)周圍環(huán)境的理解能力。

過(guò)去在一些支持純視覺(jué)自動(dòng)駕駛方案的觀點(diǎn)中能夠看到,多傳感器會(huì)導(dǎo)致系統(tǒng)決策出現(xiàn)困難,比如當(dāng)兩個(gè)傳感器獲取到的信息不一致,應(yīng)該相信哪一個(gè)?那么將激光雷達(dá)和攝像頭進(jìn)行光軸對(duì)齊后的融合傳感器中,輸出到后端算力系統(tǒng)中的數(shù)據(jù)就變成了深度和視覺(jué)圖像的融合數(shù)據(jù),對(duì)于自動(dòng)駕駛系統(tǒng)決策也能夠提供更可靠的信息?;诟鼫?zhǔn)確、更全面的環(huán)境信息,自動(dòng)駕駛系統(tǒng)的決策模塊可以做出更加合理和安全的駕駛決策。

同時(shí),有業(yè)內(nèi)人士表示,激光雷達(dá)和攝像頭實(shí)現(xiàn)光軸對(duì)齊后,對(duì)自動(dòng)駕駛標(biāo)定會(huì)產(chǎn)生很大幫助。由于目前圖像-點(diǎn)云融合在大多數(shù)情況下只能夠做到語(yǔ)義級(jí)別的后端融合,沒(méi)有發(fā)揮兩種傳感器互補(bǔ)的優(yōu)勢(shì)。如果能夠以低成本實(shí)現(xiàn)光軸對(duì)齊,兩種傳感器數(shù)據(jù)實(shí)現(xiàn)像素級(jí)融合,那么前端融合算法可能會(huì)迎來(lái)新一輪發(fā)展。

小結(jié):

根據(jù)京瓷官方的說(shuō)法,攝像頭-激光雷達(dá)融合傳感器計(jì)劃在2027年實(shí)現(xiàn)商業(yè)化,目前市面上確實(shí)還未看到有其他廠商推出這類產(chǎn)品,印象中,幾年前小編在與一些激光雷達(dá)廠商交流時(shí),也有人提到過(guò)相似的概念,但當(dāng)時(shí)也只是對(duì)激光雷達(dá)未來(lái)發(fā)展路線的一種設(shè)想。到底這類產(chǎn)品在實(shí)際應(yīng)用中能夠給自動(dòng)駕駛帶來(lái)多大的收益,或許要看接下來(lái)會(huì)不會(huì)有其他廠商嘗試跟進(jìn)了。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 激光雷達(dá)
    +關(guān)注

    關(guān)注

    971

    文章

    4236

    瀏覽量

    192876
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    激光雷達(dá)與車載攝像頭感知沖突應(yīng)以哪個(gè)為準(zhǔn)?

    [首發(fā)于智駕最前沿微信公眾號(hào)]在自動(dòng)駕駛系統(tǒng)中,傳感器感知層的可靠性直接關(guān)系到車輛的安全與行駛效率。激光雷達(dá)(LiDAR)和攝像頭(Camera)是當(dāng)前自動(dòng)駕駛平臺(tái)上最常見(jiàn)的兩種感知設(shè)備。它們各自
    的頭像 發(fā)表于 06-19 09:08 ?278次閱讀
    <b class='flag-5'>激光雷達(dá)</b>與車載<b class='flag-5'>攝像頭</b>感知沖突應(yīng)以哪個(gè)為準(zhǔn)?

    SPAD席卷車載激光雷達(dá)市場(chǎng)

    電子發(fā)燒友網(wǎng)報(bào)道(文/梁浩斌)上周我們報(bào)道了一款新推出的激光雷達(dá)ASIC方案,值得關(guān)注的是該方案中與ASIC搭配的傳感器均選擇了SiPM。當(dāng)然從成本的角度來(lái)看,作為第三方的激光雷達(dá)ASIC方案
    的頭像 發(fā)表于 06-13 00:59 ?4201次閱讀

    自動(dòng)駕駛中純視覺(jué)替代不了激光雷達(dá)?

    [首發(fā)于智駕最前沿微信公眾號(hào)]隨著自動(dòng)駕駛技術(shù)的不斷發(fā)展,純視覺(jué)和激光雷達(dá)(LiDAR)兩種主流環(huán)境感知成為了大家的熱議話題?;?b class='flag-5'>攝像頭的“純視覺(jué)”方案在成本、分辨率和語(yǔ)義理解方面取得顯著優(yōu)勢(shì)
    的頭像 發(fā)表于 06-11 09:06 ?277次閱讀

    超酷的樹(shù)莓派激光雷達(dá)掃描儀!

    摘要這款DIY的PiLiDAR掃描儀項(xiàng)目利用樹(shù)莓派進(jìn)行激光雷達(dá)測(cè)繪。激光雷達(dá)通過(guò)發(fā)射激光來(lái)掃描周圍環(huán)境,從而創(chuàng)建三維模型。該項(xiàng)目需要樹(shù)莓派4、攝像頭、電機(jī)以及
    的頭像 發(fā)表于 06-01 08:33 ?327次閱讀
    超酷的樹(shù)莓派<b class='flag-5'>激光雷達(dá)</b>掃描儀!

    攝像頭傳感器無(wú)法通過(guò)CX3進(jìn)行直播怎么解決?

    我有一個(gè) 246 萬(wàn)像素 1920x1280 的攝像頭傳感器。 格式 UYVY 是一個(gè) 16 位傳感器。 我為 CX3 的這個(gè)傳感器開(kāi)發(fā)了一個(gè)驅(qū)動(dòng)程序,并查看了 UART 輸出,
    發(fā)表于 05-27 06:54

    激光雷達(dá)技術(shù)在自動(dòng)駕駛汽車中的應(yīng)用

    在不斷發(fā)展的汽車技術(shù)領(lǐng)域,LiDAR(光探測(cè)和測(cè)距)傳感器——也就是“激光雷達(dá)”——已成為關(guān)鍵組件,隨著汽車行業(yè)向自主化邁進(jìn),激光雷達(dá)傳感器在提供安全導(dǎo)航所需的實(shí)時(shí)3D地圖方面發(fā)揮著關(guān)
    的頭像 發(fā)表于 04-10 10:11 ?1404次閱讀
    <b class='flag-5'>激光雷達(dá)</b>技術(shù)在自動(dòng)駕駛汽車中的應(yīng)用

    激光雷達(dá)技術(shù):自動(dòng)駕駛的應(yīng)用與發(fā)展趨勢(shì)

    隨著近些年科技不斷地創(chuàng)新,自動(dòng)駕駛技術(shù)正逐漸從概念走向現(xiàn)實(shí),成為汽車行業(yè)的重要發(fā)展方向。在眾多傳感器技術(shù)中,激光雷達(dá)(LiDAR)因其獨(dú)特的優(yōu)勢(shì),被認(rèn)為是實(shí)現(xiàn)高級(jí)自動(dòng)駕駛功能的關(guān)鍵。激光雷達(dá)技術(shù)
    的頭像 發(fā)表于 03-10 10:16 ?945次閱讀
    <b class='flag-5'>激光雷達(dá)</b>技術(shù):自動(dòng)駕駛的應(yīng)用與發(fā)展趨勢(shì)

    BEVFusion —面向自動(dòng)駕駛的多任務(wù)多傳感器高效融合框架技術(shù)詳解

    ,激光雷達(dá)在3D視圖中捕獲數(shù)據(jù)。1. 核心目標(biāo)與創(chuàng)新?目標(biāo)? 解決多模態(tài)傳感器攝像頭、激光雷達(dá)等)在3D感知任務(wù)中的異構(gòu)數(shù)據(jù)融合難題,實(shí)現(xiàn)
    的頭像 發(fā)表于 02-26 20:33 ?3865次閱讀
    BEVFusion —面向自動(dòng)駕駛的多任務(wù)多<b class='flag-5'>傳感器</b>高效<b class='flag-5'>融合</b>框架技術(shù)詳解

    京瓷發(fā)布全球首款“攝像頭-激光雷達(dá)融合傳感器

    近日,京瓷株式會(huì)社在傳感器技術(shù)領(lǐng)域取得了重大突破,成功開(kāi)發(fā)出全球首款獨(dú)特的“攝像頭-激光雷達(dá)(Camera-LiDAR)”融合傳感器。這款
    的頭像 發(fā)表于 01-20 14:08 ?1060次閱讀

    激光雷達(dá)在SLAM算法中的應(yīng)用綜述

    SLAM算法運(yùn)行的重要傳感器?;?b class='flag-5'>激光雷達(dá)的SLAM算法,對(duì)激光雷達(dá)SLAM總體框架進(jìn)行介紹,詳細(xì)闡述前端里程計(jì)、后端優(yōu)化、回環(huán)檢測(cè)、地圖構(gòu)建模塊的作用并總結(jié)所使用的算法;按由2D到 3D,單
    的頭像 發(fā)表于 11-12 10:30 ?2550次閱讀
    <b class='flag-5'>激光雷達(dá)</b>在SLAM算法中的應(yīng)用綜述

    昱感微“多維像素”超級(jí)攝像頭產(chǎn)品方案發(fā)布!

    昱感微“多維像素”超級(jí)攝像頭采用最前沿的多傳感器融合技術(shù),將可見(jiàn)光攝像頭、紅外攝像頭、4D毫
    的頭像 發(fā)表于 11-06 10:49 ?856次閱讀
    昱感微“多維像素”超級(jí)<b class='flag-5'>攝像頭</b>產(chǎn)品方案發(fā)布!

    激光雷達(dá)與其他傳感器的比較

    在現(xiàn)代科技領(lǐng)域,傳感器技術(shù)的發(fā)展日新月異,為各行各業(yè)提供了強(qiáng)大的數(shù)據(jù)支持。激光雷達(dá)作為一種高精度的遙感技術(shù),近年來(lái)在多個(gè)領(lǐng)域得到了廣泛應(yīng)用。然而,激光雷達(dá)并非萬(wàn)能,它與其他傳感器相比,
    的頭像 發(fā)表于 10-27 10:41 ?1523次閱讀

    經(jīng)緯恒潤(rùn)攜手Arbe開(kāi)發(fā)基于雷達(dá)的高級(jí)輔助駕駛系統(tǒng)

    摘要:該高級(jí)輔助駕駛系統(tǒng)將融合攝像頭傳感器雷達(dá)技術(shù),旨在為中國(guó)汽車制造商帶來(lái)與激光雷達(dá)系統(tǒng)相媲美的質(zhì)量及功能。 新一代4D成像
    的頭像 發(fā)表于 09-27 10:17 ?545次閱讀
    經(jīng)緯恒潤(rùn)攜手Arbe開(kāi)發(fā)基于<b class='flag-5'>雷達(dá)</b>的高級(jí)輔助駕駛系統(tǒng)

    聚焦MIPI 系列之三:汽車SerDes – 實(shí)現(xiàn)更好的ADAS攝像頭傳感器

    汽車 (AV) 領(lǐng)域。例如,Waymo 的第五代自動(dòng)駕駛汽車配備了至少29個(gè)攝像頭,此外還有五個(gè)激光雷達(dá)和六個(gè)雷達(dá)。 未來(lái)的自動(dòng)駕駛汽車需要支持總帶寬在 3 到 40 GBit/s(約 1.4 到 19
    的頭像 發(fā)表于 08-01 10:18 ?942次閱讀
    聚焦MIPI 系列之三:汽車SerDes – 實(shí)現(xiàn)更好的ADAS<b class='flag-5'>攝像頭</b><b class='flag-5'>傳感器</b>