一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

激光雷達(dá)+攝像頭融合傳感器,有沒有搞頭?

Hobby觀察 ? 來源:電子發(fā)燒友 ? 作者:梁浩斌 ? 2025-01-17 00:19 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/梁浩斌)對于自動駕駛而言,除了自動駕駛算法之外,傳感器標(biāo)定一直都是一個難題,一般會在車輛出廠前駛?cè)氲綄iT的場地使用特定設(shè)備來對各種傳感器進(jìn)行校準(zhǔn)。尤其是多傳感器硬件下,激光雷達(dá)、攝像頭、毫米波雷達(dá)等,由于各個傳感器的位置不同,提供的數(shù)據(jù)也不同,所以包括數(shù)據(jù)融合,時間同步等問題。

最近在CES上,京瓷展示了一套獨特的方案,似乎可以解決這些問題。

世界上第一個實現(xiàn)光軸對齊的攝像頭+激光雷達(dá)融合傳感器

自動駕駛應(yīng)用中,激光雷達(dá)和攝像頭同時使用十分普遍,激光雷達(dá)能夠提供長距離、高精度的3D環(huán)境感知信息,從而在復(fù)雜環(huán)境以高精度檢測障礙物。但過去在自動駕駛應(yīng)用中,激光雷達(dá)和攝像頭都來自獨立的模塊,而獨立模塊的數(shù)據(jù)中由于部署位置不同,傳感器的視察會導(dǎo)致傳感器之間校準(zhǔn)出現(xiàn)延遲。

wKgZPGeI3WGABBBvAAp_6nPOCXQ018.png
來源:京瓷


而京瓷推出的攝像頭-激光雷達(dá)融合傳感器,將攝像頭和高分辨率激光雷達(dá)集成在一個單元中,用于無視差、實時數(shù)據(jù)融合,確保高效和準(zhǔn)確的輸出結(jié)果。

京瓷表示,這是世界上第一款將攝像頭和激光雷達(dá)集成到一個光軸對齊的單元上的產(chǎn)品,這使得攝像頭圖像數(shù)據(jù)和激光雷達(dá)距離數(shù)據(jù)的實時融合,可以實現(xiàn)迄今為止最先進(jìn)的物體識別能力。

光軸即光學(xué)系統(tǒng)中光線傳播的中心線,通常是透鏡或反射鏡的對稱軸。光軸對齊一個常見應(yīng)用就是手機攝像頭中,鏡頭的多個鏡片和CMOS圖像傳感器中心對齊,避免像差、失真或光損失。

但對于一個多傳感器融合的系統(tǒng)而言,就會給光軸對準(zhǔn)帶來了極高的難度。首先激光雷達(dá)通過發(fā)射激光束并接收反射回來的信號來測量距離,生成點云數(shù)據(jù);而攝像頭則捕捉環(huán)境的二維圖像。這兩種傳感器的數(shù)據(jù)格式不同,坐標(biāo)系也不同,使得直接對齊它們的光軸變得極為復(fù)雜。

京瓷的這款產(chǎn)品結(jié)構(gòu),是將前置激光雷達(dá)獲得圖像的光軸,與放置在激光雷達(dá)前方的攝像頭的半反射鏡進(jìn)行對齊,也就是說通過半反射鏡,實現(xiàn)兩個傳感器的光軸對齊。即使用這個攝像頭-激光雷達(dá)融合傳感器模塊后,無需再在兩個傳感器之間進(jìn)行校準(zhǔn)工作,將原本后端處理的傳感器信息融合,轉(zhuǎn)移到了傳感器端,將無視差的數(shù)據(jù)在傳感器硬件端就實現(xiàn)了融合疊加。

一般激光雷達(dá)會使用MEMS振鏡或是電機進(jìn)行掃描,但采用MEMS振鏡的激光雷達(dá)分辨率較低,而電機又容易出現(xiàn)磨損?;诰┐稍谔沾煞庋b和半導(dǎo)體制造技術(shù)上的優(yōu)勢,該激光雷達(dá)可以提供更高分辨率的同時,也能夠?qū)崿F(xiàn)更強的耐用性。

京瓷攝像頭-激光雷達(dá)融合傳感器最終可以實現(xiàn)高達(dá)0.045°的角分辨率,可以在100米距離遠(yuǎn)處掉落的30cm大小物體。

不過,由于采用半反射鏡會對進(jìn)入傳感器的光線造成難以避免的衰減,所以這款融合傳感器在京瓷的規(guī)劃中分為兩個規(guī)格,分別是測距60m-100m,視場角100°×24°;測距120m-200m,視場角縮小至50°×15°。

“二合一傳感器”會成為自動駕駛趨勢嗎?

將數(shù)據(jù)融合,從后端的算力芯片轉(zhuǎn)移到光學(xué)層面和傳感器端,對于自動駕駛而言無疑具有重要意義。

在感知的準(zhǔn)確性上,當(dāng)不同類型的傳感器能夠精確對齊時,它們提供的數(shù)據(jù)可以在同一坐標(biāo)系下進(jìn)行融合。這意味著可以更準(zhǔn)確地識別和定位環(huán)境中的物體,從而提高車輛對周圍環(huán)境的理解能力。

過去在一些支持純視覺自動駕駛方案的觀點中能夠看到,多傳感器會導(dǎo)致系統(tǒng)決策出現(xiàn)困難,比如當(dāng)兩個傳感器獲取到的信息不一致,應(yīng)該相信哪一個?那么將激光雷達(dá)和攝像頭進(jìn)行光軸對齊后的融合傳感器中,輸出到后端算力系統(tǒng)中的數(shù)據(jù)就變成了深度和視覺圖像的融合數(shù)據(jù),對于自動駕駛系統(tǒng)決策也能夠提供更可靠的信息。基于更準(zhǔn)確、更全面的環(huán)境信息,自動駕駛系統(tǒng)的決策模塊可以做出更加合理和安全的駕駛決策。

同時,有業(yè)內(nèi)人士表示,激光雷達(dá)和攝像頭實現(xiàn)光軸對齊后,對自動駕駛標(biāo)定會產(chǎn)生很大幫助。由于目前圖像-點云融合在大多數(shù)情況下只能夠做到語義級別的后端融合,沒有發(fā)揮兩種傳感器互補的優(yōu)勢。如果能夠以低成本實現(xiàn)光軸對齊,兩種傳感器數(shù)據(jù)實現(xiàn)像素級融合,那么前端融合算法可能會迎來新一輪發(fā)展。

小結(jié):

根據(jù)京瓷官方的說法,攝像頭-激光雷達(dá)融合傳感器計劃在2027年實現(xiàn)商業(yè)化,目前市面上確實還未看到有其他廠商推出這類產(chǎn)品,印象中,幾年前小編在與一些激光雷達(dá)廠商交流時,也有人提到過相似的概念,但當(dāng)時也只是對激光雷達(dá)未來發(fā)展路線的一種設(shè)想。到底這類產(chǎn)品在實際應(yīng)用中能夠給自動駕駛帶來多大的收益,或許要看接下來會不會有其他廠商嘗試跟進(jìn)了。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 激光雷達(dá)
    +關(guān)注

    關(guān)注

    971

    文章

    4155

    瀏覽量

    191595
收藏 人收藏

    評論

    相關(guān)推薦

    激光雷達(dá)技術(shù)在自動駕駛汽車中的應(yīng)用

    在不斷發(fā)展的汽車技術(shù)領(lǐng)域,LiDAR(光探測和測距)傳感器——也就是“激光雷達(dá)”——已成為關(guān)鍵組件,隨著汽車行業(yè)向自主化邁進(jìn),激光雷達(dá)傳感器在提供安全導(dǎo)航所需的實時3D地圖方面發(fā)揮著關(guān)
    的頭像 發(fā)表于 04-10 10:11 ?933次閱讀
    <b class='flag-5'>激光雷達(dá)</b>技術(shù)在自動駕駛汽車中的應(yīng)用

    激光雷達(dá)技術(shù):自動駕駛的應(yīng)用與發(fā)展趨勢

    隨著近些年科技不斷地創(chuàng)新,自動駕駛技術(shù)正逐漸從概念走向現(xiàn)實,成為汽車行業(yè)的重要發(fā)展方向。在眾多傳感器技術(shù)中,激光雷達(dá)(LiDAR)因其獨特的優(yōu)勢,被認(rèn)為是實現(xiàn)高級自動駕駛功能的關(guān)鍵。激光雷達(dá)技術(shù)
    的頭像 發(fā)表于 03-10 10:16 ?674次閱讀
    <b class='flag-5'>激光雷達(dá)</b>技術(shù):自動駕駛的應(yīng)用與發(fā)展趨勢

    BEVFusion —面向自動駕駛的多任務(wù)多傳感器高效融合框架技術(shù)詳解

    激光雷達(dá)在3D視圖中捕獲數(shù)據(jù)。1. 核心目標(biāo)與創(chuàng)新?目標(biāo)? 解決多模態(tài)傳感器攝像頭、激光雷達(dá)等)在3D感知任務(wù)中的異構(gòu)數(shù)據(jù)融合難題,實現(xiàn)
    的頭像 發(fā)表于 02-26 20:33 ?3487次閱讀
    BEVFusion —面向自動駕駛的多任務(wù)多<b class='flag-5'>傳感器</b>高效<b class='flag-5'>融合</b>框架技術(shù)詳解

    京瓷發(fā)布全球首款“攝像頭-激光雷達(dá)融合傳感器

    近日,京瓷株式會社在傳感器技術(shù)領(lǐng)域取得了重大突破,成功開發(fā)出全球首款獨特的“攝像頭-激光雷達(dá)(Camera-LiDAR)”融合傳感器。這款
    的頭像 發(fā)表于 01-20 14:08 ?782次閱讀

    激光雷達(dá)在SLAM算法中的應(yīng)用綜述

    SLAM算法運行的重要傳感器?;?b class='flag-5'>激光雷達(dá)的SLAM算法,對激光雷達(dá)SLAM總體框架進(jìn)行介紹,詳細(xì)闡述前端里程計、后端優(yōu)化、回環(huán)檢測、地圖構(gòu)建模塊的作用并總結(jié)所使用的算法;按由2D到 3D,單
    的頭像 發(fā)表于 11-12 10:30 ?2030次閱讀
    <b class='flag-5'>激光雷達(dá)</b>在SLAM算法中的應(yīng)用綜述

    昱感微“多維像素”超級攝像頭產(chǎn)品方案發(fā)布!

    昱感微“多維像素”超級攝像頭采用最前沿的多傳感器融合技術(shù),將可見光攝像頭、紅外攝像頭、4D毫
    的頭像 發(fā)表于 11-06 10:49 ?676次閱讀
    昱感微“多維像素”超級<b class='flag-5'>攝像頭</b>產(chǎn)品方案發(fā)布!

    激光雷達(dá)增量加速,接收端芯片市場格局生變

    ,未來激光雷達(dá)會逐漸淘汰;而試駕有搭載激光雷達(dá)的車型時,銷售就會提到激光雷達(dá)的安全性,看得比攝像頭更遠(yuǎn),還能感知距離,讓智能駕駛更加安全。 ? 拋開立場來討論,今年以來乘用車領(lǐng)域的
    的頭像 發(fā)表于 10-31 00:42 ?9901次閱讀
    <b class='flag-5'>激光雷達(dá)</b>增量加速,接收端芯片市場格局生變

    激光雷達(dá)與其他傳感器的比較

    在現(xiàn)代科技領(lǐng)域,傳感器技術(shù)的發(fā)展日新月異,為各行各業(yè)提供了強大的數(shù)據(jù)支持。激光雷達(dá)作為一種高精度的遙感技術(shù),近年來在多個領(lǐng)域得到了廣泛應(yīng)用。然而,激光雷達(dá)并非萬能,它與其他傳感器相比,
    的頭像 發(fā)表于 10-27 10:41 ?1221次閱讀

    經(jīng)緯恒潤攜手Arbe開發(fā)基于雷達(dá)的高級輔助駕駛系統(tǒng)

    摘要:該高級輔助駕駛系統(tǒng)將融合攝像頭傳感器雷達(dá)技術(shù),旨在為中國汽車制造商帶來與激光雷達(dá)系統(tǒng)相媲美的質(zhì)量及功能。 新一代4D成像
    的頭像 發(fā)表于 09-27 10:17 ?438次閱讀
    經(jīng)緯恒潤攜手Arbe開發(fā)基于<b class='flag-5'>雷達(dá)</b>的高級輔助駕駛系統(tǒng)

    聚焦MIPI 系列之三:汽車SerDes – 實現(xiàn)更好的ADAS攝像頭傳感器

    汽車 (AV) 領(lǐng)域。例如,Waymo 的第五代自動駕駛汽車配備了至少29個攝像頭,此外還有五個激光雷達(dá)和六個雷達(dá)。 未來的自動駕駛汽車需要支持總帶寬在 3 到 40 GBit/s(約 1.4 到 19
    的頭像 發(fā)表于 08-01 10:18 ?786次閱讀
    聚焦MIPI 系列之三:汽車SerDes – 實現(xiàn)更好的ADAS<b class='flag-5'>攝像頭</b><b class='flag-5'>傳感器</b>

    商用激光雷達(dá)產(chǎn)品InnovizOne有什么獨特之處

    Innoviz 是汽車行業(yè)的知名激光雷達(dá)制造商,率先開創(chuàng)了激光雷達(dá)感知技術(shù)。結(jié)合攝像頭雷達(dá)等其他傳感器,Innoviz 能實現(xiàn)真正可脫手、
    的頭像 發(fā)表于 06-17 09:46 ?1049次閱讀

    半導(dǎo)體激光雷達(dá)傳感器件產(chǎn)業(yè)化項目落地德州

    協(xié)議,雙方將投資建設(shè)半導(dǎo)體激光雷達(dá)傳感器件產(chǎn)業(yè)化項目,引進(jìn)激光雷達(dá)、半導(dǎo)體激光器、光收發(fā)器件等自動化生產(chǎn)、檢測及輔助系統(tǒng)等設(shè)備,主要產(chǎn)品為激光雷達(dá)
    的頭像 發(fā)表于 06-04 09:48 ?1.9w次閱讀

    森思泰克全新推出96線激光雷達(dá)和192線激光雷達(dá)產(chǎn)品

    傳感器融合方案是智能駕駛感知技術(shù)的必然趨勢。它以攝像頭、毫米波雷達(dá)、超聲波雷達(dá)以及激光雷達(dá)等多
    的頭像 發(fā)表于 05-28 10:03 ?2564次閱讀
    森思泰克全新推出96線<b class='flag-5'>激光雷達(dá)</b>和192線<b class='flag-5'>激光雷達(dá)</b>產(chǎn)品

    采用 CMOS傳感器的監(jiān)控攝像頭參考設(shè)計

    電子發(fā)燒友網(wǎng)站提供《采用 CMOS傳感器的監(jiān)控攝像頭參考設(shè)計.pdf》資料免費下載
    發(fā)表于 05-17 18:11 ?12次下載
    采用 CMOS<b class='flag-5'>傳感器</b>的監(jiān)控<b class='flag-5'>攝像頭</b>參考設(shè)計