一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

未來已來,多傳感器融合感知是自動駕駛破局的關(guān)鍵

sensemi ? 2024-10-29 09:59 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

美國加州議會的公共事務(wù)委員會做出宣判:允許谷歌旗下Waymo和通用旗下Cruise的Robotaxi在舊金山不受限制地載客,即24×7全天候的、城區(qū)范圍不受限制、主駕無人的、且可以向乘客收費的Robotaxi運營。這標志著L4級自動駕駛迎來了新的里程碑,朝著商業(yè)化落地邁進了一大步。中國的車企也不甘落后:4月7日,廣汽埃安與滴滴自動駕駛宣布合資公司——廣州安滴科技有限公司獲批工商執(zhí)照。廣汽埃安方面表示,這是L4級自動駕駛公司和車企為了打造Robotaxi量產(chǎn)車,在國內(nèi)成立的首個合資公司。首款車型已完成產(chǎn)品定義,正在進行設(shè)計造型的聯(lián)合評審,計劃明年實現(xiàn)量產(chǎn)。未來已來,2024年是全球L3/L4級自動駕駛賽跑的元年。
馬斯克評論FSD 12.3版本的左轉(zhuǎn)彎操作就像人類司機一樣。如果FSD 12.3版本成功,將基本顛覆目前市場上的智能駕駛技術(shù)路線?;凇皵?shù)據(jù)/算法/算力”的無人駕駛技術(shù)有著基本的判斷:在中短期內(nèi)無法解決corner case長尾安全問題,十年內(nèi)不太可能實現(xiàn)量產(chǎn)落地。隨著GPT大模型和特斯拉FSD端到端的出現(xiàn),基于“數(shù)據(jù)-算力”的方法拋棄了傳統(tǒng)的算法和編程CODING,取得了巨大的進展;自動駕駛開始摒棄手動編碼規(guī)則和機器學習模型的方法,轉(zhuǎn)向全面采用端到端的神經(jīng)網(wǎng)絡(luò)AI系統(tǒng),它能模仿學習人類司機的駕駛,遇到場景直接輸入傳感器數(shù)據(jù),再直接輸出轉(zhuǎn)向、制動和加速信號模仿學習人類駕駛的關(guān)鍵的是具備人類的感知能力,多傳感器融合感知正是自動駕駛破局的關(guān)鍵。昱感微的雷視一體多傳感器融合方案就好像一雙比人眼更敏銳的眼睛,可以為自動駕駛系統(tǒng)提供更豐富更精準的視覺語言——目標與環(huán)境的多模態(tài)精準感知信息,使自動駕駛系統(tǒng)可以實時精準地感知道路上的各種狀況。

wKgZomYXSbqAEP3VAAniz4cPRao014.jpg

昱感微融合感知產(chǎn)品方案創(chuàng)新性地將可見光攝像頭、紅外攝像頭以及4D毫米波雷達的探測數(shù)據(jù)在前端(數(shù)據(jù)獲取時)交互,將各傳感器的探測數(shù)據(jù)“坐標統(tǒng)一、時序?qū)R”,圖像與雷達數(shù)據(jù)完成像素級實時“時空對齊同步”并以“多維像素”格式輸出。“多維像素”是昱感微的核心技術(shù)創(chuàng)新之一,它是指在可見光攝像頭像素信息上加上其它傳感器對于同源目標感知的信息,將感知系統(tǒng)的感知維度擴展以實現(xiàn)多維度(多模態(tài))感知目標的完整信息。如下圖示例,芯片將攝像頭圖像數(shù)據(jù),和雷達探測目標的距離、速度、散射截面R的感知數(shù)據(jù),以及紅外傳感器探測的熱輻射圖像數(shù)據(jù)疊加組合到一起,以攝像頭的像素為顆粒度組合全部感知數(shù)據(jù),每個像素不僅有視覺信息,還包含了4D毫米波雷達和紅外傳感器的探測數(shù)據(jù),形成多維度(多模態(tài))測量參數(shù)矩陣數(shù)組?;趫D像像素為基準+雷達數(shù)據(jù)的“多維像素”感知數(shù)據(jù),與現(xiàn)有主流AI計算平臺完全兼容,它可以復用已有的圖像數(shù)據(jù)樣本,免除了產(chǎn)品的神經(jīng)網(wǎng)絡(luò)訓練數(shù)據(jù)需要完全重新采集的困擾。

wKgaomYXSbmAEVvzAAHXiNR-JPM711.jpg

昱感微的融合感知技術(shù)采用最前沿的多傳感器前融合技術(shù),攝像頭和雷達等多傳感器的探測數(shù)據(jù)在前端(數(shù)據(jù)獲取時)交互驗證,讓自動駕駛系統(tǒng)能感知到“看不見”的危險。例如,在反向車道有強遠光燈干擾的情況下,當雷達子系統(tǒng)探測到潛在運動目標時,融合感知系統(tǒng)可以引導本車的攝像頭針對運動目標做快速局部修正曝光(見下圖),以此實時獲取運動目標的分辨細節(jié)特征,并將局部修正曝光的圖像融合雷達數(shù)據(jù)傳輸至自動駕駛系統(tǒng),避免撞擊危險發(fā)生。

wKgZomYXSbmAdNYgAAIK4vFrkjE147.jpg

昱感微的融合感知技術(shù)方案的優(yōu)勢在于1)是基于“物理感知”數(shù)據(jù)驅(qū)動,能很好地避免純視覺網(wǎng)絡(luò)的corner cases問題;2)傳感器前融合的方式可以最大限度地保留原始探測數(shù)據(jù),并發(fā)揮各傳感器的優(yōu)勢,使感知系統(tǒng)能夠不受天氣光線等場景限制,實時完成精準目標感知;3)支持目標的識別與樣本采樣同步完成,助力車廠建立數(shù)據(jù)優(yōu)勢,這也是未來車廠的核心競爭力之一。特斯拉成功推出采用端到端方案的FSDV12版本,很大一個助力因素是特斯拉的巨大數(shù)據(jù)優(yōu)勢,海量的視頻數(shù)據(jù)訓練使FSD越來越擬人化。不過,鑒于中國路況復雜并且與歐美道路差異較大,中國車企在數(shù)據(jù)訓練方面有望迎頭趕上,而昱感微的融合感知技術(shù)的感知數(shù)據(jù)可助力中國車企實現(xiàn)彎道超車:融合感知系統(tǒng)可同步完成目標識別與樣本采樣,也就是說車廠可以利用配備融合感知系統(tǒng)的汽車進行大數(shù)據(jù)采集,分析其廣大車主的駕駛數(shù)據(jù)來建立自身的數(shù)據(jù)優(yōu)勢。另外,特斯拉的軟件能力現(xiàn)已成為差異化賣點,F(xiàn)SD套件的盈利模式采用一次性買斷制和按月訂閱制,且一次性購買價格經(jīng)過多輪漲價,目前已升至15000美元。智能軟件差異化競爭和汽車應(yīng)用付費模式很可能是未來汽車行業(yè)的趨勢。昱感微融合感知系統(tǒng)內(nèi)含一個專用的數(shù)據(jù)獲取模塊,將目標的識別與有效樣本的獲取結(jié)合,可提供有效樣本的獲取函數(shù),配合車廠開發(fā)。并且多維像素格輸出的感知數(shù)據(jù)在有效性和豐富度上都高于純視覺(視頻數(shù)據(jù)),可以快速提升AI神經(jīng)網(wǎng)絡(luò)的訓練收斂率以及目標識別率,為車廠增加智能駕駛的核心競爭力。此外,多維像素還可以直接高效支持“占用網(wǎng)絡(luò)” (Occupancy Network)算法。占用網(wǎng)格是指將感知空間劃分為一個個立體網(wǎng)格(體素),而多維像素包含了目標的3D空間位置信息、目標的速度信息和材質(zhì)信息,可以直接高效實時支持占用網(wǎng)格中的體素算法。Tesla目前在主推“BEV +Transformer+占用網(wǎng)絡(luò)”,國內(nèi)華為GOD2.0和小米汽車也采用相同的架構(gòu),預計未來許多智能駕駛團隊都會引入“占用網(wǎng)絡(luò)”來提升系統(tǒng)能力。多維像素的應(yīng)用前景非常廣闊。昱感微的融合感知技術(shù)+BEV +Transformer+占用網(wǎng)格有望成為L3/L4級自動駕駛最優(yōu)的落地方案。

wKgaomYXSbmARNsRAAm4M_kTmYc579.jpg

wKgaomYXSbmAXKq3AABaUuYdqxo959.jpg
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 多傳感器
    +關(guān)注

    關(guān)注

    0

    文章

    81

    瀏覽量

    15622
  • 智能駕駛
    +關(guān)注

    關(guān)注

    4

    文章

    2805

    瀏覽量

    49906
  • 自動駕駛
    +關(guān)注

    關(guān)注

    788

    文章

    14302

    瀏覽量

    170466
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    康謀分享 | 基于傳感器數(shù)據(jù)的自動駕駛仿真確定性驗證

    自動駕駛仿真測試中,游戲引擎的底層架構(gòu)可能會帶來非確定性的問題,侵蝕測試可信度。如何通過專業(yè)仿真平臺,在傳感器配置與極端天氣場景中實現(xiàn)測試數(shù)據(jù)零差異?確定性驗證方案已成為自動駕駛研發(fā)
    的頭像 發(fā)表于 07-02 13:17 ?2930次閱讀
    康謀分享 | 基于<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>數(shù)據(jù)的<b class='flag-5'>自動駕駛</b>仿真確定性驗證

    技術(shù)分享 |模態(tài)自動駕駛混合渲染HRMAD:將NeRF和3DGS進行感知驗證和端到端AD測試

    模態(tài)自動駕駛混合渲染HRMAD,融合NeRF與3DGS技術(shù),實現(xiàn)超10萬㎡場景重建,傳感器實時輸出,仿真更接近真實數(shù)據(jù)!然而,如何用高保
    的頭像 發(fā)表于 03-26 16:05 ?3387次閱讀
    技術(shù)分享 |<b class='flag-5'>多</b>模態(tài)<b class='flag-5'>自動駕駛</b>混合渲染HRMAD:將NeRF和3DGS進行<b class='flag-5'>感知</b>驗證和端到端AD測試

    激光雷達技術(shù):自動駕駛的應(yīng)用與發(fā)展趨勢

    激光雷達是一種通過發(fā)射激光束并接收反射光束測量物體距離和速度的傳感器。它能夠生成周圍環(huán)境的精確三維地圖,為自動駕駛車輛提供關(guān)鍵感知信息。
    的頭像 發(fā)表于 03-10 10:16 ?937次閱讀
    激光雷達技術(shù):<b class='flag-5'>自動駕駛</b>的應(yīng)用與發(fā)展趨勢

    BEVFusion —面向自動駕駛的多任務(wù)傳感器高效融合框架技術(shù)詳解

    和高效融合機制,解決了模態(tài)傳感器在幾何與語義任務(wù)中的權(quán)衡問題,成為自動駕駛多任務(wù)感知的標桿框架其設(shè)計范式為后續(xù)研究提供了重要啟發(fā) ?**“
    的頭像 發(fā)表于 02-26 20:33 ?3822次閱讀
    BEVFusion —面向<b class='flag-5'>自動駕駛</b>的多任務(wù)<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>高效<b class='flag-5'>融合</b>框架技術(shù)詳解

    傳感器融合自動駕駛中的應(yīng)用趨勢探究

    自動駕駛技術(shù)的快速發(fā)展加速交通行業(yè)變革,為實現(xiàn)車輛自動駕駛,需要車輛對復雜動態(tài)環(huán)境做出準確、高效的響應(yīng),而傳感器融合技術(shù)為提升
    的頭像 發(fā)表于 12-05 09:06 ?1325次閱讀
    <b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>在<b class='flag-5'>自動駕駛</b>中的應(yīng)用趨勢探究

    一文聊聊自動駕駛測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    ,包括場景生成的多樣性與準確性、傳感器數(shù)據(jù)融合的精度驗證、高效的時間同步機制,以及仿真平臺與實際場景的匹配等問題。 自動駕駛測試的必要性與現(xiàn)狀 1.1
    的頭像 發(fā)表于 12-03 15:56 ?710次閱讀
    一文聊聊<b class='flag-5'>自動駕駛</b>測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    MEMS技術(shù)在自動駕駛汽車中的應(yīng)用

    MEMS技術(shù)在自動駕駛汽車中的應(yīng)用主要體現(xiàn)在傳感器方面,這些傳感器自動駕駛汽車提供了關(guān)鍵的環(huán)境感知
    的頭像 發(fā)表于 11-20 10:19 ?1409次閱讀

    感知融合自動駕駛與機器視覺解開當前無解場景之困

    “多維像素”格式輸出,為自動駕駛系統(tǒng)提供目標與環(huán)境的模態(tài)精準感知信息:即傳感器對目標與環(huán)境感知的圖像數(shù)據(jù)(明暗、紋理、顏色等)+雷達數(shù)據(jù)(
    的頭像 發(fā)表于 10-29 14:21 ?966次閱讀
    <b class='flag-5'>感知</b><b class='flag-5'>融合</b>為<b class='flag-5'>自動駕駛</b>與機器視覺解開當前無解場景之困

    聊聊自動駕駛離不開的感知硬件

    感知硬件。自動駕駛感知硬件的主要功能是幫助車輛“看見”和“理解”周圍環(huán)境,為駕駛決策提供必要的實時信息。今天智駕最前沿就帶大家盤點常見的
    的頭像 發(fā)表于 08-23 10:18 ?1138次閱讀

    FPGA在自動駕駛領(lǐng)域有哪些優(yōu)勢?

    領(lǐng)域的主要優(yōu)勢: 高性能與并行處理能力: FPGA內(nèi)部包含大量的邏輯門和可配置的連接,能夠同時處理多個數(shù)據(jù)流和計算任務(wù)。這種并行處理能力使得FPGA在處理自動駕駛中復雜的圖像識別、傳感器數(shù)據(jù)處理等
    發(fā)表于 07-29 17:11

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    低,適合用于實現(xiàn)高效的圖像算法,如車道線檢測、交通標志識別等。 雷達和LiDAR處理:自動駕駛汽車通常會使用雷達和LiDAR(激光雷達)等多種傳感器獲取環(huán)境信息。FPGA能夠協(xié)助完成這些傳感
    發(fā)表于 07-29 17:09

    自動駕駛汽車如何識別障礙物

    自動駕駛汽車識別障礙物是一個復雜而關(guān)鍵的過程,它依賴于多種傳感器和技術(shù)的協(xié)同工作。這些傳感器主要包括激光雷達(LiDAR)、雷達、攝像頭以及超聲波雷達等,它們各自具有不同的工作原理和優(yōu)
    的頭像 發(fā)表于 07-23 16:40 ?2804次閱讀

    自動駕駛識別技術(shù)有哪些

    自動駕駛的識別技術(shù)是自動駕駛系統(tǒng)中的重要組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。自動駕駛識別技術(shù)主要包括多種傳感器及其
    的頭像 發(fā)表于 07-23 16:16 ?1472次閱讀

    自動駕駛傳感器技術(shù)介紹

    自動駕駛傳感器技術(shù)是自動駕駛系統(tǒng)的核心組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。以下是對自動駕駛
    的頭像 發(fā)表于 07-23 16:08 ?3196次閱讀

    自動駕駛汽車傳感器有哪些

    自動駕駛汽車傳感器是實現(xiàn)自動駕駛功能的關(guān)鍵組件,它們通過采集和處理車輛周圍環(huán)境的信息,為自動駕駛系統(tǒng)提供必要的
    的頭像 發(fā)表于 07-23 16:00 ?3251次閱讀