一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

物理級(jí)傳感器仿真:破解自動(dòng)駕駛長(zhǎng)尾場(chǎng)景驗(yàn)證難題

虹科技術(shù) ? 來(lái)源:虹科技術(shù) ? 作者:虹科技術(shù) ? 2025-07-09 16:46 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

??自動(dòng)駕駛研發(fā)面臨"長(zhǎng)尾效應(yīng)"的終極挑戰(zhàn):海量邊緣場(chǎng)景需要近乎無(wú)限的測(cè)試?yán)锍獭?strong>仿真測(cè)試雖已成為行業(yè)共識(shí),但其真實(shí)度仍存根本性質(zhì)疑——當(dāng)多數(shù)平臺(tái)仍停留在視覺(jué)逼真層面時(shí),感知算法低階數(shù)據(jù)處理魯棒性測(cè)試觸及驗(yàn)證天花板

其實(shí),真正的物理級(jí)仿真必須從數(shù)據(jù)源頭出發(fā):從光子穿透鏡頭到電信號(hào)轉(zhuǎn)換,從激光能量分布到多回波散射,每一個(gè)物理環(huán)節(jié)都會(huì)直接影響算法在現(xiàn)實(shí)世界中的表現(xiàn)。

基于此,本文將深入解析攝像頭激光雷達(dá)物理建模機(jī)制,并解讀2025新興標(biāo)準(zhǔn)ASAM OpenMATERIAL 3D,從而探討如何為高可信度仿真提供關(guān)鍵基礎(chǔ)的問(wèn)題!

01 鏡頭模型的光學(xué)物理建模

傳統(tǒng)的攝像頭仿真,其終點(diǎn)往往是一張“干凈”的RGB圖像。這對(duì)于高級(jí)規(guī)劃控制算法或許足夠,但對(duì)于依賴圖像原始信息的感知算法開(kāi)發(fā)者而言,這無(wú)異于在精裝修的樣板間里測(cè)試建筑結(jié)構(gòu)。他們真正需要的,是模擬光子穿過(guò)復(fù)雜鏡頭組,到CMOS傳感器輸出原始電信號(hào)的全過(guò)程。

wKgZO2huK22ASiE6AAMaln4QToo907.png

畸變?cè)砼c參數(shù)化建模

現(xiàn)代車載廣角/魚(yú)眼鏡頭的非線性失真很難靠針孔模型捕捉。這種畸變始于鏡片的設(shè)計(jì):曲率、鏡間距離、材料折射率、涂層結(jié)構(gòu)等都會(huì)造成光線偏折與映射失真。

高保真建模路徑:

畸變函數(shù):(如 fisheye、Mei、F?Theta、EUCM 等)源自具體鏡頭標(biāo)定,能描述像素偏移;

多項(xiàng)式系數(shù)模型:捕捉畸變隨徑向變化的非線性,用于語(yǔ)言和超廣角鏡頭;

LUT(查找表)方式:直接復(fù)刻真實(shí)標(biāo)定點(diǎn)映射,將任意復(fù)雜畸變精準(zhǔn)還原。

技術(shù)意義:光學(xué)還原誤差的減少將會(huì)直接提升后續(xù)曝光、噪聲疊加的物理建??尚哦?/strong>,還能從光學(xué)角度模擬不同的鏡頭效應(yīng)。

02 CMOS傳感器光電仿真

光電轉(zhuǎn)換與噪聲建模

相機(jī) RAW輸出用戶關(guān)注的是兩個(gè)關(guān)鍵過(guò)程:

Quantum Efficiency(QE):光子轉(zhuǎn)化為電子的效率;

Conversion Gain:每個(gè)電子轉(zhuǎn)換成輸出電壓的增益。

輻射曝光到電壓的轉(zhuǎn)換公式可表示為:

photon_energy=(h?c) / λ

其中:

h:普朗克常數(shù);

c:光速m/s;

λ:RGB各通道的波長(zhǎng),以m為單位。

radiant_exposure_to_voltage=(pixel_size2)/ photon_energy x quantum_efficiency x conversion_gain

其中:

radiant_exposure_to_voltage:表示將輻照度(光能量密度)轉(zhuǎn)換為電壓信號(hào)的轉(zhuǎn)換因子,單位通常是伏特每單位輻照度;

pixel_size:像素的邊長(zhǎng),單位通常是米(m)。這里用平方表示像素面積,即 pixel_size2pixel_size2,表示單個(gè)像素接收光子的有效面積;

photon_energy:?jiǎn)蝹€(gè)光子的能量,單位是焦耳(J)。由公式 h?cλλh?c 計(jì)算,其中 hh 是普朗克常數(shù),cc 是光速,λλ 是光的波長(zhǎng);

quantum_efficiency:量子效率,表示入射光子被探測(cè)器轉(zhuǎn)換為電子的效率,通常是一個(gè)小于1的無(wú)量綱數(shù)。

conversion_gain:轉(zhuǎn)換增益,表示電子信號(hào)轉(zhuǎn)換為電壓信號(hào)的增益,單位通常是伏特/電子(V/electron);

同時(shí)考慮:

Shot Noise(光子噪聲):自然量子過(guò)程下的統(tǒng)計(jì)波動(dòng);

Read Noise(讀出噪聲):來(lái)自電路本身的不確定性;

ADC 量化誤差:由電壓擺幅與位數(shù)決定。

非線性響應(yīng)與增益控制

模擬域增益與數(shù)字域增益、PWL 非線性函數(shù)可讓模型真實(shí)復(fù)現(xiàn)CMOS 增益壓縮、飽和與拉伸特性。

價(jià)值亮點(diǎn):算法開(kāi)發(fā)者不再用“擬真濾鏡”,而是直接在復(fù)刻硬件真實(shí)響應(yīng)的“數(shù)據(jù)源”上驗(yàn)證性能,真實(shí)評(píng)估弱光、過(guò)曝下的魯棒性。

03 LiDAR 建模:高斯射線與物理衰減

光束結(jié)構(gòu)與多回波

真實(shí) LiDAR 發(fā)出的激光是包含能量分布的高斯光束,而非理想“無(wú)寬度射線”。通過(guò)參數(shù)化:

Beam divergence控制光束發(fā)散角;

Beam sampling density決定光斑內(nèi)采樣次數(shù);

高斯能量分布可模擬光斑中心與邊緣的能量差異;

Secondary Returns模擬光束穿透薄物體或發(fā)生多次反射后的回波情形。

wKgZPGhuK42AYPGrAABsS2TCw5o670.png

核心優(yōu)勢(shì):這種建模方式,使得仿真器能夠更精確地模擬物體邊緣的探測(cè)效果、小目標(biāo)的漏檢概率,以及由單次發(fā)射脈沖擊中不同距離物體而產(chǎn)生的多重回波。這對(duì)于依賴點(diǎn)云密度和回波信息的聚類、分割算法的驗(yàn)證,具有不可替代的價(jià)值。

大氣與天氣中的物理衰減

激光在雨霧雪中傳播時(shí)會(huì)經(jīng)歷:

大氣消光(Extinction):受可見(jiàn)度、Mie 散射、水滴大小和雷雨強(qiáng)度控制;

多模態(tài)散射:粒徑分布影響波長(zhǎng)選擇,對(duì) 905nm 或 1550nm 波段影響不同;

點(diǎn)云強(qiáng)度、范圍測(cè)量誤差:由上述物理機(jī)制驅(qū)動(dòng),而非隨機(jī)丟棄。

核心優(yōu)勢(shì):可輸出“雨天 50mm/h 下探測(cè) 80m、反射率 10% 行人的概率為 X%”這類量化結(jié)論,是生成魯棒性驗(yàn)證報(bào)告的關(guān)鍵。

wKgZPGhuK6CANXyQAABKj5RSqVw796.png雨天 30mm/h 積水覆蓋率90% wKgZO2huK7KALxw3AABir2R4aBU129.png雨天 15mm/h 積水覆蓋率45% wKgZPGhuK7-AW9t3AACEkLjx8Fc715.png雨天 4mm/h 積水覆蓋率25%

04 ASAM OpenMATERIAL 3D新標(biāo)準(zhǔn)

精準(zhǔn)材料屬性的行業(yè)統(tǒng)一標(biāo)準(zhǔn)

ASAM2025 年 3 月發(fā)布的OpenMATERIAL 3D,專注定義環(huán)境中物體的真實(shí)物理屬性:折射率、粗糙度、BRDF 查找表、材質(zhì)密度等。

優(yōu)勢(shì)包括:

跨平臺(tái)協(xié)同建模:格式通用,支持 ASAM OpenDRIVE、OpenSCENARIO、OSI 等;

適用于感知仿真:雷達(dá)、攝像頭、LiDAR 均可引用同一材質(zhì)庫(kù);

動(dòng)態(tài)結(jié)構(gòu)兼容:支持如車輪等運(yùn)動(dòng)部件的層次結(jié)構(gòu)定義。

融合意義:物理建模所依賴的不只是參數(shù),更是材料本身——OpenMATERIAL 3D 從源頭打通了場(chǎng)景物理真實(shí)與傳感建模之間的壁壘。

aiSim Archer:對(duì)全新OpenMATERIAL 標(biāo)準(zhǔn) (ASAM OpenMATERIAL?3D)進(jìn)行了實(shí)現(xiàn)。 https://github.com/aimotive/aisim/tree/main/aiSimArcher

05 物理建模與標(biāo)準(zhǔn)的行業(yè)協(xié)同

鏡頭畸變模型、CMOS 噪聲鏈LiDAR 多回波天氣衰減,物理級(jí)建模讓仿真的“數(shù)據(jù)表現(xiàn)”不再是肉眼看起來(lái)真,而是“行為上真實(shí)”。而標(biāo)準(zhǔn)化的材料規(guī)格,如ASAM OpenMATERIAL 3D,更是將它推向行業(yè)共識(shí)。

這一切,最終目標(biāo)都是構(gòu)建一個(gè)“可信仿真”的閉環(huán):真實(shí)物理參數(shù)驅(qū)動(dòng)的模型 → 標(biāo)準(zhǔn)化定義的材料屬性 → 支持跨平臺(tái)共享與驗(yàn)證 → 支撐自動(dòng)駕駛場(chǎng)景真實(shí)測(cè)試與算法驗(yàn)證。

而將這些關(guān)鍵模塊實(shí)現(xiàn)并集成仿真平臺(tái)中(即aiSim所專注的),才是落地這一周期驗(yàn)證環(huán)路的技術(shù)核心。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2566

    文章

    53008

    瀏覽量

    767532
  • 仿真
    +關(guān)注

    關(guān)注

    52

    文章

    4289

    瀏覽量

    135876
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    康謀分享 | 物理級(jí)傳感器仿真破解自動(dòng)駕駛長(zhǎng)尾場(chǎng)景驗(yàn)證難題

    本文聚焦物理級(jí)仿真,剖析攝像頭光學(xué)建模、CMOS 光電轉(zhuǎn)換、激光雷達(dá)高斯光束與衰減建模,解讀 ASAM OpenMATERIAL 3D 標(biāo)準(zhǔn),以構(gòu)建可信仿真閉環(huán),助力算法
    的頭像 發(fā)表于 07-09 09:36 ?198次閱讀
    康謀分享 | <b class='flag-5'>物理</b><b class='flag-5'>級(jí)</b><b class='flag-5'>傳感器</b><b class='flag-5'>仿真</b>:<b class='flag-5'>破解</b><b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>長(zhǎng)尾</b><b class='flag-5'>場(chǎng)景</b><b class='flag-5'>驗(yàn)證</b><b class='flag-5'>難題</b>

    康謀分享 | 基于多傳感器數(shù)據(jù)的自動(dòng)駕駛仿真確定性驗(yàn)證

    自動(dòng)駕駛仿真測(cè)試中,游戲引擎的底層架構(gòu)可能會(huì)帶來(lái)非確定性的問(wèn)題,侵蝕測(cè)試可信度。如何通過(guò)專業(yè)仿真平臺(tái),在多傳感器配置與極端天氣場(chǎng)景中實(shí)現(xiàn)測(cè)試
    的頭像 發(fā)表于 07-02 13:17 ?3517次閱讀
    康謀分享 | 基于多<b class='flag-5'>傳感器</b>數(shù)據(jù)的<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>仿真</b>確定性<b class='flag-5'>驗(yàn)證</b>

    自動(dòng)駕駛汽車是如何準(zhǔn)確定位的?

    厘米級(jí)的定位精度,并能夠?qū)崟r(shí)響應(yīng)環(huán)境變化。為此,自動(dòng)駕駛系統(tǒng)通常采用多傳感器融合的方式,將全球?qū)Ш叫l(wèi)星系統(tǒng)(GNSS)、慣性測(cè)量單元(IMU)、激光雷達(dá)(LiDAR)、攝像頭、超寬帶(UWB)等多種
    的頭像 發(fā)表于 06-28 11:42 ?227次閱讀
    <b class='flag-5'>自動(dòng)駕駛</b>汽車是如何準(zhǔn)確定位的?

    為什么仿真對(duì)于自動(dòng)駕駛來(lái)說(shuō)非常重要?

    [首發(fā)于智駕最前沿微信公眾號(hào)]自動(dòng)駕駛仿真是當(dāng)前自動(dòng)駕駛技術(shù)研發(fā)與驗(yàn)證體系中不可或缺的重要環(huán)節(jié)。它通過(guò)構(gòu)建虛擬的道路場(chǎng)景、車輛動(dòng)力學(xué)模型以及
    的頭像 發(fā)表于 05-23 09:13 ?207次閱讀
    為什么<b class='flag-5'>仿真</b>對(duì)于<b class='flag-5'>自動(dòng)駕駛</b>來(lái)說(shuō)非常重要?

    新能源車軟件單元測(cè)試深度解析:自動(dòng)駕駛系統(tǒng)視角

    。 ?自動(dòng)駕駛軟件的特殊性? ? 感知層: ?激光雷達(dá)、攝像頭等傳感器數(shù)據(jù)處理算法的單元測(cè)試需覆蓋極端場(chǎng)景。例如,激光雷達(dá)點(diǎn)云濾波算法在雨雪天氣下的噪聲抑制能力需通過(guò)邊界測(cè)試驗(yàn)證。某
    發(fā)表于 05-12 15:59

    技術(shù)分享 |多模態(tài)自動(dòng)駕駛混合渲染HRMAD:將NeRF和3DGS進(jìn)行感知驗(yàn)證和端到端AD測(cè)試

    多模態(tài)自動(dòng)駕駛混合渲染HRMAD,融合NeRF與3DGS技術(shù),實(shí)現(xiàn)超10萬(wàn)㎡場(chǎng)景重建,多傳感器實(shí)時(shí)輸出,仿真更接近真實(shí)數(shù)據(jù)!然而,如何用高保真仿真
    的頭像 發(fā)表于 03-26 16:05 ?3406次閱讀
    技術(shù)分享 |多模態(tài)<b class='flag-5'>自動(dòng)駕駛</b>混合渲染HRMAD:將NeRF和3DGS進(jìn)行感知<b class='flag-5'>驗(yàn)證</b>和端到端AD測(cè)試

    技術(shù)分享 | AVM合成數(shù)據(jù)仿真驗(yàn)證方案

    AVM 合成數(shù)據(jù)仿真驗(yàn)證技術(shù)為自動(dòng)駕駛環(huán)境感知發(fā)展帶來(lái)助力,可借助仿真軟件配置傳感器、搭建環(huán)境、處理圖像,生成 AVM 合成數(shù)據(jù),有效加速算
    的頭像 發(fā)表于 03-19 09:40 ?3060次閱讀
    技術(shù)分享 | AVM合成數(shù)據(jù)<b class='flag-5'>仿真</b><b class='flag-5'>驗(yàn)證</b>方案

    自動(dòng)駕駛規(guī)控算法驗(yàn)證到底需要什么樣的場(chǎng)景仿真軟件?

    ModelBase-AD憑借其優(yōu)秀的靜態(tài)場(chǎng)景模型、隨機(jī)交通流模型、整車動(dòng)力學(xué)模型,為各大主機(jī)廠和供應(yīng)商提供了準(zhǔn)確的自動(dòng)駕駛規(guī)控算法驗(yàn)證仿真環(huán)境,提升了
    的頭像 發(fā)表于 02-11 14:16 ?1575次閱讀
    <b class='flag-5'>自動(dòng)駕駛</b>規(guī)控算法<b class='flag-5'>驗(yàn)證</b>到底需要什么樣的<b class='flag-5'>場(chǎng)景</b><b class='flag-5'>仿真</b>軟件?

    傳感器融合在自動(dòng)駕駛中的應(yīng)用趨勢(shì)探究

    自動(dòng)駕駛技術(shù)的快速發(fā)展加速交通行業(yè)變革,為實(shí)現(xiàn)車輛自動(dòng)駕駛,需要車輛對(duì)復(fù)雜動(dòng)態(tài)環(huán)境做出準(zhǔn)確、高效的響應(yīng),而多傳感器融合技術(shù)為提升自動(dòng)駕駛系統(tǒng)的穩(wěn)定性和安全性提供了關(guān)鍵支持。通過(guò)將不同種
    的頭像 發(fā)表于 12-05 09:06 ?1358次閱讀
    多<b class='flag-5'>傳感器</b>融合在<b class='flag-5'>自動(dòng)駕駛</b>中的應(yīng)用趨勢(shì)探究

    一文聊聊自動(dòng)駕駛測(cè)試技術(shù)的挑戰(zhàn)與創(chuàng)新

    ,包括場(chǎng)景生成的多樣性與準(zhǔn)確性、多傳感器數(shù)據(jù)融合的精度驗(yàn)證、高效的時(shí)間同步機(jī)制,以及仿真平臺(tái)與實(shí)際場(chǎng)景的匹配等問(wèn)題。
    的頭像 發(fā)表于 12-03 15:56 ?738次閱讀
    一文聊聊<b class='flag-5'>自動(dòng)駕駛</b>測(cè)試技術(shù)的挑戰(zhàn)與創(chuàng)新

    基于場(chǎng)景自動(dòng)駕駛驗(yàn)證策略

    可選方案是將實(shí)際交通狀況做出總結(jié)生成具有高度代表性的交通場(chǎng)景,通過(guò)仿真分析自動(dòng)駕駛系統(tǒng)在這些場(chǎng)景上的安全性。然而交通場(chǎng)景中元素的復(fù)雜性與失敗
    的頭像 發(fā)表于 10-22 16:14 ?810次閱讀
    基于<b class='flag-5'>場(chǎng)景</b>的<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>驗(yàn)證</b>策略

    FPGA在自動(dòng)駕駛領(lǐng)域有哪些優(yōu)勢(shì)?

    領(lǐng)域的主要優(yōu)勢(shì): 高性能與并行處理能力: FPGA內(nèi)部包含大量的邏輯門和可配置的連接,能夠同時(shí)處理多個(gè)數(shù)據(jù)流和計(jì)算任務(wù)。這種并行處理能力使得FPGA在處理自動(dòng)駕駛中復(fù)雜的圖像識(shí)別、傳感器數(shù)據(jù)處理等
    發(fā)表于 07-29 17:11

    FPGA在自動(dòng)駕駛領(lǐng)域有哪些應(yīng)用?

    低,適合用于實(shí)現(xiàn)高效的圖像算法,如車道線檢測(cè)、交通標(biāo)志識(shí)別等。 雷達(dá)和LiDAR處理:自動(dòng)駕駛汽車通常會(huì)使用雷達(dá)和LiDAR(激光雷達(dá))等多種傳感器來(lái)獲取環(huán)境信息。FPGA能夠協(xié)助完成這些傳感器
    發(fā)表于 07-29 17:09

    自動(dòng)駕駛傳感器技術(shù)介紹

    自動(dòng)駕駛傳感器技術(shù)是自動(dòng)駕駛系統(tǒng)的核心組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。以下是對(duì)自動(dòng)駕駛傳感器技術(shù)的詳細(xì)介紹,內(nèi)
    的頭像 發(fā)表于 07-23 16:08 ?3234次閱讀

    自動(dòng)駕駛汽車傳感器有哪些

    自動(dòng)駕駛汽車傳感器是實(shí)現(xiàn)自動(dòng)駕駛功能的關(guān)鍵組件,它們通過(guò)采集和處理車輛周圍環(huán)境的信息,為自動(dòng)駕駛系統(tǒng)提供必要的感知和決策依據(jù)。以下是對(duì)自動(dòng)駕駛
    的頭像 發(fā)表于 07-23 16:00 ?3277次閱讀