一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

破解數(shù)據(jù)瓶頸:智能汽車合成數(shù)據(jù)架構(gòu)與應(yīng)用實踐

虹科技術(shù) ? 來源:虹科技術(shù) ? 作者:虹科技術(shù) ? 2025-07-15 11:48 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

智能汽車快速演進(jìn)的過程中,數(shù)據(jù)體系正面臨深層次挑戰(zhàn)。過去,數(shù)據(jù)是輔助模型開發(fā)的工具;如今,它已成為限制感知系統(tǒng)性能上限的核心因素。尤其是在感知系統(tǒng)廣泛應(yīng)用于自動駕駛智能座艙場景之后,數(shù)據(jù)廣度、深度、時效性結(jié)構(gòu)化程度,已直接決定模型是否能夠真正實現(xiàn)落地部署。

在數(shù)據(jù)獲取難度持續(xù)上升、標(biāo)注成本不斷攀高、法規(guī)限制日益收緊的背景下,合成數(shù)據(jù)正逐步成為智能汽車感知系統(tǒng)開發(fā)的重要突破方向

本文將聚焦于兩個關(guān)鍵應(yīng)用場景——艙外道路感知艙內(nèi)乘員狀態(tài)識別,系統(tǒng)性探討合成數(shù)據(jù)體系的建設(shè)路徑、關(guān)鍵技術(shù)要素與工程落地實踐。

01 智能汽車感知系統(tǒng)的數(shù)據(jù)困境

智能汽車的感知能力依賴于多模態(tài)數(shù)據(jù),包括圖像、點云、雷達(dá)信號、IMU與GPS數(shù)據(jù),以及艙內(nèi)的姿態(tài)信息、關(guān)鍵點標(biāo)注與行為狀態(tài)標(biāo)簽等。然而,感知系統(tǒng)在實際應(yīng)用中面臨如下數(shù)據(jù)困境:

數(shù)據(jù)結(jié)構(gòu)高度復(fù)雜:傳感器異步采樣帶來時序?qū)R難題,艙外與艙內(nèi)的標(biāo)注維度各異;

采集與標(biāo)注成本高昂:高精度3D標(biāo)注和跨模態(tài)對齊需要大量人工投入,周期長、成本高;

場景覆蓋受限:真實環(huán)境下的極端天氣、稀有交通行為和邊緣行為難以采集,長尾場景缺失嚴(yán)重。

合規(guī)性與隱私風(fēng)險突出:特別是在艙內(nèi)數(shù)據(jù)方面,涉及面部識別、兒童狀態(tài)等隱私敏感內(nèi)容,數(shù)據(jù)采集難以持續(xù)。

數(shù)據(jù)生產(chǎn)速度無法匹配模型迭代頻率:模型更新周期短,而數(shù)據(jù)收集與標(biāo)注無法實時響應(yīng)。

因此,傳統(tǒng)數(shù)據(jù)采集方式難以滿足智能汽車日益增長的感知開發(fā)需求

wKgZPGh1zwOAZJY-AACbDTnUYi8613.png一個相機(jī)和點云數(shù)據(jù)同步繪制標(biāo)注框的示例

02 合成數(shù)據(jù)體系原則

合成數(shù)據(jù),作為一種可控、自動化、可復(fù)現(xiàn)的數(shù)據(jù)生成方式,正被越來越多企業(yè)納入核心研發(fā)流程。高質(zhì)量的合成數(shù)據(jù)體系應(yīng)具備以下技術(shù)特性:

高度可配置性:支持對場景、參與體、傳感器參數(shù)等進(jìn)行參數(shù)化建模;

自動化數(shù)據(jù)生成流程:數(shù)據(jù)采集、標(biāo)注與結(jié)構(gòu)化處理全過程無人工干預(yù);

標(biāo)準(zhǔn)化輸出結(jié)構(gòu):兼容主流數(shù)據(jù)格式,易于集成于訓(xùn)練、驗證與回歸流程;

強(qiáng)可追溯性與可復(fù)現(xiàn)性:每組數(shù)據(jù)可通過輸入?yún)?shù)精確重現(xiàn),保障一致性。

推薦采用分層結(jié)構(gòu)設(shè)計合成數(shù)據(jù)系統(tǒng):

配置層:定義場景元素、行為策略、傳感器布局;

建模層:搭建道路結(jié)構(gòu)、艙內(nèi)布局、交通參與者模型;

渲染執(zhí)行層:驅(qū)動仿真引擎進(jìn)行時序渲染與數(shù)據(jù)采樣;

標(biāo)注生成層:輸出圖像、點云、關(guān)鍵點、分割圖、3D框等標(biāo)簽;

數(shù)據(jù)導(dǎo)出層:以任務(wù)導(dǎo)向的數(shù)據(jù)結(jié)構(gòu)輸出結(jié)果,支持格式自定義與標(biāo)準(zhǔn)接口封裝。

這一架構(gòu)的優(yōu)勢在于實現(xiàn)邏輯與工具鏈的解耦,便于后期迭代與平臺遷移。

03 艙外場景:覆蓋長尾與多模態(tài)融合

艙外感知系統(tǒng)面向自動駕駛和高級輔助駕駛,涵蓋目標(biāo)檢測、追蹤、語義分割、路徑預(yù)測等任務(wù)。其合成數(shù)據(jù)生成流程需覆蓋

地圖構(gòu)建與拓?fù)浣?/strong>:包括道路結(jié)構(gòu)、車道線、交通信號、標(biāo)識牌等。

動態(tài)體建模與行為建控:構(gòu)建多類交通參與者并設(shè)定其行為模型,模擬現(xiàn)實中復(fù)雜交互。

環(huán)境建模與擾動注入:配置多維氣候、光照、背景動態(tài)因素,覆蓋實際采集中難以獲取的極端條件。

多模態(tài)傳感器仿真:同步輸出相機(jī)圖像、激光雷達(dá)點云、毫米波雷達(dá)信息等。

標(biāo)簽與元信息輸出:自動生成與樣本一一對應(yīng)的2D/3D標(biāo)簽、標(biāo)注屬性、坐標(biāo)系信息與時間戳。

wKgZO2h1zx2AEZd2AACQ5GjTv58965.png自動駕駛傳感器布局示例

數(shù)據(jù)結(jié)構(gòu)方面,可參考nuScenes等主流公開數(shù)據(jù)集,輸出內(nèi)容包括:

圖像與點云數(shù)據(jù);

sample_data.json:記錄每幀傳感器輸出;

calibrated_sensor.json:定義傳感器內(nèi)參與外參;

ego_pose.json:記錄自車位姿;

sample_annotation.json:包含目標(biāo)類別、姿態(tài)、屬性等。

這類結(jié)構(gòu)高度規(guī)范化,能夠直接對接工業(yè)級模型訓(xùn)練平臺。

wKgZPGh1zzWARSk4AABmOj86fGM820.png使用nuScenes工具融合繪制點云和相機(jī)標(biāo)注框的示例

04 艙內(nèi)場景:DMS/OMS場景狀態(tài)建模

艙內(nèi)感知系統(tǒng)的發(fā)展,迫切依賴于高質(zhì)量、可控、合規(guī)數(shù)據(jù)供給。合成數(shù)據(jù)在此領(lǐng)域的優(yōu)勢更加顯著。

艙內(nèi)數(shù)據(jù)生成流程涵蓋

人物角色建模與行為驅(qū)動:構(gòu)建多樣化人群模型,并通過腳本驅(qū)動其執(zhí)行如閉眼、注視、操作中控等動作。

艙內(nèi)結(jié)構(gòu)與光照建模:模擬不同車型、座椅布局、艙內(nèi)飾件,以及多種照明干擾情況。

多攝像頭布局配置:支持模擬ADAS系統(tǒng)中常見布置,如A柱、后視鏡下方、方向盤攝像頭等。

多標(biāo)簽同步輸出:生成RGB圖像、深度圖、語義圖、關(guān)鍵點坐標(biāo)、行為狀態(tài)標(biāo)簽等。

同時,艙內(nèi)場景需要重點關(guān)注以下干擾要素

遮擋情況模擬(口罩、墨鏡、靠枕);

光照擾動(反光、背光、高對比);

姿態(tài)多樣性(側(cè)臥、低頭、歪斜等復(fù)雜行為);

行為序列的時間連續(xù)性與自然性。

數(shù)據(jù)結(jié)構(gòu)建議以目錄方式組織,明確劃分圖像類、幾何類與標(biāo)簽類數(shù)據(jù),保障時序一致性跨視角同步。

wKgZPGh1z0yAUucnAABZwQdAIG8340.png提供多種數(shù)據(jù)分割方式及標(biāo)注JSON文件的艙內(nèi)合成數(shù)據(jù)示例

05 合成數(shù)據(jù):助力感知系統(tǒng)開發(fā)

綜上所述,合成數(shù)據(jù)不再是數(shù)據(jù)稀缺時的權(quán)宜之計,而正在演變?yōu)?strong>智能汽車感知系統(tǒng)大規(guī)模、高頻率、端到端開發(fā)的關(guān)鍵支撐。通過系統(tǒng)性建設(shè)合成數(shù)據(jù)體系,開發(fā)團(tuán)隊可以實現(xiàn)

快速生成高質(zhì)量訓(xùn)練數(shù)據(jù),覆蓋邊緣與稀缺場景;

標(biāo)注自動化與一致性保障;

多模態(tài)融合的標(biāo)準(zhǔn)化輸出;

可追溯、可重現(xiàn)的驗證機(jī)制。

企業(yè)在構(gòu)建合成數(shù)據(jù)平臺時,重點關(guān)注以下三點

平臺工具鏈解耦:保持生成邏輯獨立于具體仿真平臺;

結(jié)構(gòu)對齊標(biāo)準(zhǔn)數(shù)據(jù)集:如 nuScenes、COCO 等;

自動化與參數(shù)化流程完整閉環(huán)。

通過艙外與艙內(nèi)雙向并進(jìn)的合成數(shù)據(jù)體系,智能汽車的感知能力將具備更高的魯棒性覆蓋性工程實用性。????

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 智能汽車
    +關(guān)注

    關(guān)注

    30

    文章

    3090

    瀏覽量

    108398
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    破解數(shù)據(jù)瓶頸智能汽車合成數(shù)據(jù)架構(gòu)與應(yīng)用實踐

    合成數(shù)據(jù)因可控等特性,已成為智能汽車感知系統(tǒng)數(shù)據(jù)成本高、場景覆蓋不足等困境的突破方向!。本文探討其體系原則、分層結(jié)構(gòu),聚焦艙外道路感知與艙內(nèi)乘員識別場景,闡述生成流程與
    的頭像 發(fā)表于 07-16 10:31 ?275次閱讀
    <b class='flag-5'>破解數(shù)據(jù)</b><b class='flag-5'>瓶頸</b>:<b class='flag-5'>智能</b><b class='flag-5'>汽車</b><b class='flag-5'>合成數(shù)據(jù)</b><b class='flag-5'>架構(gòu)</b>與應(yīng)用<b class='flag-5'>實踐</b>

    51Sim利用NVIDIA Cosmos提升輔助駕駛合成數(shù)據(jù)場景的泛化性

    輔助駕駛領(lǐng)域的經(jīng)驗成功拓展到了具身智能領(lǐng)域,為端到端輔助駕駛仿真測試與具身智能機(jī)器人訓(xùn)練提供了海量高置信度的合成數(shù)據(jù),目前相關(guān)成果已在多個主機(jī)廠和智能裝備企業(yè)中實現(xiàn)落地應(yīng)用。
    的頭像 發(fā)表于 06-26 09:09 ?395次閱讀

    康謀分享| 揭秘C-NCAP :合成數(shù)據(jù)如何助力攻克全球安全合規(guī)難關(guān)?

    C-NCAP 2024新規(guī)將DMS、RFR納入評分體系,推動中國汽車安全從被動向主動轉(zhuǎn)型。車企面臨成本、惡劣環(huán)境可靠性等挑戰(zhàn)。如何通過虛擬仿真和合成數(shù)據(jù)技術(shù),助力車企大幅提升驗證效率,滿足合規(guī)標(biāo)準(zhǔn)?
    的頭像 發(fā)表于 06-18 10:07 ?1229次閱讀
    康謀分享| 揭秘C-NCAP :<b class='flag-5'>合成數(shù)據(jù)</b>如何助力攻克全球安全合規(guī)難關(guān)?

    CPO光電共封裝如何破解數(shù)據(jù)中心“功耗-帶寬”困局?

    瓶頸問題。隨著人工智能、云計算和大數(shù)據(jù)等技術(shù)的快速發(fā)展,數(shù)據(jù)中心對網(wǎng)絡(luò)帶寬和能效的要求不斷提高,CPO技術(shù)逐漸成為行業(yè)關(guān)注的焦點。 ? CPO 光電共封裝技術(shù)原理及挑戰(zhàn) ? CPO技術(shù)
    的頭像 發(fā)表于 06-18 01:09 ?7567次閱讀

    NVIDIA GTC巴黎亮點:全新Cosmos Predict-2世界基礎(chǔ)模型與CARLA集成加速智能汽車訓(xùn)練

    全新的 Cosmos Predict-2 世界基礎(chǔ)模型與 CARLA 的集成加速了智能汽車訓(xùn)練。 輔助駕駛堆棧正在從許多不同的模型演變?yōu)榻y(tǒng)一的端到端架構(gòu),端到端架構(gòu)可直接根據(jù)傳感器
    的頭像 發(fā)表于 06-12 10:00 ?580次閱讀

    干貨分享 | 從云端到單機(jī)的數(shù)據(jù)匿名化全攻略

    數(shù)據(jù)驅(qū)動決策時代,企業(yè)面臨隱私合規(guī)與數(shù)據(jù)利用的雙重挑戰(zhàn)(如PIPL、GDPR等隱私規(guī)定要求)。如何在聚焦效率與合規(guī)平衡,助力汽車、零售等行業(yè)在保護(hù)敏感信息的同時,安全釋放視頻數(shù)據(jù)價值
    的頭像 發(fā)表于 06-04 09:53 ?329次閱讀
    干貨分享 | 從云端到單機(jī)的<b class='flag-5'>數(shù)據(jù)</b>匿名化全攻略

    電信運營商如何破解數(shù)據(jù)存力瓶頸

    五月的節(jié)日交響曲中,世界電信日或許是最具科技感的音符。它可不是什么營銷節(jié)日噱頭,而是實打?qū)嵉摹凹夹g(shù)紀(jì)念日”!節(jié)日源于國際電信聯(lián)盟(ITU)的成立,旨在提升全球?qū)νㄐ偶夹g(shù)發(fā)展的關(guān)注。
    的頭像 發(fā)表于 05-19 17:36 ?478次閱讀

    大模型時代的新燃料:大規(guī)模擬真多風(fēng)格語音合成數(shù)據(jù)

    大模型充分學(xué)習(xí)到語音的發(fā)音規(guī)律、語義特征、語境等信息,從而提升語音識別、語音合成等關(guān)鍵能力,提供更加準(zhǔn)確、自然、智能的語音交互體驗。 語音大模型發(fā)展面臨數(shù)據(jù)難題 然而,當(dāng)前語音大模型的發(fā)展正面臨多重
    的頭像 發(fā)表于 04-30 16:17 ?270次閱讀

    技術(shù)分享 | 高逼真合成數(shù)據(jù)助力智駕“看得更準(zhǔn)、學(xué)得更快”

    自動駕駛研發(fā)如何高效獲取海量訓(xùn)練數(shù)據(jù)?高逼真合成數(shù)據(jù)技術(shù)正在提供新解法。通過仿真平臺可生成多場景、多傳感器的精準(zhǔn)標(biāo)注數(shù)據(jù)。文章詳解如何構(gòu)建符合nuScenes標(biāo)準(zhǔn)的數(shù)據(jù)集,覆蓋復(fù)雜交通
    的頭像 發(fā)表于 04-29 10:47 ?2896次閱讀
    技術(shù)分享 | 高逼真<b class='flag-5'>合成數(shù)據(jù)</b>助力智駕“看得更準(zhǔn)、學(xué)得更快”

    借助OpenUSD與合成數(shù)據(jù)推動人形機(jī)器人發(fā)展

    適用于合成運動數(shù)據(jù)的 NVIDIA Isaac GR00T Blueprint 大幅加快人形機(jī)器人的數(shù)據(jù)生成和訓(xùn)練速度。
    的頭像 發(fā)表于 04-25 10:04 ?375次閱讀

    技術(shù)分享 | AVM合成數(shù)據(jù)仿真驗證方案

    AVM 合成數(shù)據(jù)仿真驗證技術(shù)為自動駕駛環(huán)境感知發(fā)展帶來助力,可借助仿真軟件配置傳感器、搭建環(huán)境、處理圖像,生成 AVM 合成數(shù)據(jù),有效加速算法驗證。然而,如何利用仿真軟件優(yōu)化傳感器外參與多場景驗證,顯著提升AVM算法表現(xiàn)?
    的頭像 發(fā)表于 03-19 09:40 ?3057次閱讀
    技術(shù)分享 | AVM<b class='flag-5'>合成數(shù)據(jù)</b>仿真驗證方案

    RTX 5880 Ada 驅(qū)動51Sim實現(xiàn)端到端仿真與數(shù)據(jù)合成新飛躍

    。 51Sim 由 51WORLD 于 2017 年孵化,是國內(nèi)領(lǐng)先的 AI 合成數(shù)據(jù)及仿真平臺公司,在智能駕駛仿真和數(shù)據(jù)閉環(huán)領(lǐng)域有著卓越的產(chǎn)品競爭力和商業(yè)化能力?,F(xiàn)核心產(chǎn)品包括智能
    的頭像 發(fā)表于 02-13 12:46 ?566次閱讀
    RTX 5880 Ada 驅(qū)動51Sim實現(xiàn)端到端仿真與<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>合成</b>新飛躍

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗】+數(shù)據(jù)在具身人工智能中的價值

    工作和資源浪費,并造成“數(shù)據(jù)孤島”。這些孤島嚴(yán)重阻礙了 EAI 的進(jìn)展。 數(shù)據(jù)捕獲和生成 為了解決 EAI 開發(fā)中的數(shù)據(jù)可用性瓶頸,強(qiáng)大的數(shù)據(jù)
    發(fā)表于 12-24 00:33

    邊緣計算架構(gòu)設(shè)計最佳實踐

    邊緣計算架構(gòu)設(shè)計最佳實踐涉及多個方面,以下是一些關(guān)鍵要素和最佳實踐建議: 一、核心組件與架構(gòu)設(shè)計 邊緣設(shè)備與網(wǎng)關(guān) 邊緣設(shè)備 :包括各種嵌入式設(shè)備、傳感器、
    的頭像 發(fā)表于 10-24 14:17 ?1108次閱讀