一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

何為3D點(diǎn)云語(yǔ)義分割

新機(jī)器視覺 ? 來(lái)源:曼孚科技 ? 作者:曼孚科技 ? 2022-07-21 15:52 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

自動(dòng)駕駛環(huán)境感知系統(tǒng)中,如何獲取高精度實(shí)時(shí)路況數(shù)據(jù),是決定自動(dòng)駕駛系統(tǒng)行車安全的關(guān)鍵。

目前主流的兩種感知技術(shù)路徑“純視覺”與“高精地圖+激光雷達(dá)”中,由于激光雷達(dá)采集的3D點(diǎn)云路況數(shù)據(jù)更為密集、準(zhǔn)確且具備三維地理信息,因此以3D點(diǎn)云數(shù)據(jù)為基礎(chǔ)的感知算法即成為部分自動(dòng)駕駛企業(yè)的核心技術(shù)路徑,并誕生了規(guī)模龐大的3D點(diǎn)云數(shù)據(jù)標(biāo)注需求。

何為3D點(diǎn)云語(yǔ)義分割

對(duì)3D點(diǎn)云數(shù)據(jù)的標(biāo)注處理,依據(jù)處理方式和使用標(biāo)注工具的不同,大致可以分為三類:

▌純點(diǎn)云

純點(diǎn)云使用的標(biāo)注工具以3D立體框?yàn)橹?,待?biāo)注對(duì)象以3D立體框形式標(biāo)出,并附上相對(duì)應(yīng)的屬性信息標(biāo)簽,具體形式如下:

9c415ee6-07e1-11ed-ba43-dac502259ad0.jpg

圖片來(lái)源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺(tái)

▌融合標(biāo)注

融合標(biāo)注使用的3D標(biāo)注工具仍以3D立體框?yàn)橹鳎?D點(diǎn)云數(shù)據(jù)以外,還需要使用2D標(biāo)注工具在點(diǎn)云數(shù)據(jù)相對(duì)應(yīng)的2D圖像中進(jìn)行標(biāo)注,3D點(diǎn)云數(shù)據(jù)中的標(biāo)注對(duì)象與2D圖像中的標(biāo)注對(duì)象一一對(duì)應(yīng),具體形式如下:

9c68cef4-07e1-11ed-ba43-dac502259ad0.png

圖片來(lái)源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺(tái)

▌3D點(diǎn)云語(yǔ)義分割

與2D圖像語(yǔ)義分割標(biāo)注邏輯類似,3D點(diǎn)云語(yǔ)義分割也是對(duì)不同的待標(biāo)注對(duì)象進(jìn)行上色分割、賦予語(yǔ)義標(biāo)簽,不同的是3D點(diǎn)云語(yǔ)義分割需要在3維立體點(diǎn)云中對(duì)每個(gè)像素點(diǎn)指定一個(gè)類別標(biāo)簽,比如車輛、行人、道路、建筑物等,具體形式如下:

9c823f6a-07e1-11ed-ba43-dac502259ad0.png

圖片來(lái)源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺(tái)

相較于前兩種標(biāo)注方式,在需要更為精細(xì)的空間信息時(shí)(比如自動(dòng)泊車),立體框標(biāo)注場(chǎng)景中如鉸接式公交車等形狀可變的物體,3D點(diǎn)云語(yǔ)義分割標(biāo)注對(duì)路況數(shù)據(jù)的反饋更為精準(zhǔn),因此3D點(diǎn)云語(yǔ)義分割標(biāo)注在自動(dòng)駕駛感知算法中所占的比重也愈發(fā)高漲。

常見標(biāo)注規(guī)則與標(biāo)注對(duì)象

不同算法、不同應(yīng)用場(chǎng)景對(duì)點(diǎn)云語(yǔ)義分割的標(biāo)注需求與規(guī)則也不盡相同,常見的相對(duì)簡(jiǎn)單的自動(dòng)駕駛3D點(diǎn)云語(yǔ)義分割標(biāo)注對(duì)象包括:

1、行人:通常指未騎乘交通工具的人,包含騎滑板車、平衡車的人。

2、騎車人:通常包括騎摩托車、自行車、三輪車、電動(dòng)車等的人。

3、車輛:車輛是3D點(diǎn)云語(yǔ)義分割標(biāo)注場(chǎng)景下最為常見,且子分類較多的對(duì)象。子對(duì)象的劃分有依據(jù)車輛具體車型,比如轎車、卡車、公交車、救護(hù)車等,也有依據(jù)類別,比如客車、貨車、工程車等。

以類別為例,具體如下:

1)微型車:如代步車、各類三輪車等;

2)小型汽車:如轎車、SUV等;

3)客車:如大、中型巴士、雙層巴士等載人車輛;

4)貨車:如廂式貨車等載貨車輛;

5)工程車:灑水車、消防車、垃圾車等;

6)其他車輛。

4、路面相關(guān):與路面相關(guān)的各種對(duì)象,可具體細(xì)分為馬路可行駛區(qū)域、人行道、車道線等。

5、建筑物:如樓房、隧道橋面、橋墩、高架橋等。

6、植物:如草地、樹木等。

7、路面物體:路面物體也是一個(gè)子對(duì)象較多的種類,常見的包括:

1)護(hù)欄:如交通隔離欄、交通護(hù)欄等;

2)柵欄:臨時(shí)性的如交通水馬等;

3)交通標(biāo)志:如紅綠燈、標(biāo)識(shí)牌、桿等;

4)障礙物:如交通錐桶、警示牌、防撞桶、石墩等;

5)其他物體。

8、噪聲點(diǎn)云:如水霧、煙霧、汽車尾氣、雨水等各類噪聲點(diǎn)云。

以上是3D點(diǎn)云語(yǔ)義分割常見的各類標(biāo)注對(duì)象,但不同場(chǎng)景,具體的對(duì)象劃分規(guī)則以及待標(biāo)注對(duì)象種類都存在巨大差異,并沒有統(tǒng)一的標(biāo)準(zhǔn)。

而在更為具體的標(biāo)注規(guī)則上,差異同樣十分巨大。

常見的標(biāo)注規(guī)則如物體起標(biāo)范圍,通常會(huì)規(guī)定點(diǎn)云數(shù)量超過X以上,該物體即需要標(biāo)注,此外還會(huì)規(guī)定模糊無(wú)法判定物體的具體標(biāo)注規(guī)則等等,不一而足。

具象化的標(biāo)注實(shí)例如下:

9cbe3d76-07e1-11ed-ba43-dac502259ad0.png

標(biāo)注前(圖片來(lái)源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺(tái))

9c823f6a-07e1-11ed-ba43-dac502259ad0.png

標(biāo)注后(圖片來(lái)源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺(tái))

隨著自動(dòng)駕駛商業(yè)量產(chǎn)進(jìn)入新階段,開放路段場(chǎng)景復(fù)雜且多變,需要自動(dòng)駕駛算法有更深的場(chǎng)景積累度與迭代能力,以滿足感知算法與行車安全的需求。

3D點(diǎn)云語(yǔ)義分割更精細(xì)的場(chǎng)景信息反饋,在幫助算法建立更貼合現(xiàn)實(shí)的場(chǎng)景模型,以及提升感知安全方面具備天然優(yōu)勢(shì),在自動(dòng)駕駛邁向大規(guī)模商業(yè)化應(yīng)用的今天,勢(shì)必將扮演更重要的角色。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2959

    瀏覽量

    110731
  • 激光雷達(dá)
    +關(guān)注

    關(guān)注

    971

    文章

    4234

    瀏覽量

    192834
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    789

    文章

    14316

    瀏覽量

    170598

原文標(biāo)題:案例分享:自動(dòng)駕駛3D點(diǎn)云語(yǔ)義分割數(shù)據(jù)標(biāo)注

文章出處:【微信號(hào):vision263com,微信公眾號(hào):新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    3D AD庫(kù)文件

    3D庫(kù)文件
    發(fā)表于 05-28 13:57 ?5次下載

    告別漫長(zhǎng)等待! 3D測(cè)量竟然可以如此的絲滑

    據(jù)進(jìn)行實(shí)時(shí)處理,快速得到全視角的彩色高精度2D圖像和3D點(diǎn)。產(chǎn)品優(yōu)勢(shì)01高精度的在線3D檢測(cè)采用業(yè)界頂級(jí)的CMOS感光元件和超低畸變遠(yuǎn)心光
    的頭像 發(fā)表于 05-12 18:01 ?318次閱讀
    告別漫長(zhǎng)等待! <b class='flag-5'>3D</b>測(cè)量竟然可以如此的絲滑

    3D閃存的制造工藝與挑戰(zhàn)

    3D閃存有著更大容量、更低成本和更高性能的優(yōu)勢(shì),本文介紹了3D閃存的制造工藝與挑戰(zhàn)。
    的頭像 發(fā)表于 04-08 14:38 ?1036次閱讀
    <b class='flag-5'>3D</b>閃存的制造工藝與挑戰(zhàn)

    一種以圖像為中心的3D感知模型BIP3D

    在具身智能系統(tǒng)中,3D感知算法是一個(gè)關(guān)鍵組件,它在端側(cè)幫助可以幫助智能體理解環(huán)境信息,在云端可以用來(lái)輔助生成3D場(chǎng)景和3D標(biāo)簽,具備重要的研究?jī)r(jià)值?,F(xiàn)有主流算法主要依賴于點(diǎn)
    的頭像 發(fā)表于 03-17 13:44 ?468次閱讀
    一種以圖像為中心的<b class='flag-5'>3D</b>感知模型BIP<b class='flag-5'>3D</b>

    對(duì)于結(jié)構(gòu)光測(cè)量、3D視覺的應(yīng)用,使用100%offset的lightcrafter是否能用于點(diǎn)生成的應(yīng)用?

    你好,我有一些對(duì)于offset的疑問,希望能夠得到解答。 對(duì)于結(jié)構(gòu)光測(cè)量、3D視覺的應(yīng)用,使用100%offset的lightcrafter是否能用于點(diǎn)生成的應(yīng)用? 標(biāo)定和三角重建算法和zero
    發(fā)表于 02-28 06:20

    英倫科技裸眼3D便攜屏有哪些特點(diǎn)?

    英倫科技裸眼3D便攜屏采用了領(lǐng)先的光場(chǎng)裸眼3D技術(shù),無(wú)需佩戴3D眼鏡即可觀看,給用戶帶來(lái)裸眼看3D視頻的體驗(yàn),為用戶帶來(lái)更加便捷和自由的視覺享受。
    的頭像 發(fā)表于 02-06 14:20 ?499次閱讀
    英倫科技裸眼<b class='flag-5'>3D</b>便攜屏有哪些特點(diǎn)?

    SciChart 3D for WPF圖表庫(kù)

    SciChart 3D for WPF 是一個(gè)實(shí)時(shí)、高性能的 WPF 3D 圖表庫(kù),專為金融、醫(yī)療和科學(xué)應(yīng)用程序而設(shè)計(jì)。非常適合需要極致性能和豐富的交互式 3D 圖表的項(xiàng)目。 使用我們
    的頭像 發(fā)表于 01-23 13:49 ?617次閱讀
    SciChart <b class='flag-5'>3D</b> for WPF圖表庫(kù)

    騰訊混元3D AI創(chuàng)作引擎正式發(fā)布

    近日,騰訊公司宣布其自主研發(fā)的混元3D AI創(chuàng)作引擎已正式上線。這一創(chuàng)新性的創(chuàng)作工具將為用戶帶來(lái)前所未有的3D內(nèi)容創(chuàng)作體驗(yàn),標(biāo)志著騰訊在AI技術(shù)領(lǐng)域的又一重大突破。 混元3D AI創(chuàng)作引擎憑借其強(qiáng)大
    的頭像 發(fā)表于 01-23 10:33 ?594次閱讀

    騰訊混元3D AI創(chuàng)作引擎正式上線

    近日,騰訊公司宣布其自主研發(fā)的混元3D AI創(chuàng)作引擎已正式上線。這一創(chuàng)新性的創(chuàng)作工具,標(biāo)志著騰訊在3D內(nèi)容生成領(lǐng)域邁出了重要一步。 混元3D AI創(chuàng)作引擎的核心功能極為強(qiáng)大,用戶只需通過簡(jiǎn)單的提示詞
    的頭像 發(fā)表于 01-22 10:26 ?584次閱讀

    C#通過Halcon實(shí)現(xiàn)3D點(diǎn)重繪

    C# 通過 Halcon 實(shí)現(xiàn) 3D 點(diǎn)重繪
    發(fā)表于 01-05 09:16 ?0次下載

    3D掃描技術(shù)醫(yī)療領(lǐng)域創(chuàng)新實(shí)踐,積木易搭3D掃描儀Mole助力定制個(gè)性化手臂康復(fù)輔具

    1、“3D掃描+3D打印”技術(shù)為矯形修復(fù)、醫(yī)療輔助器具定制等領(lǐng)域帶來(lái)突破性創(chuàng)新 近年來(lái),隨著AI、大數(shù)據(jù)、3D掃描、3D打印、計(jì)算、物聯(lián)網(wǎng)
    的頭像 發(fā)表于 10-31 11:25 ?699次閱讀
    <b class='flag-5'>3D</b>掃描技術(shù)醫(yī)療領(lǐng)域創(chuàng)新實(shí)踐,積木易搭<b class='flag-5'>3D</b>掃描儀Mole助力定制個(gè)性化手臂康復(fù)輔具

    語(yǔ)義分割25種損失函數(shù)綜述和展望

    語(yǔ)義圖像分割,即將圖像中的每個(gè)像素分類到特定的類別中,是許多視覺理解系統(tǒng)中的重要組成部分。作為評(píng)估統(tǒng)計(jì)模型性能的主要標(biāo)準(zhǔn),損失函數(shù)對(duì)于塑造基于深度學(xué)習(xí)的分割算法的發(fā)
    的頭像 發(fā)表于 10-22 08:04 ?1614次閱讀
    <b class='flag-5'>語(yǔ)義</b><b class='flag-5'>分割</b>25種損失函數(shù)綜述和展望

    透明塑料件噴粉3D掃描CAV全尺寸檢測(cè)逆向3D建模設(shè)計(jì)服務(wù)-CASAIM

    3D建模
    中科院廣州電子
    發(fā)布于 :2024年08月30日 10:04:53

    圖像語(yǔ)義分割的實(shí)用性是什么

    什么是圖像語(yǔ)義分割 圖像語(yǔ)義分割是一種將圖像中的所有像素點(diǎn)按照其語(yǔ)義類別進(jìn)行分類的任務(wù)。與傳統(tǒng)的圖像分類和目標(biāo)檢測(cè)任務(wù)不同,
    的頭像 發(fā)表于 07-17 09:56 ?914次閱讀

    圖像分割語(yǔ)義分割的區(qū)別與聯(lián)系

    圖像分割語(yǔ)義分割是計(jì)算機(jī)視覺領(lǐng)域中兩個(gè)重要的概念,它們?cè)趫D像處理和分析中發(fā)揮著關(guān)鍵作用。 1. 圖像分割簡(jiǎn)介 圖像分割是將圖像劃分為多個(gè)區(qū)
    的頭像 發(fā)表于 07-17 09:55 ?1950次閱讀