一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

CVPR2022;直接從點(diǎn)云提取3D基元

3D視覺(jué)工坊 ? 來(lái)源:3D視覺(jué)工坊 ? 2023-10-12 16:49 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

1介紹

我們的日常生活環(huán)境充滿了經(jīng)過(guò)精心設(shè)計(jì)的計(jì)算機(jī)輔助設(shè)計(jì)制造的物體。這使得在需要物理對(duì)象的副本或變體但相應(yīng)的CAD模型不可用的情況下,進(jìn)行逆向工程成為一個(gè)重要的工作流程。這種情況經(jīng)常發(fā)生在修復(fù)機(jī)械或?qū)⑶皵?shù)字時(shí)代制造的物體數(shù)字化時(shí)。為此,首先使用產(chǎn)生點(diǎn)云的3D傳感器掃描對(duì)象,然后將其分解為一組一致的基元或曲面,這些基元或曲面可由現(xiàn)有的形狀建模工具(如Fusion360 或SolidWorks)解析。這里也推薦「3D視覺(jué)工坊」新課程徹底搞懂基于Open3D的點(diǎn)云處理教程!》。

2主要貢獻(xiàn)

1.介紹了一種新的方法,將三維重建任務(wù)建模為一個(gè)擠出圓柱體分解問(wèn)題,使其非常適合CAD建模。2.構(gòu)建了一個(gè)神經(jīng)網(wǎng)絡(luò),通過(guò)學(xué)習(xí)幾何代理將輸入點(diǎn)云分解成一組擠壓筒,然后利用這些幾何代理估計(jì)可微的閉式公式中的擠壓參數(shù)。3.在兩個(gè)現(xiàn)有的CAD數(shù)據(jù)集Fusion Gallery 和DeepCAD上進(jìn)行了定量和定性的驗(yàn)證

3方法

3.1擠壓圓筒定義

b034ef96-68d7-11ee-939d-92fbcf53809c.png

在深入研究方法細(xì)節(jié)之前,首先定義“擠壓圓筒”,這是一種基元,它使我們能夠靈活地從任意閉環(huán)創(chuàng)建任何形狀,通過(guò)一系列布爾運(yùn)算組合它們,的定義如圖 3 所示。我們進(jìn)一步提出了封閉形式和可微分的公式來(lái)從點(diǎn)恢復(fù)擠出參數(shù)。定義1:定義了一個(gè)非自相交、有限面積、閉環(huán)和歸一化2D草圖 由一組點(diǎn)定義,函數(shù) q 將值范圍映射到實(shí)數(shù)線,而另一個(gè)函數(shù) p 則將實(shí)數(shù)線映射到 2D 空間,2D 草圖已歸一化,這意味著它已被縮放和平移,因此其邊界框的寬度和高度均為 1 個(gè)單位定義2:定義了包含的平面,以及中心 c 和沿軸的法線 e定義3:定義圓柱體E , s是草圖的縮放率定義4:將沿著擠壓圓筒表面的點(diǎn)分類為基點(diǎn)或筒點(diǎn)?;c(diǎn)是位于擠出圓筒任一范圍的平面上的點(diǎn),而筒點(diǎn)是位于沿著擠出圓筒“側(cè)面”的點(diǎn)。因此,基點(diǎn)/筒點(diǎn)的表面法線平行/垂直于擠出軸 e。對(duì)于任何與擠壓圓柱體 (pi 2 R3) E 邊界相關(guān)的點(diǎn),我們用 bi 表示該屬性。bi = 0 表示桶,bi = 1 表示底座。其中 ni 是在點(diǎn) pi 處計(jì)算的表面法線。公理1:對(duì)于擠壓筒上的一組點(diǎn),最佳擠壓軸由下式給出:其中,,而 Nbase ∈ RNbase×3 ? N 和 Nbarr ∈ RNbarr×3 ? N 表示屬于擠壓圓柱體的底座/桶點(diǎn)的相應(yīng)法線,通過(guò)H的最小特征值對(duì)應(yīng)的特征向量即可得到解。公理2:對(duì)于一般加權(quán)點(diǎn)集,最佳擠出軸由下式給出:其中:φbarr/φbase 分別表示分配給所有點(diǎn)的桶/基礎(chǔ)權(quán)重

3.2其他參數(shù)計(jì)算

我們首先定義一個(gè)運(yùn)算符 :,該運(yùn)算符通過(guò)將給定向量 e 與 z 軸對(duì)齊,將該點(diǎn)投影到 xy 平面上,然后將另一個(gè)向量 c 居中以原點(diǎn)為中心,將 3D 點(diǎn)映射到 2D 點(diǎn)草圖:將此運(yùn)算符應(yīng)用于擠出圓柱體的基點(diǎn),以獲得圓柱體的未歸一化草圖s拉伸比例:通過(guò)取草圖中最遠(yuǎn)的點(diǎn)到原點(diǎn)的距離來(lái)計(jì)算拉伸比例預(yù)測(cè)草圖表示,每個(gè)線段 k 的桶點(diǎn)投影到由 (? ck, ? ek) 定義的平面上并按 ? sk 縮放S歸一化草圖:使用拉伸比例和通過(guò)縮放未歸一化草圖獲得的歸一化草圖:會(huì)出現(xiàn)一些問(wèn)題:很難通過(guò)這些點(diǎn)去簡(jiǎn)單的擬合一個(gè)二維基元,很難保證輸出草圖是封閉的,并且不自相交,而且同一個(gè) 2D 草圖可能有多種基本近似值,這阻礙了可學(xué)習(xí)性c擠壓中心:通過(guò) P 的所有桶點(diǎn)的平均值來(lái)估計(jì)由于我們估計(jì)的擠壓軸是無(wú)方向的,因此我們通過(guò)從方程(4)中取絕對(duì)值的最大值來(lái)計(jì)算范圍,并在兩個(gè)方向上擠壓計(jì)算出的范圍,即:,

4構(gòu)建擠壓圓筒網(wǎng)絡(luò)

4.1問(wèn)題定義

(i)實(shí)例分割 :定義將每個(gè)點(diǎn)分配給某個(gè)片段 k{1 ...K} 的可能性,其中每個(gè)片段都是擠壓柱面(ii) 基礎(chǔ)桶分割:實(shí)例化為 ,表示桶點(diǎn),表示底座(iii) 表面法線 N ∈ RNX3對(duì)此,建立一個(gè)神經(jīng)網(wǎng)絡(luò)

4.1.1網(wǎng)絡(luò)細(xì)節(jié)

現(xiàn)在給定預(yù)測(cè)的幾何結(jié)果,M 緊湊且聯(lián)合地組合了點(diǎn) 1)是基點(diǎn)或桶,以及 2)屬于某個(gè)段的預(yù)測(cè)概率。然后,我們應(yīng)用行式 softmax 將 ^ M 轉(zhuǎn)換為行隨機(jī)矩陣,其第 i 行表示點(diǎn) pi 屬于 2K 類之一

4.1.2通過(guò)神經(jīng)網(wǎng)絡(luò)推斷草圖

使用編碼器函數(shù) fβ 將草圖的二維點(diǎn)云映射到全局的歸一化草圖潛在空間。b03b7ce4-68d7-11ee-939d-92fbcf53809c.png編碼器函數(shù)生成的潛在代碼充當(dāng)解碼器函數(shù) S 的條件,該函數(shù)將 2D 點(diǎn) r 映射到其符號(hào)距離值到底層歸一化草圖。b04129a0-68d7-11ee-939d-92fbcf53809c.png解碼器:解碼器函數(shù)將 2D 空間中的一個(gè)點(diǎn)映射到底層歸一化草圖的有符號(hào)距離值該線段的點(diǎn)與地面真值草圖曲線之間的距離由一個(gè)隱式函數(shù)近似d 是 r 與線段 Sk 的地面真實(shí)草圖曲線之間的距離該方法涉及使用編碼器-解碼器架構(gòu),其中編碼器功能將二維點(diǎn)云映射到潛在空間,解碼器函數(shù)將二維空間中的一個(gè)點(diǎn)映射到其符號(hào)距離值到底層的歸一化草圖。

4.2訓(xùn)練

分割(seg)、基本點(diǎn)、桶點(diǎn)分類(bb)、法線(norm)和草圖組成的多任務(wù)非凸目標(biāo)來(lái)訓(xùn)練 G? 的參數(shù) ?正則化損失損失:1)預(yù)測(cè)法線和 GT 法線之間的絕對(duì)余弦距離進(jìn)行懲罰:2)分割損失3)4)草圖正則化損失

5實(shí)驗(yàn)結(jié)果

b047814c-68d7-11ee-939d-92fbcf53809c.png

該圖顯示(從上到下)(1)輸入點(diǎn)云,(2)我們的預(yù)測(cè)分割,(3-5)相應(yīng)的一組擠壓圓柱體和(6)我們的最終重建。該圖還說(shuō)明了我們分解的各個(gè)擠出圓筒是由各種閉環(huán)產(chǎn)生的。這里也推薦「3D視覺(jué)工坊」新課程徹底搞懂基于Open3D的點(diǎn)云處理教程!》。

6.總結(jié)

Point2Cyl,用于將 3D CAD 模型逆向工程為 CAD 設(shè)計(jì)者可解釋和使用的基元。為了解決這個(gè)具有挑戰(zhàn)性的離散連續(xù)分解問(wèn)題,首先引入了擠壓缸并開發(fā)了其擬合點(diǎn)集的基礎(chǔ)。然后,提出了適合神經(jīng)架構(gòu)的可微分算法,該算法將點(diǎn)云劃分為一組擠壓缸。受益于一組代理預(yù)測(cè),這些預(yù)測(cè)被證明可以注入正確的幾何歸納偏差。與標(biāo)準(zhǔn)原始擬合相反,Point2Cyl 的輸出允許形狀變化,并且可以直接導(dǎo)入到現(xiàn)有的 CAD 建模器中,以進(jìn)行進(jìn)一步的重建、可視化和可重用性。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 編碼器
    +關(guān)注

    關(guān)注

    45

    文章

    3794

    瀏覽量

    137983
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2959

    瀏覽量

    110717
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4814

    瀏覽量

    103544
  • 點(diǎn)云
    +關(guān)注

    關(guān)注

    0

    文章

    58

    瀏覽量

    3959

原文標(biāo)題:CVPR2022 | 直接從點(diǎn)云提取3D基元

文章出處:【微信號(hào):3D視覺(jué)工坊,微信公眾號(hào):3D視覺(jué)工坊】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    基于3D點(diǎn)的多任務(wù)模型在板端實(shí)現(xiàn)高效部署

    對(duì)于自動(dòng)駕駛應(yīng)用來(lái)說(shuō),3D 場(chǎng)景感知至關(guān)重要。3D點(diǎn)數(shù)據(jù)就是具有3D特征的數(shù)據(jù)。一方面,3D
    的頭像 發(fā)表于 12-28 16:35 ?2097次閱讀
    基于<b class='flag-5'>3D</b><b class='flag-5'>點(diǎn)</b><b class='flag-5'>云</b>的多任務(wù)模型在板端實(shí)現(xiàn)高效部署

    基于深度學(xué)習(xí)的方法在處理3D點(diǎn)進(jìn)行缺陷分類應(yīng)用

    背景部分介紹了3D點(diǎn)應(yīng)用領(lǐng)域中公開可訪問(wèn)的數(shù)據(jù)集的重要性,這些數(shù)據(jù)集對(duì)于分析和比較各種模型至關(guān)重要。研究人員專門設(shè)計(jì)了各種數(shù)據(jù)集,包括用于3D形狀分類、
    的頭像 發(fā)表于 02-22 16:16 ?1906次閱讀
    基于深度學(xué)習(xí)的方法在處理<b class='flag-5'>3D</b><b class='flag-5'>點(diǎn)</b><b class='flag-5'>云</b>進(jìn)行缺陷分類應(yīng)用

    如何同時(shí)獲取2d圖像序列和相應(yīng)的3d點(diǎn)?

    如何同時(shí)獲取2d圖像序列和相應(yīng)的3d點(diǎn)?以上來(lái)自于谷歌翻譯以下為原文How to obtain the sequence of 2d im
    發(fā)表于 11-13 11:25

    面向3D機(jī)器視覺(jué)應(yīng)用并采用DLP技術(shù)的精確點(diǎn)生成參考設(shè)計(jì)

    3D 點(diǎn)。高度差異化 3D 機(jī)器視覺(jué)系統(tǒng)利用 DLP? LightCrafter? 4500 估模塊 (EVM)(采用 DLP? 0.45 英寸 WXGA 芯片組),能夠靈活控制工
    發(fā)表于 09-22 10:20

    CVPR2022 人-物交互檢測(cè)中結(jié)構(gòu)感知轉(zhuǎn)換相關(guān)資料推薦

    1、CVPR2022人-物交互檢測(cè)中結(jié)構(gòu)感知轉(zhuǎn)換  HOI Detection要求定位出存在交互的人、物并給出兩者之間的動(dòng)作關(guān)系,即最終要求給出三元組$$。實(shí)際的HOI系統(tǒng)執(zhí)行以人為中心的場(chǎng)景理解
    發(fā)表于 11-09 17:26

    3D點(diǎn)技術(shù)介紹及其與VR體驗(yàn)的關(guān)系

    ;x>nkedIn上發(fā)表了一篇跟澳大利亞科技公司優(yōu)立(Euclideon)所使用的點(diǎn)數(shù)據(jù)有關(guān)的文章,并在業(yè)內(nèi)引起了一番討論。 1. 點(diǎn)的問(wèn)題 點(diǎn)
    發(fā)表于 09-15 09:28 ?20次下載

    點(diǎn)問(wèn)題的介紹及3D點(diǎn)技術(shù)在VR中的應(yīng)用

    。即便是掃描最小的對(duì)象,系統(tǒng)都會(huì)創(chuàng)建上百萬(wàn)這樣的點(diǎn),所以要管理這樣的海量數(shù)據(jù)并不容易。CAD軟件可以連接各個(gè)點(diǎn),但這一過(guò)程需要大量的計(jì)算資源,完善成品模型往往是一個(gè)艱苦的過(guò)程。 點(diǎn)
    發(fā)表于 09-27 15:27 ?17次下載

    3D的感知技術(shù)及實(shí)踐

    測(cè)量表面法向量估計(jì) 幾何測(cè)量平面提取 3D重建離散點(diǎn)得到光滑曲面 3D重建ICP
    的頭像 發(fā)表于 10-23 09:40 ?3618次閱讀
    <b class='flag-5'>3D</b>的感知技術(shù)及實(shí)踐

    關(guān)于3D點(diǎn)針對(duì)失真的穩(wěn)健性的系統(tǒng)性研究

    3D 點(diǎn)廣泛應(yīng)用于 3D 識(shí)別技術(shù)中。一些特別的應(yīng)用領(lǐng)域往往對(duì) 3D 點(diǎn)
    的頭像 發(fā)表于 03-15 11:34 ?2070次閱讀

    何為3D點(diǎn)語(yǔ)義分割

    融合標(biāo)注使用的3D標(biāo)注工具仍以3D立體框?yàn)橹?,但?b class='flag-5'>3D點(diǎn)數(shù)據(jù)以外,還需要使用2D標(biāo)注工具在
    的頭像 發(fā)表于 07-21 15:52 ?9577次閱讀

    如何直接建立2D圖像中的像素和3D點(diǎn)云中的點(diǎn)之間的對(duì)應(yīng)關(guān)系

    準(zhǔn)確描述和檢測(cè) 2D3D 關(guān)鍵點(diǎn)對(duì)于建立跨圖像和點(diǎn)的對(duì)應(yīng)關(guān)系至關(guān)重要。盡管已經(jīng)提出了大量基于學(xué)習(xí)的 2
    的頭像 發(fā)表于 10-18 09:20 ?1w次閱讀

    如何試用MediaPipe實(shí)現(xiàn)人臉3D點(diǎn)數(shù)據(jù)提取

    本文介紹如何試用MediaPipe實(shí)現(xiàn)人臉3D點(diǎn)數(shù)據(jù)提取,提取的數(shù)據(jù)為人臉468點(diǎn)位。
    發(fā)表于 02-23 17:47 ?1888次閱讀

    3D點(diǎn)數(shù)據(jù)集在3D數(shù)字化技術(shù)中的應(yīng)用

    隨著計(jì)算機(jī)視覺(jué)技術(shù)的不斷發(fā)展,3D 數(shù)字化技術(shù)已經(jīng)成為了當(dāng)今工業(yè)制造領(lǐng)域和三維醫(yī)學(xué)影像領(lǐng)域的關(guān)鍵技術(shù)。然而,構(gòu)建高精度、高分辨率的 3D 點(diǎn)數(shù)據(jù)集對(duì)于實(shí)現(xiàn)這一技術(shù)至關(guān)重要。在這篇文章
    的頭像 發(fā)表于 05-06 16:46 ?1846次閱讀

    基于深度學(xué)習(xí)的3D點(diǎn)實(shí)例分割方法

    3D實(shí)例分割(3DIS)是3D領(lǐng)域深度學(xué)習(xí)的核心問(wèn)題。給定由點(diǎn)云表示的 3D 場(chǎng)景,我們尋求為每個(gè)點(diǎn)
    發(fā)表于 11-13 10:34 ?3236次閱讀
    基于深度學(xué)習(xí)的<b class='flag-5'>3D</b><b class='flag-5'>點(diǎn)</b><b class='flag-5'>云</b>實(shí)例分割方法

    C#通過(guò)Halcon實(shí)現(xiàn)3D點(diǎn)重繪

    C# 通過(guò) Halcon 實(shí)現(xiàn) 3D 點(diǎn)重繪
    發(fā)表于 01-05 09:16 ?0次下載