資料介紹
描述
概括
這個項目,最簡單地說,是對通用移動機器人技術(shù)的探索。我已著手在 DeepRacer 上構(gòu)建多種行為,以了解機器人專家所需的不同技能。在撰寫本文時,我已經(jīng)構(gòu)建了并行停車和車道跟蹤 ROS 節(jié)點,這些節(jié)點在機器人上運行,具有相當強的魯棒性。我希望任何閱讀本文的人都知道如何使用 OpenCV 的廣泛庫實現(xiàn)基本的顏色閾值、邊緣檢測和特征提取。您還將能夠編寫一個簡單的基于 python 的 ROS 包,以近乎實時的方式實現(xiàn)該算法。最后,我將 AprilTag 檢測庫用于平行停車功能,
背景
AWS DeepRacer 是亞馬遜開發(fā)的一款可愛的機器,旨在讓沒有技術(shù)背景的人更容易使用強化學習。該車輛擁有運行 Ubuntu 16.04 的英特爾凌動處理器,允許它使用機器人操作系統(tǒng) (ROS) 和英特爾 OpenVINO 進行視覺處理(我對這個框架沒有做任何事情)。它配備了一個 4 兆像素的廣角攝像頭、一個控制所有 4 個輪子的直流電機和一個轉(zhuǎn)向伺服系統(tǒng)。還有一個慣性測量單元 (IMU),我還沒有接觸到它。有關(guān) DeepRacer 的更多信息,請訪問https://aws.amazon.com/deepracer/
我有機會修補其中一個版本 1 DeepRacers,我想分享我的經(jīng)驗。我一定要盡可能多地解釋我的過程,或者附上我將從中改編方法的地方的鏈接。
車道跟隨
我在機器人上實現(xiàn)車道跟蹤時使用的算法基礎(chǔ)可以在 David Tian 撰寫的精彩的 6 部分系列文章中找到,該系列文章開頭為:https://towardsdatascience.com/deeppicar-part-1-102e03c83f2c。
該算法背后的基本思想分為兩部分:
1.圖像處理:
來自 DeepRacer 相機的校正圖像流首先針對色調(diào)-飽和度值 (HSV) 顏色空間中的目標車道顏色進行閾值處理,因為這在寬亮度范圍內(nèi)提供了顯著更高的性能。然后使用 Canny 邊緣檢測算法計算找到的區(qū)域的邊緣。隨后使用概率霍夫線變換將計算出的邊連接成線段。這三種算法都是現(xiàn)成的OpenCV函數(shù),所以不需要重新造輪子。整個感興趣區(qū)域縮小到圖像的下半部分,因為這是 DeepRacer 立即關(guān)注的區(qū)域。然后使用剩余計算出的線段的平均坡度來計算第 2 部分中使用的檢測到的車道線。
下圖顯示了處理圖像的進展,最終檢測到的車道投影到原始圖像上。

2. 計算目標航向:
這部分算法是我和 Tian 的工作的卷積。這部分采用第 1 部分中的車道線。如果車道可見,則有兩種可能的情況 - 兩條車道線都可見(理想情況),或者只有一條線可見。
首先,我們解決兩者中較容易的一個:
- 兩條可見車道線 - 當有兩條可見車道線時,任務簡化為計算兩個端點之間的中點并將其設(shè)置為目標點。然后我在目標和圖像底部的中心點(我將其作為相機的中心)之間插入一條線。這條線與正 y 軸形成的角度給出了傳遞給 DeepRacer 的轉(zhuǎn)向角。
- 一條可見的車道線——只有一條車道線,我在計算轉(zhuǎn)向角時遇到了一些困難。我最終決定簡單地計算一條與單個可見線平行的航向線。在反復測試中,這種方法產(chǎn)生了不錯的結(jié)果,但我不相信它的穩(wěn)健性,我愿意接受更好的建議。
這基本上總結(jié)了 DeepRacer 的基本車道跟隨算法。我希望它有助于為任何流動站開發(fā)車道跟隨器提供基礎(chǔ)。
平行停車
在本節(jié)中,我將介紹為平行停放機器人而開發(fā)的算法。我想首先指出,由于感測有限,算法相當簡單——單個攝像頭意味著汽車必須依賴大部分開環(huán)控制。這就是說,平行泊車方法分為兩部分——
- DeepRacer 從位置 1 開始,如下圖所示,它估計標簽 1 和 2 之間的距離,并確定它是否真的可以放入停車位
- 如果可以,它就會驅(qū)動到位置 2。這部分過程是完全開環(huán)的
- 然后它可以從位置 2 估計它相對于標簽 3 的位置,如果它在指定區(qū)域內(nèi),它會繼續(xù)實際停放自己。同樣,這部分是開環(huán)的,因為我們無法在它停放時感覺到它靠近任何一個盒子

編寫此節(jié)點的目的是讓自己獲得一些編寫發(fā)布和訂閱 ROS 節(jié)點的經(jīng)驗,該節(jié)點實現(xiàn)了多種消息類型并包含視覺信息。前面提到的標簽是 AprilTags,它是一個標記家族,可以簡化各種與深度相關(guān)的圖像處理任務。有關(guān) AprilTag 項目的更多信息,請訪問https://april.eecs.umich.edu/software/apriltag 。標準 AprilTag ROS 節(jié)點發(fā)布相機相對于相機視野內(nèi)任何標簽的旋轉(zhuǎn)和平移(姿勢)。我就是用這個姿勢來確保汽車可以完成過程的每個階段。
隨著我花更多時間在 DeepRacer 上,我會不斷改進算法并增加它們的數(shù)量。我已經(jīng)著眼于實施對象檢測和跟蹤,以消除系統(tǒng)對 AprilTag 系統(tǒng)的依賴。
- 自動駕駛芯片市場現(xiàn)狀和趨勢分析 4次下載
- 數(shù)據(jù)驅(qū)動的自動駕駛
- 初識自動駕駛系統(tǒng)
- 車路協(xié)同式的自動駕駛(VICAD)
- 智能汽車和自動駕駛行業(yè)人才狀態(tài)初探
- 為什么不能完全相信自動駕駛
- 自動駕駛需要做哪些測試
- 自動駕駛技術(shù)概述
- 自動駕駛基礎(chǔ)架構(gòu)
- 車路協(xié)同自動駕駛數(shù)據(jù)集DAIR-V2X
- 自動駕駛與車路協(xié)同
- 自動駕駛和避障漫游者開源
- 車用天線和手機天線有何不同?一輛自動駕駛車要使用多少天線?資料下載
- 2020年自動駕駛汽車技術(shù)報告 17次下載
- 基于Uber自動駕駛汽車的介紹 2次下載
- 連接視覺語言大模型與端到端自動駕駛 299次閱讀
- 基于C-V2X的車路協(xié)同自動駕駛關(guān)鍵技術(shù)與應用 907次閱讀
- 自動駕駛汽車的7大誤解匯總 3396次閱讀
- 自動駕駛和無人駕駛到底是不是一個概念? 7377次閱讀
- 探討當前自動駕駛測試技術(shù) 4860次閱讀
- 自動駕駛技術(shù)涉及到的AI科技 6229次閱讀
- 自動駕駛的概述、技術(shù)、人才、應用和趨勢 1w次閱讀
- 自動駕駛領(lǐng)域的人車交互 4730次閱讀
- 自動駕駛車的人車交互接口設(shè)計 4212次閱讀
- 深入分析自動駕駛系統(tǒng)以及涉及到的軟件系統(tǒng) 1.7w次閱讀
- 另辟蹊徑 自動駕駛域控制器 7929次閱讀
- 如果只是hardware可以自動駕駛,也能叫“全”自動駕駛嗎? 4396次閱讀
- 深圳自動駕駛公交車,激光雷達引路護航 3109次閱讀
- Uber自動駕駛事故原因解析_自動駕駛事故還有哪些 8813次閱讀
- 自動駕駛技術(shù)原理介紹和未來的趨勢如何 3.4w次閱讀
下載排行
本周
- 1人形機器人電機驅(qū)動和傳感報告
- 4.27 MB | 9次下載 | 免費
- 2Altium Designer元件庫
- 17.11 MB | 6次下載 | 免費
- 324V2A開關(guān)電源PCB資料分享
- 0.23 MB | 4次下載 | 1 積分
- 4GD100PIX120C6SNA規(guī)格書
- 0.98 MB | 3次下載 | 免費
- 5Multisim模擬電路仿真教程
- 1.93 MB | 1次下載 | 3 積分
- 6BK7258英文規(guī)格書
- 1.67 MB | 1次下載 | 免費
- 7RA4L1硬件手冊
- 21.89 MB | 1次下載 | 免費
- 8RA4L1_SENSOR-V1原理圖
- 754.36 KB | 1次下載 | 免費
本月
- 1晶體三極管的電流放大作用詳細說明
- 0.77 MB | 32次下載 | 2 積分
- 2雙極型三極管放大電路的三種基本組態(tài)的學習課件免費下載
- 4.03 MB | 25次下載 | 1 積分
- 3AIWA HS-J303 MKⅡ維修手冊
- 22.47 MB | 24次下載 | 10 積分
- 4九陽豆?jié){機高清原理圖
- 2.47 MB | 23次下載 | 1 積分
- 5多級放大電路的學習課件免費下載
- 1.81 MB | 21次下載 | 2 積分
- 6AIWA HS-J202/HS-J202M/HS-J800維修手冊
- 13.60 MB | 16次下載 | 10 積分
- 7東芝彩色電視機29SF6C維修說明書
- 4.86 MB | 9次下載 | 1 積分
- 8人形機器人電機驅(qū)動和傳感報告
- 4.27 MB | 9次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935127次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計
- 1.48MB | 420063次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191382次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183338次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81586次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73814次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論