一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

電子設(shè)計 ? 作者:工程師之余 ? 2018-09-30 08:54 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

引言

機器視覺系統(tǒng)是智能機器人的重要標志,機器人視覺系統(tǒng)模仿了人的視覺感知能力,允許對環(huán)境做非接觸式的測量。增加了視覺系統(tǒng)的機器人,其自主和自適應(yīng)能力可以大大提高。目前,機器視覺系統(tǒng)在圖像處理方面多采用封裝式圖像處理方法,把圖像傳感與處理分成獨立的兩個部分。系統(tǒng)通過圖像傳感器獲取圖像并傳入計算機,由計算機完成圖像處理任務(wù)。

本文所介紹的設(shè)計為簡易機器人(能力風(fēng)暴機器人)添加了視覺模塊和無線通信模塊,并研究了相關(guān)算法和策略,實現(xiàn)了自主路徑跟蹤。為了使系統(tǒng)真正做到穩(wěn)定快速,在圖像預(yù)處理、路徑識別和路徑跟蹤等各個環(huán)節(jié)都充分考慮到算法的實時性與魯棒性。

1 系統(tǒng)結(jié)構(gòu)

視覺導(dǎo)航機器人的整個系統(tǒng)由兩部分構(gòu)成:添加了無線通信模塊和無線攝像頭的能力風(fēng)暴機器人和遠程計算機。這兩部分之間的通信由無線通信模塊完成。系統(tǒng)結(jié)構(gòu)如圖1所示。圖1中,機器人包括能力風(fēng)暴機器人、無線攝像頭和無線通信模塊三個部分。在機器人工作時,無線攝像頭將采集到的視頻信號傳送給無線視頻接收器,無線視頻接收器再通過視頻采集卡(Osprey210)將待處理的視頻信號傳送給計算機,計算機經(jīng)過處理后,做出相應(yīng)的決策,并將決策信號通過無線通信模塊發(fā)送給機器人,這樣就建立了一個簡單的閉環(huán)控制系統(tǒng)。無線通信模塊由兩個完全相同的無線串口通信模塊組成,工作在全雙工狀態(tài)。在機器人中無線通信模塊與機器人的串口控制器連接,在計算機中無線通信模塊與計算機的COM口相連。

2 軟件流程

整個系統(tǒng)的軟件分為機器人接收到遠程計算機指令后的處理軟件和遠程計算機針對到機器人發(fā)來視頻信號進行處理的視覺導(dǎo)航軟件。

機器人的軟件處理流程如圖2所示。機器人不停地掃描串口,一旦串口接收到遠程計算機的指令信號后,機器人便根據(jù)指令做出響應(yīng),整個處理過程比較簡單。

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

計算機的視覺導(dǎo)航軟件處理流程如圖3所示。機器人視覺系統(tǒng)的原始輸入圖像是經(jīng)圖像采集卡A/D變換之后得到的連續(xù)數(shù)字圖像。系統(tǒng)工作時,首先,圖像預(yù)處理模塊對原始輸入圖像進行平滑濾波,去除噪音點,并進行閾值分割,挑選出對機器人有用的目標點(即引導(dǎo)線);然后,路徑跟蹤模塊根據(jù)檢測到的路徑信息,做出策略分析,并對機器人發(fā)送相應(yīng)的運動指令。

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

3 主要算法描述

3.1 圖像預(yù)處理

3.1.1 圖像的平滑處理

在圖像采集系統(tǒng)中實際獲得的圖像,會因為各種原因受到干擾和噪聲的污染而引起圖像質(zhì)量的下降,圖像平滑處理就是為了消除圖像中存在的噪聲而對圖像施加的一種處理。本系統(tǒng)中采用中值濾波技術(shù)對原始圖像和二值化后的圖像進行濾波,這是一種非線性空間域濾波技術(shù)。這種技術(shù)不僅能有效地抑制圖像中的噪聲,而且能保持圖像中固有的輪廓邊界,不使其變模糊。對平面圖像進行中值濾波時我們一般采用二維中值濾波器。它由下式定義: Yij=MedianXij=Median(Xn)(r,s)∈s

這里,Xij為坐標(i,j)的待處理像素;S為平面窗口;而Yij為處理結(jié)果,即平面窗口中各像素值的中值。中值是指大小排序后,中間的數(shù)值。本系統(tǒng)中采用的是3X3的正方形窗口,經(jīng)實驗證明選用該窗口濾波后可以較好地濾除噪音。

3.1.2 彩色圖像二值化

圖像二值化的目的是將圖像一分為二,即將圖像劃分為物體和背景兩個部分。本系統(tǒng)中原始輸入圖像為(320×240)像素的RGB24格式圖像,采用直接對每個像素點進行閾值分割的方法即可達到對圖像實現(xiàn)二值化的目的。由于HSL顏色模型中亮度L分量與圖像的顏色信息無關(guān),而與顏色信息有關(guān)的色調(diào)H(表征顏色的種類)和飽和度S分量(表征顏色的深淺程度)對外界光照條件的變化敏感程度低。機器人在移動和旋轉(zhuǎn)時會引起光的亮度變化,RGB顏色模型對光的亮度魯棒性較差,所以在進行圖像二值化時應(yīng)該先將RGB顏色模型轉(zhuǎn)換為具有較強光亮不變性的HSL顏色模型。RGB顏色空間變換到HSL顏色空間的變換公式如下:

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

選取色調(diào)H作為路徑識別時的主參數(shù)。同時,考慮到實際當(dāng)RGB值較小,即亮度L較小時,H值會趨向于不確定的情況,選取亮度L作為輔助識別參數(shù)。算法為:

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

其中,Hmin、Hmax為某種顏色色調(diào)分量的最小閾值和最大閾值;Lmin為亮度的最小閾值。

3.2 引導(dǎo)線檢測

掃描白線(即引導(dǎo)線)的策略是每隔五行掃描,當(dāng)每行的白色像素點超過35個,而滿足這個條件的行超過16行時,才認為在機器人視野范圍存在白線。因為只有連續(xù)的白色區(qū)域是可以利用的,所以每隔五行進行掃描白線是可行的。這樣做不僅可以節(jié)省計算機的處理時間,加快程序處理速度,提高機器人響應(yīng)的實時性;而且還可以濾除機器人視野范圍內(nèi)可能出現(xiàn)的噪聲點。

引導(dǎo)線檢測的目的不僅僅是為了確定機器人視野范圍內(nèi)是否存在引導(dǎo)線,還需要確定引導(dǎo)線與距離機器人所在點的距離,以及引導(dǎo)線的角度信息。在本系統(tǒng)中,坐標約定如圖4所示。其中灰色小點代表機器人,很顯然,機器人在坐標系中的坐標應(yīng)該為(160,240)。L表示白線中線與直線Y=240的交點和機器人所處位置之間的距離。當(dāng)L》0時,上述交點處于機器人左方;L《0時,上述交點處于機器人右方。系統(tǒng)中規(guī)定的白線中線的△=△X/△Y,△值可以直接反映出白線角度信息。當(dāng)△》0時白線沿“/”方向;△《0白線沿“\”方向。由此可知,圖4中的白線中線的△應(yīng)該是大于0的。

在系統(tǒng)中,△的計算方法如下:首先計算出每隔五行掃描到的某一行白線的中點的△值,然后將機器人視野范圍內(nèi)掃描得到的所有行的白線△值累加后求得均值,這個均值就是機器人視野范圍內(nèi)白線的△值。采取這種算法是為了方便處理機器人視野范圍內(nèi)存在多段白線時的情況。以圖5為例,機器人視野范圍內(nèi)有兩段白線。這個時候,系統(tǒng)將兩條白線等效為平均△值對應(yīng)的白線,這樣在機器人眼里始終只有一條白線,有效降低了機器人所應(yīng)對的狀況的復(fù)雜度。

在計算出△值后,系統(tǒng)根據(jù)幾何原理便可計算出L,計算公式如下:

L=Xr-[Xc-(Yr-Yc)×△]

Xr為機器人所在點橫坐標;Yr為機器人所在點縱坐標;Xc為白線中點橫坐標的均值;Yc為白線中點縱坐標的均值。

3.3 路徑跟蹤

移動機器人的路徑跟蹤就是通過調(diào)節(jié)機器人的運動速度和方向,使機器人沿期望的路徑運動。即L=0且△=0。機器人對路徑的跟蹤控制可以采用PID控制器、最優(yōu)控制器、模糊控制器等方式。由于能力風(fēng)暴機器人是一個具有延遲的非線性時變系統(tǒng),難以建立精確的數(shù)學(xué)模型,故采用模糊控制器有一定的優(yōu)越性。

根據(jù)人的駕駛經(jīng)驗,當(dāng)人駕駛汽車跟蹤附近路面上的一條車道線時,他首先要進行觀察,將此直線當(dāng)作參考路徑,衡量車體與參考路徑段的橫向距離以及它們所處方向的夾角,而這種衡量是以一種模糊的概念給出的,如“距離比較大,角度很小”等。當(dāng)發(fā)現(xiàn)車體離參考路徑很遠且與期望方向偏角較大時,可以駕駛汽車快速轉(zhuǎn)彎,向期望位置靠攏;而在離參考路徑很近,汽車朝向已正對前方車道線上某一位置時,就不需轉(zhuǎn)動方向盤來改變行駛方向,而是一直保持當(dāng)前行駛狀態(tài),直至離車道線上拐點比較近時,再找下一個參考路徑段??梢愿鶕?jù)上述人的駕駛經(jīng)驗設(shè)計模糊控制器,視覺導(dǎo)引的機器人控制系統(tǒng)結(jié)構(gòu)如圖6所示。

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

3.3.1 模糊化

系統(tǒng)中模糊控制器的輸入量為距離偏差L和角度偏差△,輸出量為機器人小車相對車體軸線的轉(zhuǎn)向偏轉(zhuǎn)角β,輸入輸出量的論域、模糊子集以及模糊子集論域如表1所示。

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

由于在機器人實際運行過程中,偏差的產(chǎn)生具有隨機性,所以輸入輸出量的模糊子集的隸屬函數(shù)都采用高斯函數(shù)加以描述,即

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

Ci為隸屬函數(shù)的均值;δi為隸屬函數(shù)的標準差。

3.3.2 確定模糊規(guī)則

根據(jù)汽車駕駛的經(jīng)驗可得出如表2所示的49條模糊控制規(guī)則。

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

3.3.3 模糊推理和解模糊

模糊推理采用間接合成法推理公式,假設(shè)現(xiàn)有輸入L*、△*,需求出輸出β*,推理過程如下:

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

其中合成運算“?!辈捎萌〈笠蝗⌒。∕AX-MIN)法。

采用質(zhì)心法進行解模糊處理,從而得到精確的輸出值,解模糊計算公式如下:

應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計

將上述結(jié)果制成模糊控制表存儲起來,在機器人運行過程中只需在線查詢出相應(yīng)的β值,而不必進行大量的數(shù)學(xué)運算,這樣可以節(jié)省運算時間,提高控制的實時性。

4 綜述

目前此系統(tǒng)已經(jīng)通過中國科學(xué)技術(shù)大學(xué)教育處驗收,并作為本科生智能機器人教學(xué)實驗系統(tǒng)運行。為驗證本文提出的控制方法的有效性,我們按照上述控制策略在實驗場地中對機器人進行路徑跟蹤實驗。實驗場地為-2×2的綠色背景場地,在場地上貼上3 cm寬的白線作為引導(dǎo)線,如圖7所示。在實驗中,機器人能準確地跟蹤指定路徑。實驗表明,在實際應(yīng)用中,采用模糊控制方法具有較好的穩(wěn)定性和精度。通過HSL空間內(nèi)運算有效地提高圖像信號對光照的魯棒性。此設(shè)計可作為簡單的算法驗證和策略測試平臺。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關(guān)注

    關(guān)注

    213

    文章

    29718

    瀏覽量

    212765
  • 無線通信模塊
    +關(guān)注

    關(guān)注

    11

    文章

    65

    瀏覽量

    33057
  • 機器視覺系統(tǒng)
    +關(guān)注

    關(guān)注

    1

    文章

    84

    瀏覽量

    19189
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    詳細介紹機場智能指路機器人的工作原理

    機場智能指路機器人主要依靠感知系統(tǒng)、定位系統(tǒng)、導(dǎo)航系統(tǒng)、智能交互系統(tǒng)和運動系統(tǒng)協(xié)同工作,來實現(xiàn)為
    發(fā)表于 05-10 18:26

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】視覺實現(xiàn)的基礎(chǔ)算法的應(yīng)用

    的有效途徑。 結(jié)語 本書第7章和第8章內(nèi)容系統(tǒng)性強,從基礎(chǔ)理論到代碼實踐,為讀者提供了機器人視覺與SLAM的完整知識框架。未來,我計劃結(jié)合書中案例,進一步探索多傳感器融合、自主導(dǎo)航
    發(fā)表于 05-03 19:41

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】+ROS2應(yīng)用案例

    整書的內(nèi)容非常多有476頁。非常厚,像本厚厚的工具書 拿出文章中的小節(jié)加以書寫吧 視覺應(yīng)用:二維碼識別 二維碼識別是視覺應(yīng)用中的一個重要部分,它在機器人導(dǎo)航、物品追蹤和信息交互等方面有
    發(fā)表于 04-27 11:42

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】+內(nèi)容初識

    、Gazebo仿真(含RGBD相機/激光雷達仿真)、實物機器人運動控制,實現(xiàn)\"仿真→實物\"的無縫銜接 高階應(yīng)用篇(7-9章) 聚焦視覺SLAM、自主導(dǎo)航等前沿場景,提供完整項目鏈路(如
    發(fā)表于 04-27 11:24

    棱鏡——機器視覺系統(tǒng)中常見的重要配件

    棱鏡——機器視覺系統(tǒng)中常見的重要配件
    的頭像 發(fā)表于 01-15 17:36 ?533次閱讀
    棱鏡——<b class='flag-5'>機器</b><b class='flag-5'>視覺系統(tǒng)</b>中常見的重要配件

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人的基礎(chǔ)模塊

    具身智能機器人的基礎(chǔ)模塊,這個是本書的第二部分內(nèi)容,主要分為四個部分:機器人計算系統(tǒng),自主機器人的感知系統(tǒng),自主
    發(fā)表于 01-04 19:22

    【「具身智能機器人系統(tǒng)」閱讀體驗】+兩本互為支持的書

    最近在閱讀《具身智能機器人系統(tǒng)》這本書的同時,還讀了 《計算機視覺之PyTorch數(shù)字圖像處理》一書,這兩本書完全可以視為是互為依托的姊妹篇。《計算機視覺之PyTorch數(shù)字圖像處理》
    發(fā)表于 01-01 15:50

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人大模型

    。 多模態(tài)融合的創(chuàng)新與突破 機器人控制技術(shù)的另一個重要突破在于多模態(tài)大模型的應(yīng)用。相比于僅通過文字進行人機交互的傳統(tǒng)方法,現(xiàn)代機器人能夠融合視覺、聲音、定位等多模態(tài)輸入信息,為任務(wù)執(zhí)行
    發(fā)表于 12-29 23:04

    【「具身智能機器人系統(tǒng)」閱讀體驗】1.全書概覽與第一章學(xué)習(xí)

    完成任務(wù)。這種能力不僅依賴于先進的算法,還需配備復(fù)雜的硬件系統(tǒng),如視覺系統(tǒng)、微型傳動裝置、精密力控系統(tǒng),以及高性能的驅(qū)控關(guān)節(jié)模組等。 此外,作者還精準總結(jié)了當(dāng)前具身智能機器人行業(yè)面臨的
    發(fā)表于 12-27 14:50

    新型復(fù)眼結(jié)構(gòu)有望革新機器人視覺系統(tǒng)

    的靈敏度較現(xiàn)有市售產(chǎn)品高出兩倍以上。這一突破有望革新機器人視覺系統(tǒng)、增強機器人導(dǎo)航、感知和決策能力,并為人機協(xié)作開拓了更廣泛的商業(yè)應(yīng)用和未來發(fā)展空間。 ? ? 研究團隊(香港科技大學(xué)
    的頭像 發(fā)表于 12-24 10:49 ?856次閱讀
    新型復(fù)眼結(jié)構(gòu)有望革新<b class='flag-5'>機器人</b><b class='flag-5'>視覺系統(tǒng)</b>

    【「具身智能機器人系統(tǒng)」閱讀體驗】+初品的體驗

    《具身智能機器人系統(tǒng)》 一書由甘一鳴、俞波、萬梓燊、劉少山老師共同編寫,其封面如圖1所示。 本書共由5部分組成,其結(jié)構(gòu)和內(nèi)容如圖2所示。 該書可作為高校和科研機構(gòu)的教材,為學(xué)生和研究人員提供系統(tǒng)
    發(fā)表于 12-20 19:17

    安森美機器視覺系統(tǒng)解決方案

    機器視覺廣泛應(yīng)用于工業(yè)領(lǐng)域,涵蓋眾多應(yīng)用場景。在制造業(yè)中,利用機器視覺執(zhí)行的任務(wù)有:對子組件進行最終檢查,查驗零件有無潛在制造缺陷等等。在自
    的頭像 發(fā)表于 11-14 09:53 ?730次閱讀
    安森美<b class='flag-5'>機器</b><b class='flag-5'>視覺系統(tǒng)</b>解決方案

    解鎖機器人視覺與人工智能的潛力,從“盲人機器”改造成有視覺能力的機器人(上)

    正如人類依賴眼睛和大腦來解讀世界,機器人也需要自己的視覺系統(tǒng)來有效運作。沒有視覺,機器人就如同蒙上雙眼的人類,僅能執(zhí)行預(yù)編程的命令,容易碰撞障礙物,并犯下代價高昂的錯誤。這正是
    的頭像 發(fā)表于 10-12 09:56 ?774次閱讀
    解鎖<b class='flag-5'>機器人</b><b class='flag-5'>視覺</b>與人工智能的潛力,從“盲人<b class='flag-5'>機器</b>”改造成有<b class='flag-5'>視覺</b>能力的<b class='flag-5'>機器人</b>(上)

    適用于機器人視覺系統(tǒng)的LED光源

    工業(yè)光源在機器視覺系統(tǒng)中扮演著至關(guān)重要的角色,它們直接影響到圖像采集的質(zhì)量以及后續(xù)圖像處理的效率和準確性。在自動化生產(chǎn)線上,光源用于輔助機器人進行精確的零件裝配。通過提供穩(wěn)定且高質(zhì)量的
    的頭像 發(fā)表于 08-30 13:10 ?570次閱讀
    適用于<b class='flag-5'>機器人</b><b class='flag-5'>視覺系統(tǒng)</b>的LED光源

    機器視覺系統(tǒng)用途與實現(xiàn)及市場趨勢

    機器視覺廣泛應(yīng)用于工業(yè)領(lǐng)域,涵蓋眾多應(yīng)用場景。在制造業(yè)中,利用機器視覺執(zhí)行的任務(wù)有:對子組件進行最終檢查,查驗零件有無潛在制造缺陷等等。在自
    的頭像 發(fā)表于 07-26 09:22 ?1371次閱讀