中文字幕第二一区_久久久久在线视频_精品国产自在现线看久久_亚洲精品一区二区三区电影网

產品分類

當前位置: 首頁 > 工業控制產品 > 氣動產品 > 執行器件 > 抓取系統

類型分類:
科普知識
數據分類:
抓取系統

基于視覺與超聲技術機器人自動識別抓取系統

發布日期:2022-10-03 點擊率:138

摘要:提出了滿足機器人裝配作業中對工件進行可靠識別與抓取的信號處理技術及檢測方法,對能準確描述物體形狀的特征提取方法進行了研究,設計了一種基于視覺與超聲技術的機器人自動識別與抓取系統的結構,并在機器人裝配作業平臺上進行了物體識別與抓取的實驗研究。
關鍵詞:機器人;視覺;超聲技術;圖像識別

視覺傳感器能直觀反映物體的外部信息,但單個攝像頭只能獲得物體的二維圖像,立體視覺雖能提供三維信息,但對于外形相同,僅深度有差別的物體難以識別(如有孔物體、階梯狀物等) ,且對環境光線有一定的要求。由于超聲傳感器具有對光線、物體材料等不敏感,結構簡單,能直接獲取待測點至傳感器的距離等特點,因此本文采用視覺與超聲測量相結合的方法,將二維圖像信息與超聲波傳感器獲取的深度信息進行融合推斷,對待裝配工件進行自動識別與空間定位,并確定機械手末端執行器的空間位置與姿態,使其能在合適的部位準確抓取工件。

1 系統原理與結構

系統由機械手、CCD 視覺傳感器和超聲波傳感器及相應的信號處理單元等構成。CCD 安裝在機械手末端執行器上,構成手眼視覺,超聲波傳感器的接收和發送探頭也固定在機器人末端執行器上,由CCD 獲取待識別和抓取物體的二維圖像,并引導超聲波傳感器獲取深度信息。系統結構如圖1 所示。

圖像處理主要完成對物體外形的準確描述,包括以下幾個步驟:a. 圖像邊緣提取;b. 周線跟蹤;c. 特征點提取;d. 曲線分割及分段匹配;e. 圖形描述與識別。在提取物體圖像邊緣后,采用周線跟蹤進行邊緣細化,去除偽邊緣點及噪聲點,并對組成封閉曲線的邊緣點進Freeman 編碼,記錄每一條鏈碼方向和曲線上各點的X-Y 坐標值,便于進一步對物體的幾何特性進行分析。本研究對傳統的周線跟蹤算法中邊緣點的搜索方向與順序進行了改進,并在搜索過程中采取了及時消除冗余點的方法,減小了數據量與運算時間,而且具有較好的降噪及平滑效果。在提取圖像特征點時,將多邊形近似法與計算曲率的方法相結合,可克服多邊形近似法易產生偽特征點和計算曲率法計算量過大的缺點。CCD 獲取的物體圖像經處理后,可提取對象的某些特征,如物體的形心坐標、面積、曲率、邊緣、角點及短軸方向等。根據這些特征信息,可得到對物體形狀的基本描述,在圖像處理的基礎上,由視覺信息引導超聲波傳感器對待測點的深度進行測量,獲取物體的深度(高度) 信息,或沿工件的待測面移動,超聲波傳感器不斷采集距離信息,掃描得到距離曲線,根據距離曲線分析出工件的邊緣或外形[1 ] 。計算機將視覺信息和深度信息融合推斷后,進行圖像匹配、識別,并控制機械手以合適的位姿準確地抓取物體。

2.1 工件圖像邊緣的提取

復雜工件反映在圖像上常常不止一個灰度等級,僅利用一個灰度閾值無法提取有意義的邊緣。

若采用多閾值的方法,必然會增加計算時間和圖像處理的復雜程度。對于類別方差自動門限法,增加門限值不僅會提高數據處理復雜程度,而且當閾值多于2 個時,算法的可靠性就會受到影響。為此采用了直接從灰度圖像提取邊緣的方法。圖像邊緣一般發生在灰度函數值不連續處,可用灰度函數的一階或二階導數求得。經典的利用一階導數提取邊緣的方法有Robert s 算子、So2bel 算子等,利用二階導數提取邊緣的方法有Laplacian 算子和Marrs2Hilderth 算子等。通過對幾種算法的分析比較,認為Sobel 算子不僅實現容易、運算速度快,而且可提供最精確的邊緣方向估計。Sobel 算子由兩個3 ×3 相差90°的算子構成,由這兩個算子同圖像卷積,可得到圖像的邊緣及其方向。對于數字圖像{ f ( i ,j ) } ,Sobel 算子可表示為:

Gx(i,j)=f(i-1,j-1)+2f(i-1,j)+f(i-1,j+1)-f(i+1,j-1)-2f(i+1,j)-f(i+1,j+1);

Gy(i,j)=f(i-1,j-1)+2f(i,j-1)+f(i+1,j-1)-f(i-1,j+1)-2f(i,j+1)-f(i+1,j+1).

采用G1 = | Gx | + | Gy| 得到梯度幅值后,為減少所抽取的邊緣數目,可設置一個幅度門限,即只考慮對應灰度變化較大的那些邊緣。再利用邊緣點具有局部幅度最大的特點,將邊緣細化。利用Sobel 算子提取邊緣后,為了得到工件表面的尺寸信息,還必須提取圖像的角點[2 ] ,以便計算工件的邊長等特征信息。

2.2 形心坐標的確定

圖像中形心點的計算通常可通過兩種方法得出,一是通過區域處理求矩的方法計算形心坐標[3 ] ;二是通過邊緣鏈碼積分計算。圖像的矩計算公式為:該算法較為簡單,且對任意圖形都適用,但需要結合像素點隸屬區域劃分算法進行。

2.3 軸向的確定

為使機械手能以正確的姿態準確地抓取物體,必須精確確定物體的軸向。在幾何學中,物體的長軸定義為通過物體形心點的一條直線,物體關于該直線的二階矩為最小值。設圖像中物體長軸與圖像平面X 軸正方向夾角為θ,規定| θ| ≤π/ 2 ,則物體關于該軸線的二階矩為

該算法較為簡單,且對任意圖形都適用,但需要結合像素點隸屬區域劃分算法進行。

2.3 軸向的確定

為使機械手能以正確的姿態準確地抓取物體,必須精確確定物體的軸向。在幾何學中,物體的長軸定義為通過物體形心點的一條直線,物體關于該直線的二階矩為最小值。設圖像中物體長軸與圖像平面X 軸正方向夾角為θ,規定| θ| ≤π/ 2 ,則物體關于該軸線的二階矩為

很明顯,基于二階慣性矩的軸向確定方法是對整個物體區域進行運算,且必須先確定像素點的隸屬區域,故運算量較大。圖2 (a) 是用該算法確定的工件軸向。對于一些簡單形狀的物體,可采用如下簡單軸向估計算法:

a. 確定物體的形心坐標;

b. 確定物體邊緣輪廓閉合曲線前半段中離物體形心最近的點,用最小二乘法估算該點的切線方向,設其與圖像平面X 軸正方向夾角為α1 ;

c. 用同樣方法確定下半段曲線中對應的切線方向α2 ;

d. 物體軸向可粗略估計為θ= (α1 +α2) / 2.

圖2 ( b) 是采用簡化算法得到的工件軸向圖。該算法僅對物體邊緣輪廓點進行處理,使運算時間大為減少。

3 超聲深度檢測

由于CCD 攝像頭獲取的圖像不能反映工件的深度信息,因此對于二維圖形相同,僅高度略有差異的工件,只用視覺信息不能正確識別,本文采用超聲波測距傳感器則可彌補這一不足。經圖像處理得到工件的邊緣、形心等特征量后,引導機械手到達待測點,對工件深度進行測量,并融合視覺信號與超聲信號,可得到較完整的工件信息。安裝在機器人末端執行器上的超聲波傳感器由發射和接收探頭構成,根據聲波反射的原理,檢測由待測點反射回的聲波信號,經處理后得到工件的深度信息。為了提高檢測精度,在接收單元電路中,采用了可變閾值檢測、峰值檢測、溫度補償和相位補償等技術[1 ] ,可獲得較高的檢測精度。對視場中兩個外形完全相同、高度相差0.1 mm的柱形工件,采用本文提出的融合圖像和深度信息的方法,可準確識別與抓取。

4 實驗結果及結論

在上述方法研究的基礎上,完成了在MOVEMASTER2EX機器人裝配作業平臺上進行的物體識別與抓取實驗。在自然光及一般照明條件下,對機器人裝配作業平臺上視場范圍內任意放置的3~5 個不同形狀、大小的典型工件進行自動識別和抓取,結果表明,識別時間小于5 s(包括識別、定位與抓取過程機械手的移動時間) ,定位誤差小于±2 mm ,并具有較好的通用性和可移植性。圖3 (a) ~ (d) 分別是待抓取工件識別過程的圖像。

實驗結果表明,采用本文提出的將機器人手- 眼視覺與超聲波測距相結合的檢測裝置,以及融合二維圖像信息與深度信息進行工件識別與抓取的方法,可準確對物體進行識別與定位,具有算法簡單、計算量小、實時性好、可靠性高等特點,可為機器人與環境交互提供物體形狀、類別及大小等信息,使機器人裝配作業能適應各種復雜的環境與工藝過程,對實現工業生產過程的自動化、柔性化、智能化有良好的應用前景。

實驗結果表明,采用本文提出的將機器人手- 眼視覺與超聲波測距相結合的檢測裝置,以及融合二維圖像信息與深度信息進行工件識別與抓取的方法,可準確對物體進行識別與定位,具有算法簡單、計算量小、實時性好、可靠性高等特點,可為機器人與環境交互提供物體形狀、類別及大小等信息,使機器人裝配作業能適應各種復雜的環境與工藝過程,對實現工業生產過程的自動化、柔性化、智能化有良好的應用前景。

參考文獻
[1 ] 楊勁松,王敏,黃心漢。超聲波可變閾值測距裝置.電子技術應用,1998 ,24 (7) :7~9
[2 ] 張小莉,王敏,黃心漢。一種有效的基于Freeman 鏈碼的角點檢測法。電子測量與儀器學報,1999 ,13(2) :14~19
[3 ] The C ,Chin R。On Image Analysis by the Method ofMoments。IEEE Trans。Pattern Anal。Mach。Intell。,1988 (10) :291~310

下一篇: PLC、DCS、FCS三大控

上一篇: 索爾維全系列Solef?PV

推薦產品

更多
中文字幕第二一区_久久久久在线视频_精品国产自在现线看久久_亚洲精品一区二区三区电影网

      9000px;">

          视频一区免费在线观看| 另类小说综合欧美亚洲| 日韩成人午夜精品| bt欧美亚洲午夜电影天堂| 亚洲精品一区二区在线观看| 婷婷久久综合九色国产成人 | 日韩免费一区二区| 午夜精品久久久久久不卡8050| 国产一二精品视频| 国产欧美日韩视频在线观看| 精品一区二区国语对白| www亚洲一区| 国产不卡免费视频| 一区二区成人在线视频| 欧美日韩激情一区二区| 日韩和欧美一区二区| 日韩一区二区在线看| 樱桃视频在线观看一区| 91亚洲精品久久久蜜桃| 香蕉成人啪国产精品视频综合网| 欧美在线不卡视频| 国产精品一区二区在线观看网站| 国产精品久久毛片| 欧美日韩一区在线观看| 国产麻豆视频精品| 亚洲高清一区二区三区| 久久天天做天天爱综合色| 成人黄色小视频| 美女久久久精品| 亚洲精品乱码久久久久久| 欧美日韩在线播放| 成人爽a毛片一区二区免费| 一区二区中文视频| 久久久久久久久伊人| 在线观看国产日韩| 国精产品一区一区三区mba桃花 | 9色porny自拍视频一区二区| 亚洲激情六月丁香| 欧美日韩精品欧美日韩精品| 国产一区二区导航在线播放| 亚洲午夜视频在线观看| 中文av一区特黄| 精品久久久久久久久久久久久久久| 亚洲免费在线看| 中文字幕综合网| 欧美国产精品中文字幕| 激情深爱一区二区| 久久婷婷综合激情| 久久久91精品国产一区二区精品 | 中文子幕无线码一区tr| 中文字幕成人在线观看| 国产精品成人午夜| 综合久久久久久| 亚洲欧美日韩人成在线播放| 亚洲精品国产一区二区精华液| 一区二区三区免费| 日本不卡一区二区三区| 久久精品国产色蜜蜜麻豆| 国产99久久久精品| 欧美综合在线视频| 欧美xxxxx裸体时装秀| 亚洲视频在线观看一区| 五月天亚洲精品| 一区二区三区久久| 激情综合色综合久久| 亚洲在线视频一区| 国产精品夜夜嗨| 日本道免费精品一区二区三区| 欧美午夜理伦三级在线观看| 国产在线一区观看| 亚洲综合色视频| 欧美一卡二卡在线观看| 天天综合网天天综合色| 中国av一区二区三区| 欧美一区二区三区视频免费播放 | 香港成人在线视频| 一本到三区不卡视频| 午夜精品aaa| 91精品国产高清一区二区三区| 日韩成人午夜精品| 中文字幕日韩一区| 久久久国产综合精品女国产盗摄| 欧美一区二区三区思思人| 在线观看视频一区二区欧美日韩| 91视视频在线观看入口直接观看www | 国产精品国产三级国产| 久久久九九九九| 欧美成va人片在线观看| 欧美精三区欧美精三区| 91精品国产综合久久久久久漫画| 色天天综合久久久久综合片| 日本韩国欧美三级| 欧美一区二区三级| 中文字幕一区二区三区四区不卡| 五月婷婷色综合| 国产xxx精品视频大全| 欧美精品日韩一本| 午夜欧美一区二区三区在线播放| 在线免费不卡电影| 亚洲二区在线视频| 日韩久久精品一区| 国产1区2区3区精品美女| 欧美国产激情一区二区三区蜜月| 国产99精品视频| 337p日本欧洲亚洲大胆色噜噜| 专区另类欧美日韩| 在线免费精品视频| 亚洲另类一区二区| 在线看不卡av| 一区二区三区中文在线观看| 欧美色综合天天久久综合精品| 亚洲一二三区视频在线观看| 91精品国产黑色紧身裤美女| 不卡一区二区三区四区| 午夜精品久久一牛影视| 自拍偷拍亚洲激情| 欧美亚洲国产一区二区三区| 亚洲1区2区3区4区| 欧美成人乱码一区二区三区| 国内成+人亚洲+欧美+综合在线 | 国产一区二区三区免费观看| 69久久夜色精品国产69蝌蚪网| 一本色道亚洲精品aⅴ| 国产精品电影一区二区三区| 国产成人综合在线观看| 亚洲日本电影在线| 色综合天天做天天爱| 正在播放亚洲一区| 男男gaygay亚洲| 国产精品国产精品国产专区不片| 麻豆91免费看| 欧美电影免费观看高清完整版在线| 婷婷一区二区三区| 久久欧美中文字幕| 欧美三级韩国三级日本三斤| 国产精品资源网| 亚洲人成影院在线观看| 国产亚洲精品aa午夜观看| 欧美日韩二区三区| 国产福利精品一区二区| 成人亚洲精品久久久久软件| 午夜精品久久久久久久久久久 | 国产成人亚洲综合a∨婷婷图片 | 久久久99免费| 精品视频色一区| 欧美午夜片在线观看| 国产99久久久久| 国模套图日韩精品一区二区| 欧美一区二区三区爱爱| 91黄色激情网站| 亚洲在线观看免费| 欧美极品美女视频| 欧美一区二区三区日韩视频| 成人av在线播放网站| 国产成人8x视频一区二区| 成人午夜伦理影院| 美女精品一区二区| 国产精品一区二区免费不卡 | 久久午夜老司机| jlzzjlzz亚洲女人18| 久久69国产一区二区蜜臀| 三级成人在线视频| 亚洲综合在线免费观看| 亚洲欧美日韩在线不卡| 亚洲欧美在线另类| 亚洲人成人一区二区在线观看| 欧美顶级少妇做爰| 日韩亚洲欧美一区二区三区| 日韩一区二区免费视频| 欧美精品一区二区不卡| 国产精品免费丝袜| 天天综合网天天综合色| 不卡视频在线观看| 亚洲婷婷综合久久一本伊一区| 捆绑紧缚一区二区三区视频| 色婷婷精品久久二区二区蜜臂av| 26uuu色噜噜精品一区二区| 亚洲国产精品久久久久婷婷884 | 亚洲人吸女人奶水| 日韩欧美久久久| 欧美国产激情二区三区| 伊人开心综合网| 国产乱码精品1区2区3区| 9人人澡人人爽人人精品| 久久久久久久久久久久久女国产乱 | caoporen国产精品视频| 欧美酷刑日本凌虐凌虐| 欧美va在线播放| 亚洲一区二区精品久久av| 国产精品亚洲第一| 色综合婷婷久久| 一区二区三区电影在线播| 亚洲主播在线播放| 日韩影院在线观看| 欧美美女bb生活片| 日本大胆欧美人术艺术动态| 久久精品亚洲精品国产欧美| 成人一区二区在线观看| 欧美一区二区三区视频在线| 午夜欧美大尺度福利影院在线看|