日本在线www-日本在线播放一区-日本在线不卡免费视频一区-日本在线不卡视频-成人影院久久久久久影院-成人影院一区二区三区

最新廣告
關注中國自動化產業發展的先行者!
工業智能邊緣計算2025年會
CAIAC 2025
2025工業安全大會
OICT公益講堂
當前位置:首頁 >> 案例 >> 案例首頁

案例頻道

仿人機器人的視覺伺服控制系統
  • 企業:控制網     領域:SCADA-RTU     行業:建筑樓宇    
  • 點擊數:2007     發布時間:2008-11-01 22:10:04
  • 分享到:

     視覺是人類感知外界信息的重要手段,視覺伺服系統是機器人獲取環境信息的關鍵組成部分。本文主要討論仿人機器人BHR-1的視覺伺服系統。首先介紹機器人頭部的視覺總體結構方案,然后論述了基于立體視覺的信息處理和頭部運動控制,最后通過目標跟蹤和物體抓取實驗說明了系統的可行性。

總體方案及控制系統

    仿人機器人的視覺伺服系統要求能夠根據具體環境和具體情況進行主動搜索,實時將攝像頭轉向目標,實現對空間目標的實時跟蹤并獲取物體的三維位置信息,從而控制手臂實現對物體的準確抓取。

BHR-1)的頭部有2個自由度,面部放置兩只CCD攝像頭作為視覺傳感器來模擬人的眼睛。機器人的手臂也是模仿人類的上肢設計的,具有7個自由度,肩關節3個自由度,肘關節2個自由度,腕關節2個自由度,可以實現人類上肢的各種動作。機器人根據目標的三維位置信息實現對物體的抓取。

    仿人機器人BHR-1的總體設計方案如圖2所示。為了實現物體的快速定位,需要完成圖像處理和運動控制的任務。一臺計算機將難以滿足快速定位的實時性要求,因此本文采用了雙計算機處理和Memolink通信方式的系統結構,使用兩臺計算機分別負責雙目立體視覺的信息處理和機器人的運動控制。Memolink是系統間進行快速通信的一種有效解決方案。

    機器人的視覺跟蹤以及目標抓取的實現都依賴運動控制計算機對機器人的運動控制。運動控制系統根據視覺處理系統的處理結果,控制機器人采取相應決策。例如:頭部的兩自由度轉動,以跟蹤目標的運動或者上肢手臂去抓取目標。運動控制子系統以RT-Linux實時操作操作系統作為軟件平臺,保證了機器人控制系統的實時性。

          newmaker.com

    機器人的運動控制子系統的被控對象是機器人的各關節的角度,而關節是由電機帶動的,因此被控對象實際上是帶動關節轉動的電機轉動的角度,是一個位置伺服系統。

    系統使用了一套多功能接口板,將所有的A/D轉換、D/A轉換、ENC、PWM、32位IO等多種功能都集成在該接口板上,提高了系統的集成性并減小了系統體積和重量。

    在控制信號的輸入方面,由于控制的目的是為了機器人的頭部能夠跟蹤運動的目標,因此實際上輸入量就是根據圖像處理子系統的處理結果得到的,在圖像處理的過程中,最終求得的目標的位置就是后面運動控制子系統的輸入量。由于圖像處理子系統的處理結果本身就是數字量,運動控制子系統所得到的位置信息也是數字信號,因此,這里不需要模數轉換的過程。

    在反饋信號的輸入方面,因為被控對象是電機,確切的說是電機轉動的角度,是位置控制,因此可以用電機上面的軸角編碼器的輸出作為反饋信號。軸角編碼器是一個測量電機所轉過的角度的器件,它以脈沖的方式來反饋電機轉過的角度,電機轉過的角度越大,它輸出的脈沖個數就越多,反之,輸出的脈沖個數就越少。因此我們采用了接口板上的ENC(encoder)接口來作為反饋信號的輸入通道,它可以測量軸角編碼器的脈沖輸出個數。機器人頭部的運動控制子系統的結構框圖如圖3所示。

        newmaker.com

基于立體視覺的視覺信息處理

    系統采用了基于立體視覺的解決方案,通過加入了深度信息,使得目標的搜索結果更加準確。系統使用了美國SRI人工智能中心所開發的一套高速的雙目立體視覺系統SVS(small vision system)。

    圖像分割是物體識別的預處理階段,是機器人視覺伺服系統的關鍵技術之一。該系統采用了基于顏色信息的閾值分割方法。理論分析和實驗結果都表明,對同一顏色屬性的物體,在光源種類、照度、物體反射特性等不同條件下,測得的RGB顏色值分布很分散,很難確定識別RGB的閾值范圍。而HSV模型更接近人眼對顏色的感知,它將采集的顏色信息分為色調、飽和度和亮度三種屬性量化,色調屬性H能比較準確地反映顏色種類,對外界光照條件的變化敏感程度低,因此,HSV較之RGB更適合于用做識別處理的基礎。本文采用HSV模型作為顏色識別處理的基礎,選取其中的參數H和V作為識別處理的判別依據。RGB空間中一點到HSV空間中一點的具體轉化關系如下:

V=max(r,g,b),V′= min(r,g,b);
If V= 0 or V = V′then H=0, S=0;
If r = V then H=(g-b)/(V-V′);
If g= V then H=2+ (b-r)/(V-V′);
If b = V then H=4+ (r-g)/(V-V′), H=H×60;
If H <0 then H=H+360, S=(V-V′)/V

    系統首先離線采樣目標圖像區域,將該局部彩色圖像從RGB模型轉化為HSV模型,對其中H、S兩個分量分別作直方圖,得到選定區域的H、S閾值,這是一個離線的學習過程。在隨后的實時圖像識別中,H、S閾值根據前一個視覺周期的彩色圖像實時更新以適應新的光照條件。

        newmaker.com

    視覺處理系統的流程圖如圖4所示,系統使用攝像頭來采集圖像,在對圖像進行一系列的預處理之后,對其進行區域分割,以得到多個區域,再搜索這些區域,根據已知目標特征找到目標所在的區域。如果找到,則控制機器人頭部面向目標,同時更新目標的特征,以用來在下次搜索時使用,如果沒有找到相匹配的目標,則可能目標被暫時隱藏或丟失,這時開始下一次處理,以等待目標再次出現。

    因為視覺處理系統處理的是上一個周期的圖像,所以得到的目標坐標也是上一個周期的坐標,如果用此方向坐標來作為運動控制的輸入,則頭部運動始終滯后一個周期。為了加快系統的速度,本文采用了比例微分控制,系統地輸入輸出函數為:

Iα(k+1)=kp eα(k)+kd(eα(k)-eα(k-1))
Iβ(k+1)=kp eβ(k)+kd(eβ(k)-eβ(k-1))
eα(k)=αk-αk’,eβ(k)=βk-βk’

    式中Iα(k+1)和Iβ(k+1)為在t(k+1)時間上控制系統的輸出;(αk,βk)表示在時間 t(k)目標的方向坐標;(αk’, βk’)該時刻二自由度機構的方向坐標;eα(k)和eβ(k) 分別表示該時刻頭部位置與目標位置之間的偏差;kp和kd分別為控制系統的比例系數和微分系數。通過實驗調節kp和kd,kd<<kp,系統可以既有較高的反應速度,同時又具有穩定性。

運動控制過程

    根據前面的敘述,計算機控制系統的工作過程是一個循環的實時數據采集,實時決策,實時控制的過程,在本系統中,根據所選用器件的具體情況,假設對所有的控制環完成這樣的一個循環大約需要m毫秒的時間左右。在視覺信息處理系統中,處理一幀圖像平均需要n毫秒左右的時間,由于視覺處理和運動控制任務的特點的不同,n>>m,也就是說視覺處理的周期要遠遠大于運動控制的周期。在一個視覺處理的周期內,系統可以完成多個控制周期的處理。因此在一個視覺處理周期之后,系統應該做好下一個視覺處理周期之內的運動規劃,也就是做好后面多個控制周期之內的運動規劃,這樣才能保證機器人的頭部以均勻、平緩,同時又是準確的速度來跟蹤目標。控制系統軟件流程如圖5所示。

                         newmaker.com

    在每一個運動控制周期內,程序都首先要查看Memolink,看視覺信息處理系統是否有新的處理結果通過Memolink傳遞到運動控制系統,如果沒有,程序就按照預設的運動規劃來控制機器人運動;如果有,程序就先要根據視覺系統的處理結果來修改運動規劃。為了使機器人頭部的運動平穩,我們把每次預設的運動規劃所規劃的時間定為略大于視覺處理的平均周期,這樣就能夠保證系統在每次新的視覺處理結果到來之時,原有的運動規劃還沒有執行完。從而使只要目標在不斷運動,機器人頭部便可以處于不斷運動過程中,避免了機器人頭部時轉時停的現象。

    隨后程序分別讀取規劃和反饋,根據兩者之差來求得控制量,再發出控制信號,控制機器人頭部的轉動。

    對于控制量的求法程序采用了傳統的PID算法,設t(k)為第k個運動控制周期時刻,在t(k)時間上,系統的輸出量為Yk,運動規劃的規劃量為Xk,依據PID算法,在t(k+1)時間上,系統的輸出Yk+1為Yk+1=KP(Xk-Yk)+Ki∑(Xk-Yk)+Kd(Xk-Yk-Xk-1+Yk-1)

    上式中KP,Ki,Kd分別為比例系數,積分系數,微分系數。在一個控制系統中,一定大小積分系數可以使系統沒有殘差,但會降低響應速度;而一定大小的比例系數可以加快系統的響應速度,并能根據輸入的變化提前做出響應,但可能導致系統不穩定。因此在結果可以接受的情況下,應該只使用比例系數,如果結果達不到要求再使用積分系數和微分系數。

實驗

    本系統中,視覺信息處理系統和運動控制系統分別適用Windows和RT-Linux作為軟件開發平臺。RT-Linux是實時操作系統,使用它可以滿足運動控制的實時性,而Windows系統的強大的多媒體功能使其成為圖像處理的平臺。視覺信息處理計算機的CPU為PⅣ 2.4GB,內存512M;運動控制計算機的CPU為PⅢ 700MHz,內存256M;Memolink是連接視覺處理系統與運動控制系統的橋梁,我們選用的產品采用PCI接口,最大傳輸速率為1Mbytes/s。攝像頭為SVS視覺處理系統,每秒鐘采樣15幀。

    SVS視覺處理系統安裝才2自由度的運動機構上,該機構在2個自由度方向的運動足以使其指向任何方向,因此可以實現跟蹤物體。BHR-1的頭部的三維尺寸為寬19cm,高27cm,深19cm,重量2.8kg,以上數據包括機械結構、軸承、電機、攝像機等。

    利用該系統跟蹤和定位物體時,圖像的處理速度為每秒鐘10幀,視覺伺服周期為100ms左右,運動控制系統的伺服周期是3ms,近距離的定位精度較高,最高精度為1m處3‰。

    為進一步驗證本文提出的視覺定位與動作規劃的方法的有效性,BHR-1系統實現了對物體的抓取試驗,機器人手臂是具有7個自由度的機器人的右臂,實驗過程中,視覺系統將目標物體的三維信息通過memolink傳遞給運動控制計算機,運動控制計算機根據上面提出的方法規劃數據并實現抓取物體。

結語

    本文給出了一種基于雙目視覺的物體的跟蹤和定位方案。雙目視覺用于獲取目標物體的三維空間信息,實現物體的定位。這個系統采用了雙計算機處理和Memolink 通訊方式,兩臺計算機分別進行視覺信息處理和運動控制,保證了系統具有較高的響應速度。

熱點新聞

推薦產品

x
  • 在線反饋
1.我有以下需求:



2.詳細的需求:
姓名:
單位:
電話:
郵件:
主站蜘蛛池模板: 99re最新网址-99re这里只有精品在线观看-99re这里只有精品视频在线观看-99re这里只有精品视频-嗯好爽视频-嗯啊在线观看免费影院 99只有精品-99这里只有精品在线-99这里只有精品视频-99这里只有精品66视频-欧美国产视频-欧美国产日韩综合 | 免费一区在线-免费一区视频-免费一区区三区四区-免费一区二区视频-97dyy影院理论片-97caoporn | 久久道-久久大香伊蕉在人线国产昨爱-久久大香香蕉国产免费网站-久久大-天天做天天爽天天谢-天天做天天射 | 亚洲国产区男人本色vr-亚洲国产区男人本色-亚洲国产品综合人成综合网站-亚洲国产品有宅男-亚洲国产片在线观看-亚洲国产片精品一区二区三区 | 九九香蕉-九九线精品视频-九九五月天-九九天天影视-天天干b-天天干2018 | 国产福利在线视频尤物tv-国产福利在线看-国产福利在线高清导航大全-国产福利在线-国产福利影视-国产福利一区二区麻豆 | 欧美综合亚洲,欧美激情91,亚洲 欧美 成人日韩,国产亚洲精品成人婷婷久久小说,国内精品久久久久影院不卡,曰韩在线 | 日韩a级片-日韩a级片视频-日韩a级片在线观看-日韩a级一片-日韩a级一片在线观看-日韩a级在线 | 国产精品福利在线观看入口-国产精品福利在线观看秒播-国产精品福利在线观看免费不卡-国产精品福利一区二区亚瑟-四虎免费入口-四虎免费看片 | 99re6在线精品视频免费播放-99re6热视频精品免费观看-99re6热精彩视频在线观看-99re6久精品国产首页-嫩草视频在线观看视频播放-嫩草视频在线观看免费 | 国产精品视_精品国产免费-国产精品视-国产精品深夜福利免费观看-国产精品三区四区-四虎成人4hutv影院-四虎成年永久免费网站 | 制服师生一区二区三区在线-制服师生av在线-制服 丝袜 亚洲 中文 综合-直接看毛片-欧美视频在线观看视频-欧美视频在线观看免费最新 | 美女搞j-美女干骚-美女范冰冰hdxxxx-美女吊逼-亚洲欧美在线观看-亚洲欧美一区二区三区在线 | 天堂网在线最新版www-天堂网在线资源-天堂网在线看-天堂网在线观看视频-日本精品无码特级毛片-日本精品无码一区二区三区久久久 | 六月婷婷国产精品综合-六六影院午夜伦理-六级黄色片-六度影院最新-最近的2019中文字幕国语完整版-最近的2019中文字幕国语版 | 五月天婷婷视频,九九爱这里只有精品,热和尚三区四区,善良的嫂子3在线播放,久久久久久久久久久久久久,热er99久久6国产精品免费 | 久久99国产精品一区二区,欧美日韩另类在线,婷婷四月开心色房播播网,收集最新中文国产中文字幕,亚洲综合激情六月婷婷在线观看,欧美一级淫片 | 97色伦人人-97色碰-97视频久久-97视频免费人人观看人人-免费看色片网站-免费看视频的网站 | 里番acg纲手的熟蜜姬训练场-里番※琉璃全彩acg奈亚子-李亚男三级-李丽莎与土豪50分钟在线观看-中文字幕中文字幕永久免费-中文字幕在线永久 | 国产日屄视频播放-国产日本中文久久-国产日本在线观看网址-国产日本在线观看播放-国产日本在线播放-国产日本亚洲一区二区三区 | 双性人bbwsex-双性花蒂产奶h-双性大奶肉文-双性产奶-国产福利在线观看 极品美女-国产福利在线播放 | 久久re这里视频只有精品首页-久久re这里视频只精品首页-久久re这里视频精品8-久久re这里视频精品15-一本道色综合手机久久-一本道色播 | 在线播放波多野结衣-在线播放91撕破艺校舞蹈系-在线播放69热精品视频-在线www天堂资源网-欧美裸色美妆大全-欧美伦理三级 | 四虎影视免费在线观看-四虎影视免费在线-四虎影视免费看-四虎影视免费观看免费观看-激情影院在线-激情影院费观看 | 2022精品国产-2022精品福利在线小视频-2022黄网-2022国产男人亚洲欧美天堂-2022国产毛片大全-2022国产精品网站在线播放 | 国产一区二区三区四区五区加勒比-国产一区二区三区四区五区六区-国产一区二区三区四区五在线观看-国产一区二区三区无码A片-国产一区二区三区-国产一区二区三区亚洲欧美 | 亚洲第一视频网,久久91精品国产99久久yfo,国产精品一区二区三区免费,成人欧美一区二区三区黑人,在线观看国产精品入口,亚洲人一区 | 亚洲国产区男人本色vr-亚洲国产区男人本色-亚洲国产品综合人成综合网站-亚洲国产品有宅男-亚洲国产片在线观看-亚洲国产片精品一区二区三区 | 午夜成人影视-午夜成人影片-午夜成人免费影院-午夜不卡影院-国产日本欧美亚洲精品视-国产日本欧美高清免费区 | 免费毛片网站在线观看-免费毛片网-免费毛片基地-免费乱理伦片在线观看八戒-亚洲一级毛片免费看-亚洲一级黄色片 | 欧美午夜在线-欧美午夜影院-欧美午夜影视-欧美午夜一艳片欧美精品-欧美午夜一区-欧美午夜艳片欧美精品 | 91久久福利国产成人精品-91久久国产-91久久国产成人免费观看资源-91久久国产精品-91久久国产精品视频-91久久国产口精品久久久久 国产偷抇久久精品A片蜜臀A-国产偷抇久久精品A片蜜臀AV-国产偷抇久久精品A片图片-国产偷窥熟妇高潮呻吟-国产凸凹视频熟女A片-国产玩弄放荡人妇系列 | 久久精品片-久久精品欧美一区二区-久久精品女人毛片国产-久久精品嫩草影院免费看-在线日韩国产-在线日韩不卡 | 久久久毛片-久久久麻豆-久久久鲁-久久久噜噜噜久久久-午夜你懂得-午夜男人网 | 青青操影院-青青操网-青草资源站-青草资源视频在线高清观看-国产激情三级-国产激情久久久久影院小草 | 极品丝袜小说全集-极品丝袜乱系列在线阅读-极品丝袜老师h系列全文阅读-极品手交handjobtattoo-亚洲男人网-亚洲男人天堂影院 | 亚洲幼女网-亚洲呦女专区-亚洲永久在线观看-亚洲永久免费视频-精品久久香蕉国产线看观看麻豆-精品久久日日躁夜夜躁AV | 国产成a人亚洲精v品无码性色-国产成a人亚洲精v品无码樱花-国产成a人亚洲精v品在线观看-国产成a人亚洲精品无码樱花-国产成版人视频网-国产成版人视频网站免费下 | 欧美极品videosvideohd-欧美极品videosex性欧美-欧美极品jizzhd欧美4k-欧美极品brazzers 高清-伊人久久中文-伊人久久香 | 国产精品视频你懂的-国产精品视频网-国产精品视频一区二区猎奇-国产精品视频一区二区三区-国产精品视频一区二区三区不-国产精品视频一区二区三区不卡 | 天天躁日日躁狠狠躁欧美日韩,亚洲情综合五月天,久久精品国产福利,97高清国语在线看免费观看,丁香五六月婷婷,欧美视频日韩视频 |