亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件

寧波市鄞州首南恒宇激光雕刻廠

基于雙計算機的仿人機器人的視覺跟蹤系統
分享到:


摘 要:運動目標的實時跟蹤是機器人視覺的關鍵技術之一。設計了仿人機器人的視覺跟蹤系統,系統采用雙計算機,分別負責視覺信息的處理和運動單元的控制,兩臺計算機通過Memolink進行通訊。基于Windows的視覺信息處理子系統實現運動目標的分割,狀態估計和預測。運動控制子系統采用RTlinux實時操作系統,利用PD控制器控制關節運動。實驗驗證了系統的穩定性和實時性。
關鍵詞:仿人機器人;視覺跟蹤;RTlinux

引言

仿人機器人的頭部視覺跟蹤系統利用視覺信息作為反饋,來規劃機器人的頭部運動使其能實時的跟蹤運動目標。視覺跟蹤是仿人機器人的重要功能之一,它的研究對于仿人機器人的自主導航、人機交互以及視覺伺服都具有極其重要的意義。

視覺跟蹤的實時性是仿人機器人的重要性能要求之一。針對這一系統要求,近年來有很多學者設計出了多種系統結構。文[1]中作者設計了一種基于CAN總線的分布式的仿人機器人的控制系統,其中的視覺系統通過無線局域網與控制系統進行通訊。日本仿人機器人ASIMO的運動控制系統采用集中式控制方式,視覺系統通過網絡與運動控制系統通訊[2]。一臺計算機難以滿足視覺跟蹤的實時性要求,為了實現實時跟蹤,本文提出并實現了一種基于MemoLink通訊的雙計算機的視覺跟蹤系統。該系統通訊可靠、體積小,便于將兩臺計算機安置于仿人機器人的胸腔內。

目標分割的穩定性是機器人視覺跟蹤系統的重要要求之一,近幾年來很多學者對這個領域進行了研究,大多數的機器人目標跟蹤系統選用了單一的圖像信息,有的采用了物體的顏色信息[3],有的采用了物體的輪廓信息[4]。然而在復雜的非結構化的室內背景下,單一的圖像信息不能保證系統穩定的分割出目標。多種圖像信息的融合是解決目標物體識別穩定性的方法之一[5]。本文中作者提出了一種集成深度、顏色和形狀信息的逐步逼近目標區域的快速目標分割方法

1 系統結構

仿人機器人BHR1的系統結構如圖1所示,其全身有32個自由度,其中頭部有2個自由度,可以在兩個方向上自由轉動,即左右轉動和上下轉動。面部放置兩只CCD攝像頭作為視覺傳感器來模擬人的眼睛。采用SVS立體視覺處理系統處理視覺信息,SVS系統提供了每幀圖像的深度圖像[6]。


圖1 仿人型機器人(BHR1)跟蹤系統的系統結構
兩臺計算機置于機器人的胸腔內,其中一臺計算機負責視覺信息的處理,另外一臺負責機器人的運動控制。前者被稱之為信息處理子系統,后者被稱為運動控制子系統, 兩臺計算機通過Memolink進行通訊。信息處理子系統利用Windows強大的多媒體功能來處理立體視覺信息,實現目標的快速分割以及物體的運動估計和預測。運動控制子系統以Linux/RT-Linux實時操作系統作為平臺,保證了機器人控制系統的實時性。除了頭部運動關節,運動控制系統負責仿人機器人全部關節的控制。Memolink 是系統間進行快速通信的一種有效解決方案,是連接信息處理子系統和運動控制子系統的橋梁。具有通信速度快和通信前無需握手的優點。

整個跟蹤過程執行如下的循環:搜索目標——發現目標——匹配——狀態估計和預測——運動控制。不同的匹配方法應用產生了不同的跟蹤方法。本文中作者提出了一種融合深度、顏色和形狀信息的逐步逼近目標區域的快速分割方法。在實時的跟蹤系統中,運動估計和預測有效的減少了檢測區域,提高了系統的跟蹤速度。研究中采用經典的卡爾曼濾波器進行運動目標的狀態估計和預測。

2 基于多圖像信息的目標分割方法

視覺信息處理子系統完成目標物體的快速分割,同時估計和預測目標物體的運動信息,把目標物體的位置信息實時地傳遞給運動控制子系統。目標識別的穩定性對整個跟蹤系統的穩定性起著至關重要的作用。

在復雜背景的非結構化的室內環境下,用于機器人視覺跟蹤的圖像信息有:深度、顏色、形狀、邊緣、運動等。基于多信息的運動目標的分割方法中,所選取的信息應該具有互補性。物體的顏色是物體最顯著的特征,適合用于目標的跟蹤。但是當背景中包含同樣顏色的物體時,基于顏色的跟蹤將會失敗。深度信息有助于系統得到粗略的前景區域,也就是包含運動物體的目標候選窗口,另外基于深度分割的粗略前景輪廓的獲得計算量小,速度快。基于RHT(Random Hough transform)算法的形狀檢測器可以檢測各種不同的幾何形狀,比如:橢圓形、三角形和多邊形,進而把目標候選區域中相同顏色的物體區別開來。


圖2 視頻序列中運動目標分割過程
本文利用仿人機器人的立體視覺系統,設計了融合深度,顏色,形狀信息的逐步逼近目標區域的快速跟蹤方法。圖2為視頻序列中運動目標的分割過程。首先利用深度信息把機器人關心的前景區域分割出來,得到ROF(Region of Foregroud)區域,即粗略的目標候選區域。在ROF中使用顏色濾波器分割,得到ROIC(Region of Interest Color)區域。最后形狀檢測器可以把相同顏色的物體區別開來。在分割過程中,候選目標區域逐步縮小并逼近目標區域。逐步縮小的候選目標區域減少了計算量,提高了系統的運算速度。同時,該方法有效的避免了場景中相同顏色物體的干擾,提高了目標分割的穩定性。圖3顯示了目標物體的分割結果。

圖3 復雜場景中目標物體的分割結果
3 運動控制子系統

3.1運動控制系統的結構

機器人的運動控制子系統是一個典型的計算機控制系統。機器人頭部的控制目的是為了機器人的頭部能夠實時跟蹤運動目標,因此實際控制信號輸入量是根據目標物體的位置信息求得的規劃數據。在反饋信號的輸入方面,因為被控對象是電機轉動的角度,用電機上面的軸角編碼器的輸出作為反饋信號。

系統使用了一套多功能接口板,將所有的A/D轉換、D/A轉換、ENC(encoder)、PWM、IO等多種功能都集成在該接口板上,提高了系統的集成性并減小了系統體積和重量。多功能接口板上上的ENC接口來作為反饋信號的輸入通道,它可以測量軸角編碼器的脈沖輸出個數。每個運動關節采用經典的PD伺服控制。

3.2運動控制系統的軟件結構

運動控制子系統采用了RT-Linux(Real Time Linux)實時操作系統,其軟件結構如圖4所示,主要包括兩個模塊:主程序模塊、實時任務模塊,主程序模塊是linux應用程序,實時任務模塊是RTLinux下的實時進程。兩個模塊也是兩個進程,通過管道(FIFO)進行通訊等。

聯系我們

地址: 浙江省.寧波市鄞州區寧姜公路(九曲小區二期旁)

郵編: 315040

聯系人: 盛立峰

電話: 0574-87139378

傳真: 0574-87139378

手機: 13867861670

郵箱: 85400329@qq.com

聯系我們
亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件
亚洲精品乱码久久久久久自慰| 国产高清av在线播放| 欧美激情视频一区二区| 国产精品久久久久久久美男| 久久久久亚洲精品| 国产欧美日韩一区二区三区| 青春草国产视频| 午夜精品久久久久久99热 | 欧美精品在线一区| 日韩国产欧美亚洲| 日本精品一区二区三区四区| 亚洲欧美99| 亚洲图片小说在线| 一本一道久久久a久久久精品91| 精品国产一区二区三| 久久av在线播放| 久久国产精品久久久久久| 欧美日韩xxxxx| 国产精品久久久一区二区三区| 国产精品免费区二区三区观看| 国产精品久久久久久久av大片| 国产精品丝袜视频| 国产精品久久婷婷六月丁香| 国产精品久久久久久久久久久不卡 | 国产精品网址在线| 精品国产欧美成人夜夜嗨| 色婷婷综合久久久久中文字幕1| 久久视频在线观看中文字幕| 久久精品99久久| 久久久久久久一区二区三区| 国产精品99蜜臀久久不卡二区| 久久久久成人精品免费播放动漫| 国产成人精品久久久| 国产av天堂无码一区二区三区| 久久成人资源| 国产精品视频一区二区高潮| 国产精品久久久久久久av电影 | 国产精品成人久久久久| 精品久久久久亚洲| 亚洲一区三区视频在线观看| 亚洲一区二区三区乱码aⅴ| 亚洲bt天天射| 欧美亚洲国产视频小说| 精品www久久久久奶水| 国产另类自拍| 久久久水蜜桃| 国产成人看片| 国产99在线|中文| 日韩在线xxx| 免费看又黄又无码的网站| 国产视频999| 久久久欧美精品| 久久激情视频久久| 中文字幕日韩精品无码内射| 亚洲自拍欧美色图| 欧美精品一区免费| 成人中文字幕av| 日韩色av导航| 欧美人与物videos| 人人妻人人澡人人爽精品欧美一区 | 色综合666| 欧美日韩视频免费| 91精品久久久久| 国产精品久久久一区二区三区| 亚洲精品在线免费| 极品美女扒开粉嫩小泬| 91av一区二区三区| 九九热精品视频| 欧美一区二区三区在线免费观看| 免费国产a级片| 久久波多野结衣| 欧美激情a∨在线视频播放| 欧美综合在线观看| 久久人人爽人人| 亚洲午夜精品久久久久久人妖| 欧美 日韩精品| 久久综合久久综合这里只有精品| 精品免费日产一区一区三区免费| 日韩欧美xxxx| 久久综合色一本| 亚洲精品在线视频观看| 国产午夜精品一区| 国产精品嫩草在线观看| 色一情一乱一乱一区91| 国产精品亚洲网站| 国产精品成人v| 欧美久久电影| 俺也去精品视频在线观看| 午夜精品一区二区三区在线观看| 国产一区二中文字幕在线看| 日韩中文字幕第一页| 水蜜桃亚洲一二三四在线| 俄罗斯精品一区二区三区| 欧美xxxx做受欧美.88| 欧美凹凸一区二区三区视频| 久久99精品久久久久久三级| 亚洲成人午夜在线| 91高清免费在线观看| 欧美精品激情视频| 国产一区二区不卡视频| 国产精品乱子乱xxxx| 黄色高清无遮挡| 国产精品欧美日韩久久| 欧美影院久久久| 国产成人小视频在线观看| 日本人成精品视频在线| 国产成人在线精品| 日本a视频在线观看| 色偷偷88888欧美精品久久久| 日韩欧美猛交xxxxx无码| 久草青青在线观看| 欧美在线欧美在线| 欧美乱妇高清无乱码| 国产男女免费视频| 中文字幕在线观看一区二区三区| 99免费视频观看| 日本久久久久久| 国产精品第12页| 国产欧美一区二区视频| 亚洲精品无码久久久久久| 九色91国产| 欧美精品第三页| 中文字幕乱码一区二区三区| 久久综合九色综合88i| 欧美精品123| 在线视频不卡一区二区三区| 91精品国产网站| 欧美一区二区视频在线播放| 国产精品视频免费一区| 国产区精品视频| 伊人久久av导航| 国产欧美欧洲| 欧美激情乱人伦| 成人av一级片| 亚洲xxxx视频| 国产精品三级美女白浆呻吟| 欧美国产视频在线观看| 国产精品久久久久久久美男| 国产在线拍揄自揄视频不卡99| 国产精品久久久久高潮| 国产主播在线看| 一区视频二区视频| 久久久在线视频| 欧洲精品视频在线| 日韩亚洲精品视频| 欧美日韩一区二| 亚洲人久久久| 久艹在线免费观看| 美日韩免费视频| 亚洲国产精品久久久久婷蜜芽| 国产高清在线一区二区| 国产在线播放一区二区| 亚洲一区二区三区久久| 日韩在线视频导航| 国产欧美日韩在线播放| 亚洲一二三区精品| 国产精品免费入口| 超碰97人人人人人蜜桃| 日韩av电影中文字幕| 久久久久久久久久久国产| 欧美日韩一区二区三区电影| 五月天国产一区| 久久九九免费视频| 成人综合视频在线| 日韩欧美三级一区二区| 国产精品国产三级国产aⅴ浪潮 | 日韩欧美在线一区二区| 国产精品久久久亚洲| 国产区日韩欧美| 色欲av无码一区二区人妻| 一区二区三区四区不卡| 国产va亚洲va在线va| 国产美女久久精品| 日韩欧美猛交xxxxx无码| 欧美激情精品在线| 国产va免费精品高清在线| 不卡一区二区三区四区五区| 青青在线视频观看| 亚洲一区二区在| 国产精品日韩在线一区| 国产视频福利一区| 国模精品系列视频| 日产国产精品精品a∨| 精品乱子伦一区二区三区| 久久久久久久久久婷婷| 国产乱子伦精品| 精品视频一区二区三区四区| 欧美一乱一性一交一视频| 久久综合网hezyo| 日韩一区在线视频| 国产玖玖精品视频| 欧美极品jizzhd欧美| 午夜老司机精品| 亚洲乱码一区二区三区三上悠亚| 国产精品日日做人人爱| 国产成人精品久久久| 99视频日韩| 欧美精品久久久久久久自慰| 日本国产欧美一区二区三区| 亚洲v国产v在线观看|