石建華
(武漢職業(yè)技術(shù)學(xué)院 電信學(xué)院,武漢 430074)
?
基于云計算技術(shù)的蘋果采摘機器人系統(tǒng)
石建華
(武漢職業(yè)技術(shù)學(xué)院 電信學(xué)院,武漢 430074)
近年來,我國水果產(chǎn)業(yè)迎來快速發(fā)展期,蘋果種植面積日益擴大,年產(chǎn)量明顯增加,促使我國成為世界上最大的水果生產(chǎn)國家。水果進行種植過程中,成熟的水果采摘操作時必須消耗大量的時間和勞動力。由于進城務(wù)工人員日益增多,農(nóng)村勞動力人口不斷減少,此時勞動力成本有一定程度的增長,果農(nóng)日常經(jīng)營的成本也有所增加,因此智能采摘機器人順勢而生。為此,針對水果采摘機械研究的不足之處,提出了基于云計算的蘋果采摘機器人系統(tǒng),在機器人處于作業(yè)狀態(tài)下設(shè)計了蘋果采摘機器人軟、硬件設(shè)計情況。為驗證蘋果采摘機器人的采摘效果,在果園中對其采摘性能展開試驗,試驗結(jié)果表明:所設(shè)計的采摘機器人運用視覺技術(shù),能很好地克服氣候環(huán)境等因素的影響,采摘作業(yè)中性能穩(wěn)定,采摘效率高,值得在蘋果生產(chǎn)地推廣使用。
云計算技術(shù);蘋果機器人采摘系統(tǒng);硬件;軟件設(shè)計
我國作為世界上最大的水果產(chǎn)地,水果也成為國內(nèi)主要的經(jīng)濟作物?,F(xiàn)階段,水果發(fā)展成為繼糧食、蔬菜之后第三大農(nóng)作物,在國民經(jīng)濟發(fā)展中占有重要位置。我國對水果采摘機械化發(fā)展尤為重視,采摘機器人的應(yīng)用對水果產(chǎn)業(yè)的發(fā)展產(chǎn)生直接的影響。蘋果采摘機器人是針對蘋果設(shè)計,可完成其采摘、輸送、裝箱等作業(yè)的裝備,是一種具有感知能力的自動化機械收獲系統(tǒng)。水果自動采摘機器人作業(yè)對象為有機生物,其實施采摘作業(yè)時受作業(yè)環(huán)境、對象等因素的影響,而運用機器人視覺技術(shù),能有效提升采摘作業(yè)效率和精度。因此,設(shè)計蘋果采摘機器人必須解決識別和定位目標(biāo)果實的問題,在不損害果實和植株的基礎(chǔ)上,遵循一定的標(biāo)準(zhǔn)完成蘋果采摘工作;同時,也要綜合考慮其他因素的影響,要確保其成本不比所替代的人工成本高,有效提升蘋果采摘效率。本文根據(jù)各地蘋果生產(chǎn)種植和具體采摘情況,在云計算技術(shù)基礎(chǔ)上對蘋果采摘情況展開試驗研究,設(shè)計出智能化的蘋果采摘機器人樣機,以期減輕勞動人員工作量、提升蘋果采摘效率。
進入21世紀(jì),世界各國面臨嚴(yán)重的人口老齡化問題,農(nóng)業(yè)勞動力逐漸向其他各領(lǐng)域和行業(yè)轉(zhuǎn)移,勞動力不僅具有成本高的特點,也不易找到充足的勞動力。果蔬采摘是其生產(chǎn)過程中最耗費時間、人力的環(huán)節(jié),加之,采摘人員時常要彎腰或利用梯子登高,水果采摘成為勞動強度大、消耗時間長的作業(yè)模式。蘋果是我國11大優(yōu)勢產(chǎn)品之一,近年來,我國對世界上蘋果貢獻率越來越高,如果一直采用人工采摘實在無法滿足其發(fā)展需求。因此,研發(fā)蘋果采摘機器人不僅能減輕勞動者工作強度,也能提高蘋果采摘效率,從而擁有廣闊的應(yīng)用前景和發(fā)展空間。為滿足形式各樣的蘋果園地面環(huán)境要求,本研究的機器人主要由機械結(jié)構(gòu)和電氣智能控制等部件組合而成:機械結(jié)構(gòu)主要包括機械手臂、末端執(zhí)行器及可移動載體等裝置;電氣智能控制系統(tǒng)包含微控制器、運動控制卡、數(shù)據(jù)采集卡及電動機驅(qū)動等部分,結(jié)構(gòu)如圖1所示。
蘋果采摘機器人配備的機械結(jié)構(gòu)部分,有利于機器人準(zhǔn)確判斷已經(jīng)成熟的果實,并為準(zhǔn)確摘取操作打下良好的基礎(chǔ)。機器人配置的其它部件的功能有一定的差異,各配件相互結(jié)合共同完成蘋果自動采摘操作。
可移動載體作為蘋果采摘機器人最基本的部件,也是其它采集系統(tǒng)的主要平臺,且執(zhí)行信號采集及智能控制等均要借助移動載體完成??梢苿虞d體使用腹帶行走的方式,這種移動載體與地面接觸面、受力面積較大,極易在松軟的路面進行操作。機器人機械手臂使用多關(guān)節(jié)機械手臂,設(shè)計3個主自由度,能夠?qū)崿F(xiàn)轉(zhuǎn)動、移動等操作。同時,自動采摘機器人配置的機械手臂具有韌性強、靈活性高等優(yōu)點,便于及時到達所指定的位置,在整個采摘操作中穩(wěn)定運行。夾持器作為采摘蘋果過程中發(fā)揮最大作用的部件,蘋果整個收獲操作完全依靠夾持器完成。本次設(shè)計的夾持器最大工作角度為88°,采摘閉合時間設(shè)定為2s;設(shè)計的裝置極為簡便,采摘耗費時間短、力度適中,不會對目標(biāo)水果帶來不良的影響。
1.系統(tǒng)控制倉 2.紅外對管 3.電源倉 4.移動載體
采摘機器人硬件系統(tǒng)主要由采摘機械臂、果實識別定位及可移動平臺等模塊組成,因此主要介紹蘋果采摘機器人進行采摘作業(yè)時的軟硬件部分設(shè)計情況。
2.1 采摘機器人硬件設(shè)計
2.1.1 設(shè)計視覺定位系統(tǒng)
視覺定位系統(tǒng)主要由計算機、圖像采集卡及CCD攝像機等部分組成。該系統(tǒng)所用的雙目攝像頭固定在支架上,為機械手提供準(zhǔn)確的目標(biāo)定位。選用我國大恒公司生產(chǎn)的雙通道彩色視頻采集卡,對蘋果這類水果進行視覺識別及定位研究,其定位流程如圖2所示。
2.1.2 末端執(zhí)行器
蘋果采摘機器人執(zhí)行采摘作業(yè)時,由末端執(zhí)行器與蘋果相接觸,因蘋果園采摘環(huán)境比較復(fù)雜,末端執(zhí)行器的設(shè)計一直被認為農(nóng)業(yè)類機器人的主要技術(shù)之一。蘋果采摘系統(tǒng)末端執(zhí)行機構(gòu)如圖3所示。這個末端執(zhí)行器要求通過對蘋果果梗的夾持,在不損傷果實的基礎(chǔ)上成功采摘蘋果。
圖2 蘋果采摘機器人視覺識別定位流程圖
1.直流電機 2.蝸輪蝸桿機構(gòu) 3.鋼絲軟管傳動 4.刀架與刀片
2.1.3 設(shè)計合理的能源箱
依據(jù)機器人系統(tǒng)不同元件的供電參數(shù)要求,本設(shè)計采用220V交流電源控制不同關(guān)節(jié)伺服電動機及計算機供電。同時,選取24V直流電源對末端執(zhí)行器電動機進行供電。在機器人上安裝的視覺攝像頭所需能源由計算機端口進行供應(yīng),通過測算,整個采摘機器人系統(tǒng)總能耗量約為1.5kW。
2.2 采摘機器人系統(tǒng)軟件設(shè)計
蘋果采摘機器人采用開環(huán)式控制結(jié)構(gòu),建立基于云計算技術(shù)的評估采摘控制系統(tǒng),整個系統(tǒng)基于Windows XP平臺上完成操作,采用RS232總線與運動控制器實現(xiàn)通信。因控制系統(tǒng)對使用者具有全開放性,因此可在平臺上對機器人實施操作和在線調(diào)試,利用不同控制算法和圖像處理算法,促使其滿足蘋果采摘要求。為方便操作,設(shè)計了圖形化的用戶界面,用戶可在界面上調(diào)整攝像機及伺服驅(qū)動器等參數(shù),也可實時監(jiān)控電動機具體運行情況。
在計算機上調(diào)用MatLab圖像處理軟件,并運用運動控制板和位控板組成的運動模塊,完成圖像的采集、分析、處理等操作。運動控制器作為機器人完成采摘要求的核心部件,其控制結(jié)構(gòu)如圖4所示。
圖4 蘋果采摘機器人系統(tǒng)控制結(jié)構(gòu)簡圖
采摘機器人開展采摘操作時,先要準(zhǔn)確判定采摘果實是否處于成熟狀態(tài)及其三維位置,識別目標(biāo)果實的成熟率對采摘效率產(chǎn)生直接的影響。具體采摘操作時,機器人配備的夾持器采用手環(huán)抱狀的采摘方法,夾持器根據(jù)目標(biāo)果實具體定位進行采摘。圖像視覺技術(shù)運用兩個攝像機從不同角度監(jiān)拍果實的圖像,并由圖像采集卡將所采集的信息發(fā)送到工控計算機內(nèi),借助工控計算機制作目標(biāo)果實的三維圖像;根據(jù)已經(jīng)形成的三維圖像,機器人能夠準(zhǔn)確判斷蘋果的大小、形狀等信息,從而更好地實施采摘作業(yè)。
對蘋果進行正確采摘時,先要對其進行正確的分割識別,確保采摘機器人能夠代替勞動力完成采摘操作。識別首要任務(wù)是準(zhǔn)確采集蘋果樣本,運用攝像機完成整個拍攝操作。同時,依據(jù)圖像信息建立相應(yīng)的蘋果樣本及顏色模型,通過分割及時對果實與其附近生長的環(huán)境進行分離,采用三原色RGS進行對比計算,準(zhǔn)確判定將要采摘的蘋果是否成熟。蘋果采摘作業(yè)中所用三原色RGB顏色模型如圖5所示。
圖5 三原色RGB顏色模型簡圖
本文以蘋果為研究對象,介紹采摘機器人利用自動閾值分割法對蘋果執(zhí)行切割識別操作。一般情況下,生長成熟的蘋果為紅色,這種顏色與其附近的生長環(huán)境具有明顯區(qū)別的是顏色。這時,利用三原色RGB準(zhǔn)確對目標(biāo)果實執(zhí)行切割操作;同時,可以根據(jù)蘋果的具體顏色,借助圖像處理模塊對比PC機數(shù)據(jù)庫內(nèi)已成熟果實的顏色樣本,從而判定目標(biāo)果實成熟度。
2014年9月23-29日在我國某水果產(chǎn)地進行蘋果采摘試驗,試驗情況比較理想。室外試驗過程中,并無大面積遮擋目標(biāo)、果實處于靜止無晃動狀態(tài)等。蘋果采摘試驗過程如下:針對果園中的蘋果,先實施圖像采集操作,視覺系統(tǒng)依據(jù)機器視覺算法求得目標(biāo)物的三維坐標(biāo);同時,針對多個目標(biāo)把其計算的空間坐標(biāo)值存儲在數(shù)據(jù)庫內(nèi),控制系統(tǒng)分別從數(shù)據(jù)庫內(nèi)讀取坐標(biāo)值,完成機械采摘作業(yè)。根據(jù)表1數(shù)據(jù)可知:不論是晴天、夜晚或者是陰天,采摘機器人都可以自由控制并完成移動操作,進一步落實采摘作業(yè)。通過試驗數(shù)據(jù)發(fā)現(xiàn),蘋果采摘機器人在不同天氣環(huán)境下成功率均在85%以上,單一目標(biāo)果實需要的采摘時間在10s以內(nèi),進一步證明所設(shè)計的采摘機器人具有極高的采摘效率,極易在蘋果采摘作業(yè)中推廣使用。
表1 蘋果采摘機器人具體采摘情況
根據(jù)果農(nóng)對成熟蘋果提出的采摘要求,設(shè)計了云計算技術(shù)基礎(chǔ)上的蘋果采摘機器人。這種機器人將視覺技術(shù)與自動化技術(shù)合理結(jié)合,具有操作簡單、運行效率高等優(yōu)點,在采摘作業(yè)中能輕松躲避障礙物,從而提升蘋果采摘效率。根據(jù)我國部分地區(qū)蘋果采摘作業(yè)量大、勞動力資源不足等特點,對智能化的蘋果采摘機器人的軟硬件設(shè)備進行設(shè)計。試驗結(jié)果表明:本次設(shè)計的蘋果采摘機器人識別果實速度快,不管何種天氣狀態(tài)摘取果實效率高,能夠滿足農(nóng)業(yè)采摘操作中機械智能化、自動化等要求,具有非常廣闊的發(fā)展空間。
[1] 薛亮,樊衛(wèi)國,汪小志,等.基于RBF網(wǎng)絡(luò)的果蔬采摘機器人運動軌跡控制研究[J].農(nóng)機化研究,2016,38(9):229-233.
[2] 談英,顧寶興,姬長英,等.基于顏色和重量特征的蘋果在線分級系統(tǒng)設(shè)計[J].計算機工程與應(yīng)用,2016,11(2):219-222.
[3] 張杰,姬長英,顧寶興,等.三自由度蘋果采摘機器人本體設(shè)計[J].計算機工程與應(yīng)用,2015,51(23):251-257.
[4] 熊俊濤,葉敏,鄒湘軍,等.多類型水果采摘機器人系統(tǒng)設(shè)計與性能分析[J].農(nóng)業(yè)機械學(xué)報,2013,44(z1):230-235.
[5] 石雪強,程新文.蘋果采摘機器人視覺系統(tǒng)的目標(biāo)提取研究[J].農(nóng)機化研究,2013,35(10):46-48,59.
[6] 朱霞,陳仁文,夏樺康,等.智能機器人水果采摘識別系統(tǒng)設(shè)計[J].計算機應(yīng)用研究,2014,31(9):2711-2714.
[7] 孫承庭,胡平.智能移動式水果采摘機器人設(shè)計—基于機器視覺技術(shù)[J].農(nóng)機化研究,2016,38(8):179-183.
[8] 孫承庭,胡平.嵌入式采摘機器人視覺測量與避障控 制系統(tǒng)研究[J].農(nóng)機化研究,2016,38(11):219-223.
[9] 姬偉,李俊樂,楊俊,等.機器手采摘蘋果抓取損傷機理有限元分析及驗證[J].農(nóng)業(yè)工程學(xué)報,2015,15(5):17-22.
Apple Based on Cloud Computing Technology Design Picking Robot System
Shi Jianhua
(College of Telecommunication, Wuhan Polytechnic College, Wuhan 430074,China)
In recent years, China's fruit industry usher in rapid development, increasing the apple planting area, the annual output has been increased significantly, to become the world's largest fruit producing countries. To grow in the process of fruit, ripe fruit picking operation must consume a lot of time and labor. Because more and more rural migrant workers, rural Labour force shrinking labor costs at this time have a certain degree of growth, fruit daily operation cost also increased. Development based on the above background, the intelligent picking robot conveniently, aimed at the deficiency of fruit harvest machinery research, apple picking robot system based on cloud computing design is put forward, in the robot under a state of operation about apple picking robot software and hardware design. To test and verify the picking of apple picking robot effect, in the orchard to pick performance test, the test results show that the designed picking robot using visual technology, can overcome the influence of environmental factors such as climate, picking performance is stable in operation, picking efficiency is high, is worth popularizing in apple production use.
cloud computing technology; apple picking robot system; hardware; the software design
2016-08-09
湖北省教育廳中青年人才項目(Q20151504)
石建華 (1971-),男,湖北鄂州人,副教授,碩士,(E-mail)shijianhua0611@163.com。
S225.93
A
1003-188X(2017)07-0180-04