樂羊羊
一、設計靈感
廖雋晞、黎俊良、賀惠荃三位同學相識于學校的科技社團,他們是志同道合的科創(chuàng)“戰(zhàn)友”,常常聚在一起討論和研究科創(chuàng)作品。一次,他們了解到中國有近一億的殘疾人,能否為他們做點什么,讓他們的生活變得更加便利呢?廖雋晞、黎俊良、賀惠荃三位同學萌生出設計一款“智能輪椅”的想法,幫助殘疾人解決行動不便的問題。
二、指導老師與設計者
姓名:孫自超,一級教師。梧州市中山小學信息技術(shù)教師兼學校科技輔導員。
姓名:廖雋晞
座右銘:為什么夢想沒有實現(xiàn)?因為沒有堅持,沒有努力,沒有奮斗。
姓名:黎俊良
座右銘:學而不思則罔,思而不學則殆。
姓名:賀惠荃
座右銘:超越夢想,超越自我!
三、星成就
合作作品《多吉3號:聰明的輪椅》榮獲第19屆廣西青少年機器人競賽暨東盟國家及粵港澳青少年機器人邀請賽創(chuàng)意比賽小學組一等獎。
四、科創(chuàng)過程
第1步:確定制作思路。
廖雋晞、黎俊良、賀惠荃三位同學經(jīng)過多次研究,確定了作品的設計方案。該智能輪椅先用攝像頭拍攝使用者的眼球轉(zhuǎn)動方向和臉部動作,然后將圖像傳輸?shù)阶陨泶钶d的電腦上,再通過電腦發(fā)出對應的動作指令,如原地轉(zhuǎn)動或直行等。
第2步:硬件制作。
前期硬件制作的工作包括拼接輪椅、安裝舵機和安裝電腦處理器等。為了高效完成各項任務,賀惠荃、廖雋晞、黎俊良三人進行了分工,手巧心細的賀惠荃負責裁切水管和拼裝輪椅;廖雋晞、黎俊良負責把舵機、樹莓派電腦等硬件安裝到輪椅上。
孫自超老師:他們最初選擇采用傳統(tǒng)雙電機驅(qū)動的方法驅(qū)動智能輪椅,因為安裝雙電機的方法較為簡單,但在測試性能時,他們發(fā)現(xiàn)雙電機無法為智能輪椅提供足夠的動力,于是改為使用四電機的方案。與傳統(tǒng)雙電機驅(qū)動相比,四電機的安裝過程較為復雜,編寫程序的難度也較大,但可以提供充足的動力。
第3步:編程環(huán)節(jié)。
擅長編程的廖雋晞和黎俊良共同負責編寫程序,他們使用神經(jīng)網(wǎng)絡VGG16和OpenCV庫編寫程序。在編程過程中,他們遇到了程序無法運行的問題;也遇到程序運行不成功,智能輪椅不啟動或不按指令啟動的情況……遇到新問題的他們,沒有退縮,而是迎難而上,通過檢查電機是否正常運轉(zhuǎn)、運行程序代碼是否正確等手段,找到解決辦法。
孫自超老師:VGG16是一種圖像分類的VGG卷積神經(jīng)網(wǎng)絡,由13層卷積層和3層全連接層組成,主要用來對圖像進行分類,其程序運行的速度和準確率都很高。OpenCV是一個開源的計算機視覺軟件庫,可以控制攝像頭等設備。廖雋晞和黎俊良在這次編程中使用OpenCV和VGG16這兩個程序,自己動手制作了一個臉部動作分類庫。
第4步:采集面部圖片。
三人在調(diào)查中發(fā)現(xiàn),有些殘疾人頭部以下的肢體都不能動,且只能稍微移動頭部,有些甚至只能轉(zhuǎn)動眼球。因此,他們先嘗試設計能識別眼球轉(zhuǎn)動方向的程序。當使用者持續(xù)向前看時,智能輪椅開始啟動或前行;當使用者持續(xù)向左或向右看時,智能輪椅根據(jù)所看的方向轉(zhuǎn)彎;當使用者閉上眼睛時,智能輪椅停止行動,但若使用者閉眼的時間超過3秒,就會觸發(fā)智能輪椅的報警裝置。為了完成這個設計方案,他們?nèi)嘶ハ嗯臄z了1000多張臉部的照片,主要拍攝睜眼、閉眼、眼睛向左看、眼睛向右看的照片,并以此作為智能輪椅的圖像素材。
孫自超老師:智能輪椅電腦識別表情的步驟分為三步,第一步是要從圖像中框選出人臉的矩形范圍;第二步是利用識別到的人臉圖像進行訓練;第三步是生成識別模型,準確識別出圖片中的眼部動作。
第5步:測試智能輪椅的動作識別能力。
在完成智能輪椅的初步設計后,三人馬上就開始測試智能輪椅的操控性能。黎俊良擔任測試“模特”,他先睜開眼睛直視前方兩秒鐘,這時,智能輪椅開始前進;然后他眼球往左轉(zhuǎn),并保持動作兩秒鐘,智能輪椅開始向左轉(zhuǎn)動;接著他眼球又往右轉(zhuǎn)動,并保持動作兩秒鐘,智能輪椅自動向右轉(zhuǎn)動;最后,黎俊良閉上眼睛,兩秒鐘后智能輪椅停止運動,閉眼時長超過三秒鐘時,智能輪椅啟動報警裝置,并自動撥打“120”電話。智能輪椅的性能達到了他們的預期目標,測試成功了!三人高興地將智能輪椅命名為“多吉3號”。
第6步:未來優(yōu)化。
未來,三位同學希望“多吉3號”智能輪椅可連接無線網(wǎng)絡,擁有獨立的電池。另外,他們目前擁有的圖像素材不夠豐富,雖然現(xiàn)在智能輪椅捕捉眼部動作的正確率達到86%,但僅局限于三位設計者的眼部動作,所以他們要采集更多的素材,以提高智能輪椅的普適性。他們希望有一天,這款智能輪椅能真正投入使用,幫助到更多有需要的人。