基於深度學習之道路資訊辨識導盲系統

NCU Institutional Repository > 資訊電機學院 > 電機工程研究所 > 博碩士論文 > Item 987654321/84148

jsp.display-item.identifier=請使用永久網址來引用或連結此文件: http://ir.lib.ncu.edu.tw/handle/987654321/84148

题名:	基於深度學習之道路資訊辨識導盲系統
作者:	汪孟璇;Wang, Meng-Hsuan
贡献者:	電機工程學系
关键词:	穿戴式裝置;導盲輔具;深度學習;斑馬線偵測;wearable device;blind aids;deep learning;crosswalk detection
日期:	2020-07-21
上传时间:	2020-09-02 18:23:37 (UTC+8)
出版者:	國立中央大學
摘要:	本論文旨在對現有之導盲機器人進行改良，並提出一穿戴式裝置，以協助視障人士安全地於戶外行走。第一部分為對導盲機器人進行以下三點改進：第一點是更換用於辨識機器人前方影像中，道路與障礙物區域範圍的深度學習網路，同時蒐集更多訓練資料並對其進行資料擴增，藉此提升道路、人與車的辨識準確率。第二點為新增當前方可行走空間不足時，機器人將原地旋轉以尋找其他路線之功能。第三點則是當視障者欲前往之目的地為店家時，機器人將利用其他子團隊之招牌辨識系統於目的地附近尋找該招牌、計算其與機器人間之距離與夾角，本研究藉此操控機器人以帶領視障者更靠近店家。　　第二部分為把導盲機器人簡化成穿戴式裝置，此裝置同樣具有以深度學習網路辨識環境資訊之功能，並新增辨識班馬線、帶領視障者走在斑馬線上以通過路口之演算法。該演算法結合深度學習之辨識結果與影像處理之方法偵測前方是否有斑馬線，並於找到斑馬線的位置後，帶領視障者靠近並對齊之，以達到協助視障者沿斑馬線通過馬路之目標。　　引導視障者的控制指令將經由手機之語音播報系統通知視障者，此播報系統亦會提醒視障者正確行進方向與前方障礙物之距離與種類等內容。而為避免播放之訊息互相干擾，本論文將定義各內容之優先權，並讓優先權較高之資訊具有打斷正在播報內容之權利，以確保重要資訊能優先被播出。　　簡而言之，本論文改良後之導盲機器人的環境辨識準確率提升、於無路可走時將自動找路且可帶領視障者靠近店家；而於穿戴式裝置上開發的過馬路輔助系統則具有辨識斑馬線、引導視障者正確地走在斑馬線上以安全通過路口之功能。 ;This thesis aims to improve the guiding robot and develop a wearable device for helping visually impaired people to walk outdoor safely. The guiding robot has three improvements. First, this research uses much more training data and another semantic segmentation neural network to raise the accuracy of recognizing road, people, and cars. Second, the robot is added one more function that it will rotate to find another way if its walkable area is not enough to go through. Third, while the destination is a store, the robot will lead the blind closer to the store due to the direction information between the robot and the store signboard provided from other research team. 　　Next, the guiding robot will be changed to a wearable device. The wearable device has not only the same functions as the robot, but also the new algorithm which can detect the position of the crosswalks so the blind can cross the road by following the crosswalk. 　　The information including the guiding commands which used to guide the blind and the distances and types of obstacles in front of him/her will be broadcasted by a smartphone. To avoid interference between broadcasted messages, this research defines the priority of each message. The messages with higher priority can interrupt the broadcasting one to ensure the important information will not be missed. 　　In conclusion, the thesis improves the accuracy of environment recognition, has the abilities of route finding and can take the blind to the store. The wearable device has the same functions as the robot and can detect crosswalks in order to lead the visually impaired people pass the intersection safely.
显示于类别:	[電機工程研究所] 博碩士論文

文件中的档案:

档案	描述	大小	格式	浏览次数
index.html		0Kb	HTML	99	检视/开启

在NCUIR中所有的数据项都受到原著作权保护.

社群 sharing

数据加载中.....