成果展示

隊伍名稱 我是你的眼
作品名稱 聽見你的生活
指導教授 吳炳飛
團隊成員 程永欣、黃晴瑋、楊博宇、張博儒
作品介紹 視障者生活中的日常採買行程因為無法得知想購買的商品位置,也無法確認是否拿取正確的物品而受到很大的困擾,在休閒的選擇上也有很大的限制,感到無聊想要出門散步時,又難找到人幫助他們,這些困擾甚至降低了他們外出的意願。為了解決上述問題,我們提出此作品,將下列功能整合在Android手機平台上的APP中,使用者全程只需要利用語音控制手機,不用點選特定按鈕或手勢增加使用者的負擔;我們利用深度學習的技術實現「環境描述」、「路面辨識」、「商品辨識」三項功能,手機會針對使用者所拍攝的環境或路面影像,以語音對於環境中的人、物、行為、環境給予完整的描述句輸出,並告知視障者前方路面狀況,降低行走的危險性,並將拍照功能與GPS定位結合,紀錄使用者一日行程及所拍攝的照片可以與親友分享。藉由設置於賣場中的Beacon幫使用者定位與路徑規劃,引導使用者到達目的地,並拍攝手中商品來進行商品辨識,告知使用者所拿取的物品名稱。透過上述功能整合,期望為視障者的生活帶來更多便利性,也藉由對周遭環境的描述與紀錄,增加視障者外出的動力和意願,讓此款APP成為他們雙眼,讓視障者對環境有更多想像空間。