- 國立東華大學 資訊工程學系暨研究所 - https://www.csie.ndhu.edu.tw -

10/31(五) 專題討論(工四講堂)演講題目

本週邀請到台北科技大學資訊工程學系,張厥煒教授前來進行中文演講。

 

講題與摘要如下:

Title:

RGBD穿戴式視覺輔助系統

An RGBD Wearable Visual Assistant System

 

 

Abstract:

使用具有RGBD影像資訊之體感器,建構出一套穿戴式視覺輔助系統,並以改善視覺障礙族群日常生活的不便為初步目標。

此系統可提供視障者「陸標提醒」、「路況警示」與「日用品識別」的視覺輔具,以及一組供明眼人協助建立圖像資訊的共創平台。此系統的障礙物「路況警示」是採用深度分割(Depth Segmentation)、邊緣偵測(Edge Detection)、輪廓提取(Contour Extraction)標記出障礙物出現位置,給予語音警示。「陸標提醒」與「日用品識別」是使用尺度及旋轉不變特徵SURF(Speeded-Up Robust Features)演算法提取陸標與物品特徵,建立多重隨機Kd樹(Multiple Randomized Kd Trees)特徵索引資料,特徵匹配比對則是採用ANN(Approximate Nearest Neighbors)演算法,以便快速的辨識陸標與物品資訊。經多名視障朋友進行場域驗證後表示:這項穿戴式視覺輔具有助於改善他們日常生活的不便,可以協助了解周圍資訊,建立起自己的心理地圖。

To solve the problems of visually impaired people challenged in their daily life, such as, their white cane can’t provide enough spatial information for the space above the ground, insufficient number of guide dogs can be provided in the world, hard to recognize similar shape objects, is an important issue expected to be overcome. In this presentation, we will describe a wearable visual assistant system that can improve their life and provide the “Landmarks Remind”, “Obstacle Alert”, “Item  Identification” and “Landmark Image Information Collection” functions.This system uses the ASUS Xtion Pro sensor which has both color video and depth streaming information (RGB-D).

消息類別 :
重要公告
(Visited 99 times, 1 visits today)