Web Interstitial Ad Example

【職涯焦點|職場KOL】IVE跨學科學生合作開發手機應用程式 助弱視人士選購合適產品 推動社區共融

30-08-2022
VTC 20220830 助弱視人士


隨著科技的發展,視障人士只要使用適當的輔助裝置或技術,也可以無障礙地與社會聯繫,應付日常生活的大小挑戰。香港專業教育學院(IVE)軟件工程高級文憑與活動及數碼推廣市場學高級文憑應屆畢業生合作利用電腦視覺(Computer Vision)、深度學習(Deep Learning)等人工智能(Artificial Intelligence,AI)技術,設計手機應用程式—「睛明寶VisualGo」,協助弱視人士選購產品,還可以提供最新的天氣、疫情及社區活動資訊。手機程式於「創建香港智慧社區」項目中榮獲季軍,其推動社會共融的目標及熱誠獲業界肯定。

一目了然超市產品 聲音導航全面掌握資料

透過「睛明寶VisualGo」拍攝超級市場產品的價錢標籤、條碼或包裝,用家不但能夠辨識產品的種類,同時可利用附設的網上應用介面(Web API)技術收集名稱、重量、產地和營養標籤等產品資訊,再配合Android 系統裡的TalkBack功能,將相關資料轉化為語音,讓弱視人士藉著聲音導航,掌握產品的重點資訊,從而作精明的選擇。


參與開發的IVE軟件工程高級文憑應屆畢業生黃麒甄說:「『睛明寶VisualGo』不但協助弱視人士在超市選擇適合的產品,同時也會根據天氣網站及政府公佈的實時數據,自動更新天氣及疫情資訊,方便他們外出。另外,我們也邀請義工輸入及修訂應用程式內不同地區的資訊,如大廈停電、停水、活動等通告,以適時提醒弱視人士須要注意的生活事項。」

(左起)IVE軟件工程高級文憑應屆畢業生黃梓謙、黃麒甄、姚淑嫻,以及IVE活動及數碼推廣市場學高級文憑學生李永安設計「睛明寶VisualGo」手機應用程式,利用AI科技助辨識超市產品的種類等資訊。

一件產品收集逾千張相片以助AI機器學習


另一位參與開發的軟件工程高級文憑應屆畢業生姚淑嫻表示,過程中最具挑戰的是通過機器學習辨認產品包裝及外觀,以訓練AI模型。她指出:「為了讓系統準確辨識出產品種類和品牌,我們收集逾千張相片,不同角度、光暗和距離等展示每件產品。希望增加未來能辨識更多貨品,優化弱視人士在超市的購物體驗及生活質素,助他們融入社區。」


用家可利用應用程式拍攝產品的外型和包裝,系統即可透過AI科技辨識產品品牌和種類。


產品融入視障人士意見試用者大讚「好用」


為了讓IVE團隊對視障人士的需求有更深入了解,「創建香港智慧社區」項目的主辦單位之一香港總商會曾安排成員們親身訪問視障人士組織代表,了解他們在生活中面對的挑戰。IVE活動及數碼推廣市場學高級文憑應屆畢業生李永安(Oscar)說:「在交談中,我們發現電子產品中高對比度的界面可減輕弱視人士的視覺刺激,所以我們開發『睛明寶VisualGo』時特別設計高對比度的色彩版本,方便他們瀏覽。另外,我們亦應弱視人士的需要,設計用兩隻手指放大和縮小以裁剪條碼影像的範圍,省減裁剪條碼方格的繁複步驟。」


Oscar其中一位同學是弱視人士,因此特意邀請她在超級市場實地試用程式,並獲讚 「好用」。Oscar笑言:「那次落區試用,吸引了超級市場職員對作品的好奇心。他們欣賞應用程式的創意,並認為能夠協助客人購物之餘,也可以減輕職員的工作量。因為產品標籤的字體太細,不少長者或視力欠佳的客人因為看不清而請求職員從旁協助。」


IVE團隊訪問弱視人士,發現電子產品中高對比度的界面可減輕弱視人士的視覺刺激,故開發「睛明寶VisualGo」時特別設計高對比度的色彩版本,方便瀏覽。

參賽學科百花齊放近百學生齊爭魁


「創建香港智慧社區」項目由職業訓練局(VTC)、香港總商會和香港生產力促進局共同籌劃,獲創新科技署「創新及科技基金」資助。項目通過舉辦一系列研討會、工作坊、比賽及展覽,提升大眾對智慧城市發展的認識。


首次舉辦的比賽設有冠、亞、季及7名入圍優異獎,共吸引18支隊伍、超過90名來自VTC不同學科的學生參加。VTC企業共創中心去年為參賽者舉辦為期20天的工作坊,教授智慧城市和創新科技相關的知識和技能,包括物聯網、機械人技術、人工智能、沉浸技術及設計思維等;並協助學生了解香港十八區的社區特色及問題等,引導他們利用創新思維和科技訂定解決方案。比賽已於今年六月圓滿結束。

(左起)IVE(觀塘)商業系講師羅美瑩、IVE軟件工程高級文憑應屆畢業生姚淑嫻、IVE(柴灣)資訊科技系講師羅榮華、IVE活動及數碼推廣市場學高級文憑學生李永安、IVE軟件工程高級文憑應屆畢業生黃麒甄、黃梓謙,合作設計「睛明寶VisualGo」手機應用程式,在「創建香港智慧社區」項目中獲得季軍。

更多文章:
【職涯焦點|職場KOL】THEi高科院設計系學生 時裝作品展現公屋人情風貌
職涯焦點|職場KOL IVE社工學生協助弱勢社群紓壓

職涯焦點-IVE-社工