實作組智慧零售

參賽團隊名稱:狂點軟體

提案動機

近年來由於少子化社會來臨,勞動人口減少造成的勞務人工日益昂貴,要在每一個大眾運輸交通端點設立真人派駐服務台在實際執行的成本考量上相當困難;也由於這兩年來,COVID-19疫情蔓延,大眾公共環境之中人與人之間的實體接觸頻率不可避免得減少,因而自動化/數位服務的需求自然增加;但目前市面上的自動化機器服務仍然相當僵硬,在整個操作介面設計以及使用者體驗上就不太友善,而且往往也只提供幾個固定功能的服務,在某些需要細膩關懷的使用者族群如年長或不熟資訊技術者,在使用系統時備感艱辛。

解決方案

針對上述提案動機,本團隊提出一個由呈現擬人化Avatar以及智慧化服務模式平台共同整合的全端解決方案,由數個軟硬體元件組成:

前端

由可播音大螢幕及擷取操作者當下表情/動作/姿態的數位攝影機構成,在系統輸出方面,將欲呈現資訊在大螢幕上以擬人化Avatar軟體以模仿自然人類互動的方式呈現;在系統輸入方面,捕捉操作者表情/動作/姿態的攝影機會即時將影像以gRPC傳輸到後端AI運算平台以便偵測當下使用者的使用狀況。

後端

用OpenVINO Model Server和自製程式搭建而成的推論引擎叢集主機,在每一個前端輸入影像進來時,可使用不同的AI推論模型來判斷當前的系統使用狀態,也可以增加新的AI推論模型或自製邏輯模組來增加系統新功能。

成果介紹

請看示範影片,此示範影片的模擬情境為高鐵乘客的使用者走向前跟Avatar揮手之後,系統進入辨識車票QR code模式,此時使用者拿出手機亮出高鐵票的QR code圖讓系統掃描,就可以顯示該車票的資訊。

發佈留言

Your email address will not be published. Required fields are marked *

Post comment