【Alevator】互動式動態手勢操作的虛擬按鈕智慧電梯面板

參賽團隊名稱 : Alevator

作品簡介

提案動機

圖一提案動機

解決方案

圖二解決方案

為了達成零接觸的手勢控制，並將MediaPipe Hand 佈署到嵌入式系統上。主要使用OpenVINO與OpenCV作為此作品所使用的開發工具。並用MediaPipe進行手勢辨識，最後使用OpenVINO來實現。圖二為硬體架構。在edge sensor 端，使用了ESP32-CAM，訓練一套臉部偵測的輕量模型。同時也使用了超音波感測模組作為輔助，偵測畫面中是否有手或是物體的出現。若是有手或是物體，則透過UART傳送Trigger信號，觸發主要核心運算單元，及NVIDIA Jetson Nano，並開啟三通到攝影機。使用MediaPipe Hand 的 API 來進行手部追蹤，並進行整個電梯樓層的控制。接著使用Wi-Fi傳遞樓層或開關門訊號，控制Server端所撰寫的模擬電梯動畫，模擬電梯在真實場景中的使用狀況。