| 作品介紹 |
在科技產品融入生活後，「人機互動」一詞出現，人們追求的不再只是透過機器解決問題，更希望能與機器有所互動。現今，各大展場以及博物館中，結合主題衍生出的互動設計已成了展覽不可或缺的一環，但由於在大型展場配置互動式多媒體裝置仍會面臨許多挑戰，如可能受限於硬體設備成本、操作範圍等眾多條件，因此本團隊希望以軟體作為解決辦法，並提出「應用手勢追蹤與辨認技術」之概念，藉由手勢辨識技術實做出一款輕量化、便攜性、可互動之多人的指尖跑步賽(Finger race) 互動多媒體遊戲。我們的作品是用大家所熟悉的google離線小恐龍當主角的手勢辨識遊戲，當手呈跑步動作時，小恐龍會跟著跑步，當手握拳時，小恐龍會跳躍。遊戲過程中，需要跳躍躲避障礙物，不然會減少生命。在雙人模式中，當一方生命耗盡，另一方勝。單人模式若生命耗盡則遊戲結束，會顯示所跑距離於畫面中。首先我們使用Mediapipe的手部骨架座標來辨識基本的手部動作，另外我們針對了較複雜的手勢，額外進行機器學習的訓練，藉此提高整體辨識的精準度。除此之外，為求遊戲捲動流暢，本團隊亦使用Kalman filter做為核心技術，以避免遊戲畫面產生撕裂感。最後由於此多人遊戲可能會發生多隻手交疊，或是突然有遊戲以外的手被偵測到的問題，為此我們使用了Simple Online And Real Time Tracking(SORT)演算法，藉由多目標追蹤的技術，來處理多人遊戲可能面臨的問題，讓遊戲變得更流暢。 |