| 作品介紹 |
電視布袋戲承接了傳統文化，且融入了許多的創新元素，打造出不遜於電影等級的影視作品。在電視布袋戲龍頭，霹靂布袋戲的帶領下，電視布袋戲已走向國際市場，近年更與日本動畫產業合作，持續推出系列作品，以電視劇與電影劇場作發行，引起一股＜偶動漫＞的風潮。可以預期，影視作品的需求將逐漸擴大。產業更有意將電視布袋戲打造為＜臺灣迪士尼＞。而製作電視布袋戲的核心要素，操偶師，受限於傳統的人員指導流程，新進人員培養期程相當長，且需要密集地投入人力資源於此。針對此需求點，我們建置了此系統，以機器視覺為基礎，做出互動式的教學。
本計畫著重在操偶姿勢訓練，利用設備成本壓低、增加互動性、易普及化等優勢，使用機器視覺辨識使用者資訊後，進行預先輸入數據的比對並顯示修正提示，建立一套操偶動作基礎訓練，提升新進操偶師的訓練效率，擴增年輕世代接觸到電視布袋戲的機會，因此我們建立了一套布袋戲操偶訓練系統。系統具有兩種模式：訓練模式為針對戲偶姿勢辨識正確率，再進而執行操偶姿勢教學修正。遊玩模式則是建立出完善的互動式生成客製化界面，時為達到虛實整合以及互動式，我們透過Maya做出一個虛擬的布袋戲偶，透過與虛擬物件互動，提升操偶的流暢度以及動作概念同時增進趣味性，能讓使用者在進行訓練時同時保有遊玩的功能。
以 Mediapipe採用分解動作的特點，將擷取座標與Logistic Regression作為訓練模型的視覺辨識比對，其中訓練模型準確率達9成以上。當操作戲偶時，戲偶的連續關節點間會呈現不同的角度，透過與辨識結果進行比對，完成分類動作。建立姿勢模型後，透過PyQt建立訓練模式的GUI介面。而在遊戲模式方面，我們首先透過Google Sheet傳遞姿勢資料，在藉由p5.js結合動作提示最後加上虛擬戲偶呈現互動式介面。 |