成果展示

隊伍名稱 身騎白馬走三關
作品名稱 應用AI於歌仔戲教唱與身段系統
指導教授 周建興
團隊成員 林士捷、林彥宏
作品介紹 近數十年來,歌仔戲文化傳承嚴重流失,雖然政府和各個歌仔戲劇團多年來努力地到各地國中小學作校園推廣、廣開歌仔戲興趣班。 我們參考現今歌仔戲劇團到各機構的推廣方式,加入新興科技結合傳統「曲調歌唱」和「身段練習」,使用機器學習進行歌唱和身段的評分輔助教學或推廣,並架設在行動裝置上,人們可以在家使用。歌仔戲興趣班的學生回家能在沒有專業教師的指導下自主練習;在校園推廣時,這種遊戲式的推廣方式能讓年輕人接受與增加使用觸擊率。 我們使用攝像頭搭配螢幕串流鏡像,模擬出類似學員在有鏡子的舞蹈教室中練習身段和曲調演唱,螢幕實時顯示出:歌仔戲老師的指定動作圖像或影片&透過鏡頭拍攝學員練習時的姿態和Mediapipe辨識到的骨架。身段辨識系統會辨識骨架支點是否符合正確的身段姿勢,並會給予動作調整的建議。本互動系統在學員練習演唱時,透過麥克風收音後會將錄下的音訊經過曲調辨識系統進行辨識、評分,最後輸出相似度分書和音高、響度、音色的差異可視圖。興趣班學員在家中練習時,可以選擇身段和曲調同時練習,也可以選擇單純身段或曲調進行練習。我們選擇一般歌仔戲推廣中最常用的橋段:身騎白馬,是非常經典的歌仔戲中板七字調演唱,並且身段有使用到道具馬鞭,是很適合作為初學者練習和推廣的選擇;也有其他單個身段可供練習選擇。
照片