| 作品介紹 |
傳統助聽器有時會過度放大噪音，影響使用體驗，且外觀和配戴舒適度也可能造成困擾。為此，我們設計了AR聽覺輔助智慧帽，透過結合人工智慧與擴增實境技術，提供一套創新的視覺輔助解決方案。
這套系統在硬體上整合了AR眼鏡與麥克風陣列，並將這些硬體安裝於帽子中，以兼顧外觀的自然與配戴的舒適度。在軟體層面，首先通過語音增強模型DeepFilterNet進行處理，以抑制背景噪音、提升語音清晰度。經過降噪後的純淨音訊，再被送入Whisper模型進行即時語音轉換為文字，輔助聽損者理解對話內容；針對環境聲音的偵測，我們採用Audio Spectrogram Transformer模型，此模型能夠識別多種環境聲音，我們將其應用於偵測環境中特定警示音，例如救護車警報聲或車輛喇叭聲，提醒聽損者注意當前環境；同時，系統透過陣列式麥克風獲取聲音的方位資訊，能夠直觀地察覺聲音大致方位。以上透過各類模型所獲得的資訊，將以字幕和醒目提示的形式顯示於AR眼鏡中，提供給聽損使用者參考。我們的GUI介面在提供重要資訊的同時，亦不會遮擋使用者的視線，讓使用者在日常生活中避免因字幕導致忽略真實環境。我們期望本作品能讓聽損者在日常對話中理解對方的語音，了解聲音方位，並快速得知當前環境可能的緊急聲音，從而顯著提升他們的生活體驗。 |