成果展示

隊伍名稱 FriendinAI
作品名稱 艾格寧斯-你的AI朋友
指導教授 李文廷
團隊成員 黃傳鈞、楊智耀、林柏呈、吳孟賢
作品介紹 時至今日,即將邁入更為繁忙快速的工業4.0時代,人們面對更大的生活壓力,常藉由使用社群軟體進行社交,在網路上交友抒發,然而現今網路交友詐騙的猖獗,導致許多的有心經由網路交朋友的使用者擔心受騙,因此我們開發出擁有形象、聲音的虛擬夥伴「AGENEIS」。 「AGENEIS」希望成為使用者抒發情緒的管道,不僅提供文字交流,而是結合「影像、音訊、文字」的虛擬夥伴,模擬真人對話互動的情境,並著重於「夥伴」的概念,給予使用者一個抒發的管道,並且可依據使用者需求所創造符合的臉型,讓用戶能擁有如和真人聊天的體驗。 就目前市場上常用的聊天機器人多以文字呈現方式進行對談,我們的「AGENEIS」增加具有配合個人需求產出的容貌,對談時不僅可以用最自然的方式呈現,更模擬回覆對話內容的唇型及人性化的語音/影音回覆模式,對於使用者體驗上多了一種宛如真實與人面對面交談的感覺。 「AGENEIS」的核心服務基於 Lipgan 與 Stylegan2 兩種對抗式神經網路模型,產生獨特虛擬夥伴;並結合 Azure-TTS 服務,與 Tuling-chat 打造智慧聊天、語音回覆系統;各項服務皆使用 Docker 進行部署,使服務的替換與擴充穩定且便利,並且運用業務劃分的設計概念進行實作,每個微服務都是獨立的執行個體。 在每次的文字聊天中,使用者能夠透過 「AGENEIS」的服務串聯,在收到 Tuling-chat 回覆的同時,聽見 Azure-TTS 所運算出的語音,與 Lipgan 產出的虛擬影像。以「文字、語音、影像」的對話模式,達到系統目的。
照片