耳機AI「臉控」播歌 模擬表情傳意

By on October 15, 2020

原文刊於信報財經新聞「StartupBeat創科鬥室

C-Face可偵測臉頰變化(左圖),配合深度學習可重建圖像(右圖)。(YouTube影片擷圖)

C-Face可偵測臉頰變化(左圖),配合深度學習可重建圖像(右圖)。(YouTube影片擷圖)

美國康奈爾大學近日以人工智能(AI)開發了一款新耳機C-Face,可以因應佩戴者的臉頰輪廓,將面部動作轉換成表情符號,甚至控制音樂播放程式,往後人們在網上通話時,即使戴上口罩,甚至關閉網絡鏡頭,也可表達自己的情緒。研究將在10月20日至23日舉行的UIST國際研討會上發表。

科技媒體Engadget報道,該設備由耳機下方各一個微型RGB相機組成,當用戶面部表情改變時,五官肌肉會伸展收縮,它可記錄臉頰輪廓變化,再透過電腦視覺和深度學習模型重建圖像。即使用戶在疫情下戴着口罩,甚至毋須將網絡鏡頭放在面前,亦能向對方表達情感,方便遙距工作或學習。

戴口罩亦能溝通 準確度近九成

該模型把臉頰圖像轉換為42個面部特徵點,包括佩戴者的嘴巴、眼睛和眉毛的位置和形狀,也可轉換為8個表情符號,包括生氣、飛吻等,準確度超過85%;更可通過面部動作控制音樂應用程式的播放選項,例如播放、下一首、音量增大等。借助C-Face,打機時亦可透過虛擬化身表達實際感受。

AI模型將臉頰的圖像,轉換為42個面部特徵點,亦可轉換為8個表情符號。(YouTube影片擷圖)

AI模型將臉頰的圖像,轉換為42個面部特徵點,亦可轉換為8個表情符號。(YouTube影片擷圖)

支持 StartupBeat

如欲投稿、報料,發佈新聞稿或採訪通知,按這裡聯絡我們