康奈爾大學的研究人員發明了一種耳機系統，可以跟蹤佩戴者的面部表情，即使他們戴著口罩。C-Face可以監控臉頰輪廓，并將佩戴者的表情轉換為表情符號。例如，這可以讓人們在群組通話無需打開網絡攝像頭就能表達自己的情緒。

康奈爾大學科幻實驗室主任、一篇關于C-Face的論文的資深作者Cheng Zhang在一份聲明中說：“這種設備比任何現有的耳掛式可穿戴技術更簡單，不那么突兀，功能更強大。在以往旨在識別面部表情的可穿戴技術中，大多數解決方案都需要在面部安裝傳感器，即使使用了如此多的儀器，也只能識別有限的面部表情。”

耳機使用了兩個RGB攝像頭，分別位于每個耳朵下方。當佩戴者面部肌肉運動時，他們可以記錄面頰輪廓的變化。

一旦使用計算機視覺和深度學習模型重建圖像，卷積神經網絡就會分析2D圖像。該技術可以將這些信息轉換為 42 個面部特征點，代表佩戴者的嘴巴、眼睛和眉毛的位置和形狀。

C-Face可以將這些表情轉換成八種表情符號，包括中性或憤怒的表情。該系統還可以使用面部提示來控制音樂應用程序的播放選項。其他可能的用途還包括，在游戲中使用化身來表達人的真實情感。教師也可以追蹤學生在遠程課堂上的參與度。

由于COVID-19的影響，研究人員只能對9名參與者進行C-Face測試。不過，表情識別的準確率超過了88%，面部表情的識別準確率也超過了85%。研究人員發現耳機的電池容量限制了系統。他們計劃開發低強度的傳感技術。

原文標題：戴著口罩也能追蹤面部表情嗎？這款耳機給你答案（視頻）

文章出處：【微信公眾號：IEEE電氣電子工程師學會】歡迎添加關注！文章轉載請注明出處。

責任編輯：haq