资讯

您的位置: 首页>资讯>新闻

前沿 | 康奈尔大学研发出了一种可跟踪面部表情的耳机

2020.10.15   浏览:1112   资讯来源:深智联

康奈尔大学的研究人员开发出了一种耳机名为C-Face,该耳机可以跟踪佩戴者的面部表情,监视脸颊轮廓从而将佩戴者的表情转化成表情符号,例如,我们在网上与人视频时不必打开摄像头也能清楚的表达自己的情绪。

康奈尔大学SciFi实验室主任、C-Face论文作者Cheng Zhang表示:“该设备比现有的耳挂式穿戴技术都更简单,且功能更强大。在以前,可穿戴的面部跟踪技术都需要在面部安装多个传感器,但却只能识别有限的一组表情”

C-Face

C-Face

C-Face耳机在耳朵下方有两个摄像头,当佩戴者的面部肌肉活动时,它们可以识别与记录脸颊轮廓的变化。使用计算机视觉和深度学习模型重建图像后,卷积神经网络对二维图像进行分析。这项技术可以将这些特征点转化成42个面部特征,代表佩戴者的嘴、眼睛、眉毛的位置与形状。

C-Face可以将这些表情转化成八种表情符号,还可以使用面部来控制音乐的播放,除此之外,教师也可以用来追踪学生在网络课堂中的投入程度,游戏主播亦可以在直播中借此增加趣味性。

由于疫情的缘故,目前C-Face的开发人员只对9名参与者进行了测试,不过表情识别的准确率达到了88%,开发者发现电池的容量限制了C-Face 的整体效果,因此计划开发低功耗的传感技术。