人脸识别|研究人员发明了一种戴着口罩也能跟踪面部表情的耳机

站长之家(ChinaZ.com) 10月13日 消息:康奈尔大学的研究人员发明了一种耳机系统——C-Face , 即使戴着口罩也可以追踪佩戴者的面部表情 。
据介绍 , C-Face可以监测耳机佩戴者的脸颊轮廓 , 并将佩戴者的表情转换成表情符号 。例如 , 这可以让人们在群组通话无需打开网络摄像头就能表达自己的情绪 。
康奈尔大学科学实验室主任Cheng Zhang在一份声明中说:“与现有的任何一种追踪面部表情的耳戴式可穿戴技术相比 , 这种设备更简单 , 不那么显眼 , 功能也更强大 。”“在之前识别面部表情的可穿戴技术中 , 大多数解决方案都需要在脸上安装传感器 , 并且只能识别有限的面部表情 。”
人脸识别|研究人员发明了一种戴着口罩也能跟踪面部表情的耳机
文章图片

C-Face耳机使用两个RGB摄像头 , 位于每只耳朵的下方 。它们可以记录佩戴者面部肌肉运动时脸颊轮廓的变化 。
一旦使用计算机视觉和深度学习模型重建图像 , 卷积神经网络就会分析2D图像 。该技术可以将这些信息转换为 42 个面部特征点 , 代表佩戴者的嘴巴、眼睛和眉毛的位置和形状 。
C-Face可以将这些表情转换成 8 个表情 , 包括中性表情和愤怒表情 。该系统还可以通过面部提示来控制音乐应用程序的播放选项 。
人脸识别|研究人员发明了一种戴着口罩也能跟踪面部表情的耳机
文章图片

其他可能的用途还包括 , 在游戏中使用化身来表达人的真实情感 。教师也可以追踪学生在远程课堂上的参与度 。
研究人员只能对 9 名参与者对C-Face系统测试 。尽管如此 , 表情符号的识别准确率还是超过了88% , 面部表情的识别准确率也超过了85% 。
【人脸识别|研究人员发明了一种戴着口罩也能跟踪面部表情的耳机】一旦这项技术投入到实际应用 , 那么带着口罩也可以很高的进项表情交流了 。


    推荐阅读