这些独特的耳挂式耳机可以追踪您的面部表情


【这些独特的耳挂式耳机可以追踪您的面部表情】尽管市场上有很多奇怪的耳机和TWS耳塞 , 但我敢打赌 , 这些都无法追踪您的面部表情 。我的意思是说 , 它们是让用户听AC / DC或Down的系统 , 而不是跟踪脸颊的肌肉 , 对吗?好吧 , 这并不是纽约康奈尔大学研究人员的感知 , 他们开发了一对耳机来实时跟踪面部表情 。
康奈尔大学研究人员开发的这些独特的头戴式耳机被称为C-Face , 它挂在您的每只耳朵上 , 并跟踪脸颊轮廓来确定您的面部表情 。这些表达被虚拟现实环境中的建模化身所反映 。
“该设备比任何现有的耳挂式可穿戴技术都更简单 , 更引人注目 , 并且功能更强大 , 可以跟踪面部表情 , ”信息科学助理教授 , 该论文的高级作者张成说 , 该论文将在协会上发表 。实际上是从10月20日开始的“计算机技术用户界面软件和技术研讨会” 。
它是如何工作的?
现在 , C-Face的每个耳罩都配备了两个微型RGB摄像头 。得益于这两个摄像头 , 该设备能够记录面部肌肉运动时面部轮廓的变化 。
“最令人兴奋的发现是面部轮廓对面部表情很有帮助 。当我们执行面部表情时 , 我们的面部肌肉会拉伸和收缩 。它们推拉皮肤并影响附近面部肌肉的张力 。从耳朵的角度来看 , 这种效果会导致脸颊轮廓(轮廓)发生变化 。”研究人员写道 。
因此 , 在设备捕获到面部肌肉的变化后 , 将使用深度学习模型和计算机视觉来重建图像 。由于生成的图像是2D图像 , 研究人员部署了AI模型 , 该模型专门用于图像的分类 , 检测和检索 , 以重建轮廓表达 。

    推荐阅读