Javascript 中的多重凝视检测(眼动追踪)
Posted
技术标签:
【中文标题】Javascript 中的多重凝视检测(眼动追踪)【英文标题】:Multiple gaze detection in Javascript (eye tracking) 【发布时间】:2018-12-08 11:16:18 【问题描述】:我最近查看了几个眼动追踪库(WebGazer.js 和 tracking.js 仅举几例),但它们似乎都无法检测与网络摄像头交互的第二次凝视(从字面上看,检测是否第二个人正在看屏幕)。
您认为有一种方法可以使用现有的开源库以编程方式实现这一目标吗?
【问题讨论】:
【参考方案1】:通过查看early answer,您可能会找到与您的问题相关的信息。但是,您也可以查看一篇题为FaceDNA:Intel RealSense 3D 摄像头的智能人脸识别系统 [1] 的文章,了解作者关于如何分离人脸的技术。在这篇论文中,作者开发了一个智能的face recognition system [2, 3]。您可以通过添加 face recognition 将其应用于您的眼动追踪方法,该方法将从图像中提取丰富的信息以对眼睛注视数据进行分类和处理。
[1] Ye, D. 和 Liao, S.W.,2016 年。FaceDNA:采用英特尔实感 3D 摄像头的智能人脸识别系统。在图像处理、计算机视觉和模式识别 (IPCV) 国际会议论文集上(第 294 页)。世界计算机科学、计算机工程和应用计算大会 (WorldComp) 指导委员会。
[2] Amos, B.、Ludwiczuk, B. 和 Satyanarayanan, M.,2016 年。Openface:具有移动应用程序的通用人脸识别库。 CMU 计算机科学学院,6.
[3] Gao, S.、Zhang, Y.、Jia, K.、Lu, J. 和 Zhang, Y.,2015。通过学习深度监督自动编码器进行单样本人脸识别。 IEEE Transactions on Information Forensics and Security,10(10),pp.2108-2118。
【讨论】:
以上是关于Javascript 中的多重凝视检测(眼动追踪)的主要内容,如果未能解决你的问题,请参考以下文章
是否可以访问 hololens 2 上的瞳孔直径等眼动追踪数据?