视频中面部表情分类的最佳模型是啥？

Posted 2023-03-12

【中文标题】视频中面部表情分类的最佳模型是啥？

【英文标题】：What is the best model for facial expression classification in videos?视频中面部表情分类的最佳模型是什么？

【发布时间】：2017-10-31 00:05:19

【问题描述】：

我正在寻找用于视频中面部表情分类的最先进的深度学习模型。

给定一个输入视频，我希望算法检测其中的人脸并对与该人脸相关的情绪进行分类。我正在寻找的情绪是标准的 6 种情绪 + 1 种中性情绪。输入视频可以是任何自拍视频，不一定包含人脸（因为算法会检测人脸然后进行分类）。因此，对于单个视频，可以有多个情感关联

【问题讨论】：

你看的是什么分类？您想要的粒度是多少？

给定一个输入视频，我希望算法检测其中的人脸并对与该人脸相关的情绪进行分类。我正在寻找的情绪是标准的 6 种情绪 + 1 种中性情绪。输入视频可以是任何自拍视频，不一定包含人脸（因为算法会检测人脸然后进行分类）。因此，对于单个视频，可能会关联多种情绪。

【参考方案1】：

算法：

1) 训练/获取图像中面部表情识别的模型。

2) 从视频中提取单个帧

3) 检测单个帧中的人脸，并将人脸传递给图像的面部表情识别，得到最终输出。