人脸识别调研总结

Posted 2020-09-09

1、系统的人脸识别

     CoreImage里面的CIFaceFeature

•      可以实现图片的人脸检测，以及人脸的眼睛，嘴巴的位置定位。
•      可以检测眨眼和微笑
•      实现起来比较简单。
•      精度还算比较好

     

     实时视频预览，拍照

      1）AVCapture ＋ CIFaceFeature

     在 AVCaptureVideoDataOutputSampleBufferDelegate 协议的

    - (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection；方法里面拿出当前帧的图片进行人脸识别：微笑相机

 

     2）AVCapture中的 AVMetadataFaceObject

• 设置 AVCaptureMetadataOutput中的 metadataObjectTypes = @[AVMetadataObjectTypeFace];并添加到 AVCaptureSession中去
• 监听 AVCaptureMetadataOutputObjectsDelegate回调并在回调方法：- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputMetadataObjects:(NSArray *)metadataObjects fromConnection:(AVCaptureConnection *)connection;中取得metadataObjects数组。
• 在 AVCaptureVideoDataOutputSampleBufferDelegate 协议的：- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection;方法里面取出metadataObjects数组，强制转换为 AVMetadataFaceObject对象作处理。

     

     以上两种方法由官方提供，返回识别到的人脸的范围，前置摄像头加上马赛克特效很流畅。后置摄像头比较慢，不过应该可以调低分辨率来提高效率。

 

     3）GPUImage 有对方法1）进行了封装，运行demo性能相对还是比较高。

 

2、Face++本地库 FaceppLocalDetector

• 使用简单     
• 只能检测到人脸的范围，精度相对于系统的会高一些（之前系统那些判断不到的，还有误判的用这个库都没有出现）
• 有在线版
• 有提供付费的SDK，人脸检测、人脸关键点检测和人脸分析，官网打出的广告是美颜相机，美图秀秀等比较出名的几个都是用的他的SDK。

 

3、讯飞开发平台的人脸识别

• demo很详细，提供的framework里面每个.h文件都有很详细的中文注释
• 有在线版本
• 本地静态图片识别，只能检测到人脸的范围，精度想对于系统的会高一些（之前系统那些判断不到的，还有误判的用这个库都没有出现）
• 视频预览人脸识别（AVCapture），精度高，效率高，提供人脸眉毛，眼睛，鼻子，嘴巴共21个关键点检测。效果很好。
• 离线版官方是说免费的。

 

4、OpenCV

• 基于C++
• 可以通过官方提供的对应的haarcascade_XXXXXX.xml文件检测出脸，眼睛，鼻子，嘴巴等，脸的精度还可以，其余器官的很一般
• haarcascade_XXXXXX.xml文件我理解为物体特征分类器，里面记录一系列物体特征的集合，检测的精度和这些文件相关联，不过里面的数据很难理解