CIDetector 和 UIImagePickerController

Posted

技术标签:

【中文标题】CIDetector 和 UIImagePickerController【英文标题】:CIDetector and UIImagePickerController 【发布时间】:2012-05-31 13:14:49 【问题描述】:

我正在尝试实现内置的 ios 5 人脸检测 API。我正在使用UIImagePickerController 的实例来允许用户拍照,然后我尝试使用CIDetector 来检测面部特征。不幸的是,featuresInImage 总是返回一个大小为 0 的数组。

代码如下:

- (void)imagePickerController:(UIImagePickerController *)picker didFinishPickingMediaWithInfo:(NSDictionary *)info

UIImage* picture = [info objectForKey:UIImagePickerControllerOriginalImage];

NSNumber *orientation = [NSNumber numberWithInt:
                         [picture imageOrientation]];
NSDictionary *imageOptions =
[NSDictionary dictionaryWithObject:orientation
                            forKey:CIDetectorImageOrientation];

CIImage *ciimage = [CIImage imageWithCGImage:[picture CGImage]
                                     options:imageOptions];


NSDictionary *detectorOptions =
[NSDictionary dictionaryWithObject:CIDetectorAccuracyLow
                            forKey:CIDetectorAccuracy];
CIDetector *detector = [CIDetector detectorOfType:CIDetectorTypeFace
                                          context:nil
                                          options:detectorOptions];

NSArray *features = [detector featuresInImage:ciimage];
NSLog(@"Feature size: %d", features.count);

这总是返回 0 个特征。但是,如果我使用应用程序内置文件中的 UIImage,则人脸检测效果很好。

我正在使用来自 Pragmatic Bookshelf article 的代码。

对于它的价值,我认为错误是当我将 UIImage 从相机转换为 CIImage 时,但它可能是任何东西。

【问题讨论】:

【参考方案1】:

@tonyc 您的解决方案仅适用于“UIImageOrientationRight”的特定情况。问题来自 UIImage 和 CIDetectorImageOrientation 中的方向之间的差异。来自 iOS 文档:

CIDetectorImageOrientation

用于指定要检测其特征的图像的显示方向的键。这把钥匙 是一个 NSNumber 对象,其值与 TIFF 定义的值相同,并且 EXIF 规范;值的范围可以从 1 到 8。该值 指定图像的原点 (0,0) 所在的位置。如果不 目前,默认值为1,表示图像的原点 是顶部,左侧。有关每个值指定的图像原点的详细信息, 请参阅 kCGImagePropertyOrientation。

适用于 iOS 5.0 及更高版本。

在 CIDetector.h 中声明。

所以现在的问题是这两个方向之间的转换,这是我在代码中所做的,我测试过,它适用于所有方向:

int exifOrientation;
switch (self.image.imageOrientation) 
    case UIImageOrientationUp:
        exifOrientation = 1;
        break;
    case UIImageOrientationDown:
        exifOrientation = 3;
        break;
    case UIImageOrientationLeft:
        exifOrientation = 8;
        break;
    case UIImageOrientationRight:
        exifOrientation = 6;
        break;
    case UIImageOrientationUpMirrored:
        exifOrientation = 2;
        break;
    case UIImageOrientationDownMirrored:
        exifOrientation = 4;
        break;
    case UIImageOrientationLeftMirrored:
        exifOrientation = 5;
        break;
    case UIImageOrientationRightMirrored:
        exifOrientation = 7;
        break;
    default:
        break;


NSDictionary *detectorOptions = @ CIDetectorAccuracy : CIDetectorAccuracyHigh ; // TODO: read doc for more tuneups
CIDetector *faceDetector = [CIDetector detectorOfType:CIDetectorTypeFace context:nil options:detectorOptions];

NSArray *features = [faceDetector featuresInImage:[CIImage imageWithCGImage:self.image.CGImage]
                                          options:@CIDetectorImageOrientation:[NSNumber numberWithInt:exifOrientation]];

【讨论】:

什么是self.image.imageOrientation你能解释一下吗? 请在此告知***.com/questions/54399074/…【参考方案2】:

果然,在花了一天的时间研究这个并被难住之后,我在发布这个一小时后找到了解决方案。

我最终注意到人脸检测在横向上确实有效,但在纵向上却不行。

原来我需要这些选项:

NSDictionary *imageOptions = [NSDictionary dictionaryWithObject:[NSNumber numberWithInt:6]
                                                         forKey:CIDetectorImageOrientation];
NSArray *features = [detector featuresInImage:ciimage options:imageOptions];

【讨论】:

Swift4.2 var imageOptions = [CIDetectorImageOrientation : NSNumber(value: 6)] var features = faceDetector!.features(in: myImage, options: imageOptions as? [String : 任何])【参考方案3】:

Swift 3 版本

var exifOrientation : Int
switch (inputImage.imageOrientation)

case UIImageOrientation.up:
    exifOrientation = 1;
case UIImageOrientation.down:
    exifOrientation = 3;
case UIImageOrientation.left:
    exifOrientation = 8;
case UIImageOrientation.right:
    exifOrientation = 6;
case UIImageOrientation.upMirrored:
    exifOrientation = 2;
case UIImageOrientation.downMirrored:
    exifOrientation = 4;
case UIImageOrientation.leftMirrored:
    exifOrientation = 5;
case UIImageOrientation.rightMirrored:
    exifOrientation = 7;


let ciImage = CIImage(cgImage: inputImage.cgImage!)
let options = [CIDetectorAccuracy: CIDetectorAccuracyHigh]
let faceDetector = CIDetector(ofType: CIDetectorTypeFace, context: nil, options: options)!
let faces = faceDetector.features(in: ciImage, options:["CIDetectorImageOrientation":exifOrientation])

【讨论】:

【参考方案4】:

我遇到了类似的问题 - 人脸检测器的工作方向与图像方向属性不匹配。 iOS face detector orientation and setting of CIImage orientation

我发现有一个快速解决方法是忽略图像方向并“压平”图像(这样就没有图像方向数据)

我使用了这个代码:

http://blog.logichigh.com/2008/06/05/uiimage-fix/

果然看起来它对于前置摄像头照片的效果要好得多。我在景观方面的尝试还不够多,无法判断它是否对那里有所帮助,但看起来很有希望

【讨论】:

您的链接已损坏

以上是关于CIDetector 和 UIImagePickerController的主要内容,如果未能解决你的问题,请参考以下文章

CIDetector 在处理 CMSampleBuffer 时崩溃

[iOS]CIDetector之CIDetectorTypeFace人脸识别

Swift CIDetector识别相册的二维码

无法弹出 UIImagePickerController

在图像上标记面部和眼睛

iOS人脸识别(CoreImage)