如何正确释放 AVCaptureSession
Posted
技术标签:
【中文标题】如何正确释放 AVCaptureSession【英文标题】：How to properly release an AVCaptureSession 【发布时间】：2010-09-18 09:40:02 【问题描述】：我正在使用 AVFoundation 类从摄像头捕获实时视频流并处理视频样本。这很好用。但是，一旦完成，我确实无法正确释放 AVFoundation 实例（捕获会话、预览层、输入和输出）。
当我不再需要会话和所有关联对象时，我会停止捕获会话并释放它。这在大多数情况下都有效。但是，有时应用程序会崩溃，并在由调度队列（以及处理视频样本的位置）创建的第二个线程中引发EXEC_BAD_ACCESS 信号。崩溃主要是由于我自己的类实例，它充当示例缓冲区委托，并在我停止捕获会话后被释放。
Apple 文档提到了这个问题：停止捕获会话是一个异步操作。那就是：它不会立即发生。特别是，第二个线程继续处理视频样本并访问不同的实例，例如捕获会话或输入和输出设备。
那么如何正确释放AVCaptureSession 和所有相关实例？是否有可靠的通知告诉我AVCaptureSession 已完成？
这是我的代码：
声明：
AVCaptureSession* session;
AVCaptureVideoPreviewLayer* previewLayer;
UIView* view;
实例设置：
AVCaptureDevice* camera = [AVCaptureDevice defaultDeviceWithMediaType: AVMediaTypeVideo];
session = [[AVCaptureSession alloc] init];
AVCaptureDeviceInput* input = [AVCaptureDeviceInput deviceInputWithDevice: camera error: &error];
[session addInput: input];
AVCaptureVideoDataOutput* output = [[[AVCaptureVideoDataOutput alloc] init] autorelease];
[session addOutput: output];
dispatch_queue_t queue = dispatch_queue_create("augm_reality", NULL);
[output setSampleBufferDelegate: self queue: queue];
dispatch_release(queue);
previewLayer = [[AVCaptureVideoPreviewLayer layerWithSession: session] retain];
previewLayer.frame = view.bounds;
[view.layer addSublayer: previewLayer];
[session startRunning];
清理：
[previewLayer removeFromSuperlayer];
[previewLayer release];
[session stopRunning];
[session release];
【问题讨论】：
【参考方案1】：这是迄今为止我找到的最佳解决方案。基本思想是使用调度队列的终结器。当调度队列退出时，我们可以确定在处理样本缓冲区的第二个线程中不会有任何动作。
static void capture_cleanup(void* p)
AugmReality* ar = (AugmReality *)p; // cast to original context instance
[ar release]; // releases capture session if dealloc is called
...
dispatch_queue_t queue = dispatch_queue_create("augm_reality", NULL);
dispatch_set_context(queue, self);
dispatch_set_finalizer_f(queue, capture_cleanup);
[output setSampleBufferDelegate: self queue: queue];
dispatch_release(queue);
[self retain];
...
不幸的是，我现在必须明确停止捕获。否则释放我的实例不会释放它，因为第二个线程现在也会递增和递减计数器。
另一个问题是我的课程现在从两个不同的线程中释放。这是可靠的还是下一个导致崩溃的问题？
【讨论】：
capture_cleanup 函数中的 AugmReality 是什么？我没有得到那个东西。 AugmReality 是我的应用程序的自定义类，它实现了示例缓冲区委托。所以变量p（或ar）指的是我想释放但直到捕获会话完全停止才能释放的实例。【参考方案2】：我在 Apple 开发者论坛上发布了一个非常相似的问题，并得到了 Apple 员工的回答。他说这是一个已知问题：
这是 AVCaptureSession / VideoDataOutput 的问题 ios 4.0-4.1 已修复并将在未来更新中出现。为了 暂时，您可以通过等待一小段时间来解决它 停止 AVCaptureSession，例如半秒钟，在处理之前 会话和数据输出。
他/她提出以下代码：
dispatch_after(
dispatch_time(0, 500000000),
dispatch_get_global_queue(DISPATCH_QUEUE_PRIORITY_DEFAULT, 0), // or main queue, or your own
^
// Do your work here.
[session release];
// etc.
);
我仍然更喜欢使用调度队列终结器的方法，因为这段代码只是猜测第二个线程可能何时结束。
【讨论】：
【参考方案3】：根据当前的苹果文档（1）[AVCaptureSession stopRunning] 是一个同步操作，它会阻塞直到接收器完全停止运行。所以所有这些问题都不应该再发生了。
【讨论】：
它们似乎确实发生在我身上 iOS 10、Swift 3、Xcode 9【参考方案4】：解决了！ 也许这是初始化会话的一系列动作。这个对我有用：
NSError *error = nil;
if(session)
[session release];
// Create the session
session = [[AVCaptureSession alloc] init];
// Configure the session to produce lower resolution video frames, if your
// processing algorithm can cope. We'll specify medium quality for the
// chosen device.
session.sessionPreset = AVCaptureSessionPresetMedium;
// Find a suitable AVCaptureDevice
AVCaptureDevice *device = [AVCaptureDevice
defaultDeviceWithMediaType:AVMediaTypeVideo];
// Create a device input with the device and add it to the session.
AVCaptureDeviceInput *input = [AVCaptureDeviceInput deviceInputWithDevice:device
error:&error];
if (!input)
// Handling the error appropriately.
[session addInput:input];
// Create a VideoDataOutput and add it to the session
AVCaptureVideoDataOutput *output = [[[AVCaptureVideoDataOutput alloc] init] autorelease];
[session addOutput:output];
// Configure your output.
dispatch_queue_t queue = dispatch_queue_create("myQueue", NULL);
[output setSampleBufferDelegate:self queue:queue];
dispatch_release(queue);
// Specify the pixel format
output.videoSettings =
[NSDictionary dictionaryWithObject:
[NSNumber numberWithInt:kCVPixelFormatType_32BGRA]
forKey:(id)kCVPixelBufferPixelFormatTypeKey];
// If you wish to cap the frame rate to a known value, such as 15 fps, set
// minFrameDuration.
output.minFrameDuration = CMTimeMake(1, 15);
previewLayer = [AVCaptureVideoPreviewLayer layerWithSession:session];
[delegate layerArrived:previewLayer];
NSNotificationCenter *notify =
[NSNotificationCenter defaultCenter];
[notify addObserver: self
selector: @selector(onVideoError:)
name: AVCaptureSessionRuntimeErrorNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStart:)
name: AVCaptureSessionDidStartRunningNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStop:)
name: AVCaptureSessionDidStopRunningNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStop:)
name: AVCaptureSessionWasInterruptedNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStart:)
name: AVCaptureSessionInterruptionEndedNotification
object: session];
// Start the session running to start the flow of data
[session startRunning];
顺便说一句，这个序列似乎解决了同步通知问题:)
【讨论】：
很抱歉，但这没有任何区别。它仍然崩溃。以及应该如何解决通知问题？现在通知是否延迟到第二个线程完成？同时，我找到了适合我的解决方案（请参阅我自己的答案）。【参考方案5】：使用队列终结器，您可以对每个队列使用 dispatch_semaphore，然后在完成后继续您的清理例程。
#define GCD_TIME(delayInSeconds) dispatch_time(DISPATCH_TIME_NOW, delayInSeconds * NSEC_PER_SEC)
static void vQueueCleanup(void* context)
VideoRecordingViewController *vc = (VideoRecordingViewController*)context;
if (vc.vSema) dispatch_semaphore_signal(vc.vSema);
static void aQueueCleanup(void* context)
VideoRecordingViewController *vc = (VideoRecordingViewController*)context;
if (vc.aSema) dispatch_semaphore_signal(vc.aSema);
//In your cleanup method:
vSema = dispatch_semaphore_create(0);
aSema = dispatch_semaphore_create(0);
self.avSession = nil;
if (vSema) dispatch_semaphore_wait(vSema, GCD_TIME(0.5));
if (aSema) dispatch_semaphore_wait(aSema, GCD_TIME(0.5));
[self.navigationController popViewControllerAnimated:YES];
请记住，您必须将 AVCaptureVideoDataOutput/AVCaptureAudioDataOutput 对象样本缓冲区委托设置为 nil，否则它们将永远不会释放其关联队列，因此在您释放 AVCaptureSession 时永远不会调用它们的终结器。
[avs removeOutput:vOut];
[vOut setSampleBufferDelegate:nil queue:NULL];
【讨论】：
【参考方案6】： -(void)deallocSession
[captureVideoPreviewLayer removeFromSuperlayer];
for(AVCaptureInput *input1 in session.inputs)
[session removeInput:input1];
for(AVCaptureOutput *output1 in session.outputs)
[session removeOutput:output1];
[session stopRunning];
session=nil;
outputSettings=nil;
device=nil;
input=nil;
captureVideoPreviewLayer=nil;
stillImageOutput=nil;
self.vImagePreview=nil;
我在弹出和推送任何其他视图之前调用了这个函数。它解决了我的内存不足警告问题。
【讨论】：
我遇到了相机冻结问题，接到电话后，如何重新启动我的相机预览【参考方案7】：AVCaptureSession 分配后你可以使用：
NSNotificationCenter *notify =
[NSNotificationCenter defaultCenter];
[notify addObserver: self
selector: @selector(onVideoError:)
name: AVCaptureSessionRuntimeErrorNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStart:)
name: AVCaptureSessionDidStartRunningNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStop:)
name: AVCaptureSessionDidStopRunningNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStop:)
name: AVCaptureSessionWasInterruptedNotification
object: session];
[notify addObserver: self
selector: @selector(onVideoStart:)
name: AVCaptureSessionInterruptionEndedNotification
object: session];
这些是在 session.stopRunning、session.startRunning 等时回调相关方法。
你还应该实现一些未记录的清理块：
AVCaptureInput* input = [session.inputs objectAtIndex:0];
[session removeInput:input];
AVCaptureVideoDataOutput* output = (AVCaptureVideoDataOutput*)[session.outputs objectAtIndex:0];
[session removeOutput:output];
我发现令人困惑的是，在调用 seesion.stopRunning 时，onVideoStop: 被同步调用！尽管 Apple 对此案做出了异步假设。
它可以工作，但如果您发现任何技巧，请告诉我。我更喜欢异步处理它。
谢谢
【讨论】：
我已经尝试使用通知并发现与您相同：通知在 session.stopRunning 返回之前立即发送，而第二个线程仍在运行。所以应用程序仍然不时崩溃。我将尝试建议的清理代码，但我只是将它放在 session.stopRunning 之后。或者这真的有什么不同吗？ 很遗憾，您的解决方案不起作用。它仍然不时崩溃，因为第二个线程没有立即退出并访问已发布的实例。以上是关于如何正确释放 AVCaptureSession的主要内容，如果未能解决你的问题，请参考以下文章
如何从 SoftwareBitmap (UWP) 正确释放 BitmapBuffer？
已释放对象的校验和不正确 - 对象在被释放后可能已被修改。我该如何解决？