使用平台通道/CoreML 在实时摄像机预览的每一帧上运行计算机视觉模型？

Posted 2023-03-27

【中文标题】使用平台通道/CoreML 在实时摄像机预览的每一帧上运行计算机视觉模型？

【英文标题】：Run computer vision model on every frame of live camera preview with platform channels/CoreML?

【发布时间】：2021-06-05 10:22:27

【问题描述】：

我想在实时相机预览的每一帧上运行一个对象检测模型（图像进入，检测到的边界框消失），大约15 帧/秒。我训练了一个模型并将其转换为 CoreML，因为我想首先针对 ios。

使用平台通道并将相机流中的每一帧发送到运行 CoreML 模型的快速方法是否可行？这会增加太多开销吗？

【参考方案1】：

是的，这是可行的（尽管我不知道您所说的平台通道是什么意思），并且根据型号，您可以获得超过 15 fps 的速度。