MLKit 旋转面部图像使其笔直(iOS 和 Android)

Posted

技术标签:

【中文标题】MLKit 旋转面部图像使其笔直(iOS 和 Android)【英文标题】:MLKit rotate face image so its straight (iOS and Android) 【发布时间】:2020-10-28 01:45:17 【问题描述】:

我正在开发一个使用 Firebase 的 MLKit 进行人脸检测的应用。然后我获取检测到的人脸并通过自定义 tensorflow 模型运行它

问题是我的自定义 tensorflow 模型期望面部是直的。如果用户的脸完全旋转,我将无法获得准确的结果

有什么方法可以旋转面部图像使其笔直?我将如何使用 MLKit 做到这一点?

我目前获取人脸图像的方法是使用 AVCaptureSession (ios) 并根据 mlkit 在人脸对象中给我的边界剪切图像。它可以工作,但如果用户的脸不直,我最终会得到一个旋转的脸

【问题讨论】:

【参考方案1】:

您可以使用此head rotation degree 将头部向后旋转。但它可能只适用于头部旋转在 XY 平面内的 EulerAngleZ()。

【讨论】:

以上是关于MLKit 旋转面部图像使其笔直(iOS 和 Android)的主要内容,如果未能解决你的问题,请参考以下文章

使用 MLKit ios swift 尝试化妆

如何在firebase mlkit中正确对齐面部轮廓?

在 JavaScript 中旋转人脸 (Node.js 10)

Android实战图像识别:Compose + MLKit + CameraX

iOS:图像在保存为 PNG 表示数据后旋转 90 度

检测旋转的面孔微软认知服务