人脸网格检测新功能

借助机器学习套件的人脸网格检测 API,您可以实时为类似自拍照的图片生成 468 3D 点的高准确度网格。人脸应位于摄像头周围大约 2 米(约 7 英尺)的范围内。

如果要检测距离摄像头大约 2 米(约 7 英尺)以上的人脸,请参阅机器学习套件的人脸检测 SDK

以下是关于人脸网格检测功能的一些术语:

  • 边界框是检测到的人脸的矩形区域。
  • 人脸网格信息由 468 个 3D 点和边线组成,可用于为检测到的人脸绘制几何图形网格。

人脸网格检测 API 会为检测到的人脸生成人脸网格,其中每个网格都包含 468 个 3D 点和边缘。借助人脸网格检测,您可以实时对人脸执行更准确的操作,例如 AR 滤镜、自拍照和视频聊天。

Android

主要功能

  • 识别和定位人脸 获取自拍照中检测到的人脸的边界框。
  • 获取人脸网格信息:获取检测到的每个人脸的 468 3D 点和三角形信息。
  • 实时处理视频帧。人脸网格检测是在设备上执行的,其速度足以支持视频操作等实时应用。

示例结果

输入 输出(“仅限边界框”模式) 输出(“人脸网格”模式)

与机器学习套件人脸检测 SDK 比较

人脸网格检测 API 人脸检测 API
推荐的用例(示例)
  • 在视频串流中生成 AR 特效
  • 对类自拍照进行实时人脸检测(脸部不超过 2 米)
  • 检测照片中有多少人脸
  • 检测远离摄像头的人脸
延迟时间 低(Pixel 3 大约 14 毫秒)

建议用于实时

中(开启快速模式后,Pixel 3 约 60 毫秒)
推荐输入 在大约 2 米(约 7 英尺)范围内拍摄的人脸 任何有人脸的图片
Face points 输出 对于每个人脸,启用“脸部网格”模式后,系统均会记录 468 个 3D 点和三角形信息。 对于每个人脸,当启用“脸部轮廓”模式后,每个人脸最多有 133 个 2D 点。
识别出 # 张面孔
  • “仅限边界框”模式:>=1 个边界框,前提是人脸靠近相机(<= 大约 2 米或大约 7 英尺远)
  • “人脸网格”模式:最多包含 2 个边界框和网格,只要人脸靠近相机即可(在大约 2 米以内)
  • “边界框”模式:>=1; 人脸离相机很远,但每个人脸的最小尺寸为 100x100 像素
  • 人脸轮廓:最多 1 条,只要人脸接近摄像头
跟踪 ID
面部方向
面孔分类(例如微笑)
实现选项 仅限套装 套装 / 未捆绑商品
应用大小 捆绑包:约 6.4 MB

未分类:尚不可用

捆绑在一起:约 69MB

未捆绑:约 0.6MB