人脸对齐(十一)--PIFA2015

提出一种名为Pose-Invariant3DFaceAlignment (PIFA) 的算法,旨在解决人脸特征点定位问题,尤其适用于非正脸及各种大姿态变化的情况。PIFA通过3D形变模型和级联双回归方法估计相机映射矩阵及3D人脸特征点,并自动判断2D特征点的可见性。

Pose-Invariant 3D Face Alignment(PIFA2015)

    文章主要解决随意姿态变化、非正脸的人脸特征点定位问题,另外还针对没有大姿态人脸库的问题建立了包含各种各样大姿态变化的人脸库。

创新之处:提出了一个新的人脸特征点定位算法,该算法主要估计2D和3D特征点以及任意姿态人脸的2D特征点的可见性。通过3D形变模型,设计一个级联双回归方法来估计相机映射矩阵和3D人脸特征点。3D模型可以通过surface normals自动估计出2D特征点的可见性。

PIFA算法框架:

1 3D人脸模型

U为2D人脸形状,S为3D人脸形状,M为相机映射矩阵,即将三维人脸形状变换为二维人脸形状,P为3D人脸形状参数协方差系数,通过普氏分析和PCA对3D scans计算得到。

本篇文章的目标函数为:

V表示2D人脸特征点的可见性。目标为可见的2D人脸特征点和3D映射得到的2D特征点之间的误差。 

2 级联双回归

回归1:

主要回归投影矩阵M 

回归2:

主要回归3D人脸形状参数p

3 总结

本文主要采用双回归器分别对相机映射矩阵和3D人脸形状参数P进行回归,求出这两个参数然后通过P求出3D人脸形状S,通过U=MS再求出2D人脸特征点,由于是3D到2D的映射,所以对于2D当中遮挡的人脸特征点也可以被准确标定出。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值