背景描述
我需要将视频中的图像拆帧后对齐到标准人脸上,进行一些算法加工后在反对齐回原始视频里。对齐人脸主要依赖于仿射变换,即根据lmks中的5个关键点(眼睛眉毛)找出仿射变换矩阵,再将原img中的所有像素点变换到标准人脸上,反对齐其实就是把对齐后人脸变换到原img的位置,再做一次仿射变换就可以了。另外以防我以后忘记,记录下变换像素的计算公式:设仿射矩阵为M
x = M[0,0]*pixel[0] + M[0,1]*pixel[1] + M[0,2]
y = M[1,0]*pixel[0] + M[1,1]*pixel[1] + M[1,2]
人脸对齐
首先你需要先把人脸的lmk提取出来(提取方法可以参考dlib)
#计算仿射矩阵
def align(src_points, dst_points):
# align dst to src
src_points = np.matrix(src_points.astype(np.float64))
dst_points = np.matrix(dst_points.astype(np.float64))
c1 = np.mean(src_points, axis=0)
c2 = np.mean(dst_points, axis=0)
#print c1, c2
sr