简介
人脸关键点检测也被称为人脸关键点定位,旨在定位人脸上预定义的关键点,关键点位于五官和人脸边界上。关键点能够反映各个部位的脸部特征,随着技术的发展和对精度要求的增加,人脸关键点的数量经历了从最初的5个点到如今超过200个点的发展历程。下图分别是68点和98点关键点的标注形式。
提取人脸关键点可以获得五官的定位,可以对人脸获得五官patch,可以辅助人脸识别、活体检测等任务。或者是可以对人脸进行对齐,所以人脸关键点定位的相关论文也可以使用face alignment进行检索,计算检测到的人脸关键点到目标平均脸的形变参数,可以用于3维人脸重建。
人脸关键点检测的评价指标:
Inter-Ocular Normalization
使用左右眼角的距离对于关键点误差进行归一化,其中$d$为左右眼角的距离,$x$和$x^*$分别为关键点和关键点真值。
Inter-Pupil Normalization
使用瞳间距对于关键点误差进行归一化的公式于使用左右眼角的距离对于关键点误差进行归一化的公式形式一样,不过$d$换成了瞳间距。如果在真值中瞳仁没有标注,就使用眼周关键点求平均值获得眼睛中心的坐标值,计算瞳间距。
Normalization Mean Error
归一化平均错误率计算关键点检测平均误差,$N$为整张图片上关键点的个数。
Failure Rate (FR)
是评估定位质量的另一个指标。对于一幅图像,如果NME大于阈值,则认为预测失败。通常使用0.1作为阈值。