【论文阅读】Automatic Analysis of Facial Actions: A Survey(一)

摘要

本文是一篇介绍人脸表情自动分析的综述文章,综合性地调查了人脸动作自动分析,介绍了现有的FACS系统数据集,并分析这一行业解决的问题和应用的场景。目的在于提供一份最近的领域的概况,以及分存在的机遇和挑战。

引言

介绍了两种著名的面部表情测量方式:message judgement 和 sign judgement;

将文章的工作分成了三个steps:
1)image processing 和 face ,facial point detection;
2)脸部特征提取
3)基于提取的特征进行自动人脸动作编码;
【论文阅读】Automatic Analysis of Facial Actions: A Survey(一)
Section 2 对 FACS coding 相关问题进行简要回顾;
Section 3 对 face image pre-processing进行简要回顾;
Section 4 包含最近关于面部特征提取的相关工作介绍;
Section 5 介绍了最近面部动作机器分析的前沿的工作;
Section 6 介绍了FACS相关的面部表情数据库;
Section 7则对介绍的是machine anaysis facial actions 的未来挑战和机遇。

Section 2: FACS(FACIAL ACTION CODING SYSTEM )

介绍FACS系统的构成。主要由32种Actions Units组成(fig3),另外还编码了一些其他混杂的动作如眼睛缝的方向,头的姿势,包含了14中的描述器。
【论文阅读】Automatic Analysis of Facial Actions: A Survey(一)一些情绪相关的AU组成:
【论文阅读】Automatic Analysis of Facial Actions: A Survey(一)

Section 3: PRE-PROCESSING

预处理是指再进行有用的特征提取之前所做一切图像预处理操作。Pre-processing的重要目的在于,将人脸对齐到一个通用的参考体系内,以便于从人脸中相对应的语义位置提取特征信息。所做的工作包括三部分:
1)人脸定位
2)人脸关键点定位
3)人脸校准对齐(face alignment)

Face detection