2019,55(17)
1 引言
近年来,表情识别在教育、心理分析、医学以及商业
领域引起了广泛关注。表情识别主要由图像预处理、特
征提取和分类识别三部分组成。根据面部编码系统
[1]
可
知,与表情关联性强的人脸运动单元(AU 单元)并非均
匀分布在面部区域,而是主要集中在眼睛、眉毛、嘴巴、
鼻翼、下颌等区域,这些区域都成了表情的关键子区域,
也可以称为面部表情的显著性区域
[2]
。目前为止,已经
提出了许多显著性区域检测算法,然而大多数显著性区
域检测算法生成的显著图分辨率比较低,边界定义不准
确或计算成本高。Itti 等
[3]
提出的 IT 算法生成的显著图
分辨率只有原图的 1/2 56。Goferman 等
[4]
提出通过计算
图像的局部颜色对比度来得到图像的显著性区域,但该
方法不能完整地反映整个图像的显著性区域。基于显
著图提取特征可以拉伸表情关键区域和无关区域的对
比度,同时可以抑制噪声。此外,显著图能够凸显出图
自适应加权融合显著性结构张量和 LBP 的表情识别
董俊兰,张 灵,陈云华
广东工业大学 计算机学院,广州 510006
摘 要:针对局部二值模式(Local Binary Patter n,LBP)提取纹理特征时忽略了图像的局部结构信息问题,提出一种
自适应加权融合显著性结构张量和 LBP 的表情识别算法。该算法通过对整幅图片进行显著性区域检测得到全局显
著图来消除细小的纹理和噪声。在显著图的基础上进一步提取两种显著性纹理特征,根据每种特征信息熵的贡献
度来作为特征向量的加权依据。利用支持向量机(Support Vector Machine,SVM)进行表情图像的分类。实验结果
表明,自适应加权融合的两种纹理特征能够较好地描述人脸的特征,有效地提高表情识别率。
关键词:显著图;结构张量特征;局部二值模式(LBP)特征;自适应加权
文献标志码:A 中图分类号:TP39 1.4 doi:10.3778/j.issn.1002-8331 .1805-0160
董俊兰,张灵,陈云华 . 自适应加权融合显著性结构张量和 LBP 的表情识别 .计算机工程与应用,2019,55(17):185-190.
DONG Junlan, ZH AN G Ling, CHEN Yu nhu a. Facial expression recognition by adaptive weighted fusion of salient struc-
tural tensor and LBP. Co mputer Engineering an d Applications, 2019, 55(17):185-190.
Facial Expression Recognition by Adaptive Weighted Fusion of Salient Structural Tensor and LBP
DONG Junlan, ZHANG Ling, CHEN Yunhua
School of Com puter, Guangdong University of Technology, G uan gzhou 5 100 06, China
Ab stract:Aiming at the problem that Local Binary P attern(LBP)algorithm ignores the local structure information when
extracting texture features, a novel expression recognition algorithm by adaptive weighted fusion of salient structure tensor
and LBP feature is proposed. The method first eliminates fi ne text ures and noises by detecting the sali ent regions on the
entire image to obtain a global salient map. Second, salient text ure features are further extr acted based on the salient map.
According to the contribution of each feature information entropy, the feature vector is weighted. Finally, the Support Vector
Machine(SVM)is used to classify the expression images. The experimental results show that the two texture features of ada p-
tive weighted fusion can better describe the features of human face and effectively im prove the expression recognition rate.
Key words:salient map; structure tensor featur e; Local Binary Patt ern(LBP)feature; adaptive w eighted
基金项目:广东省交通运输厅科技项目(No. 科技-2016-02-0 30);广东省自然科学基金(No.2016A030313703,N o.2016A030313713);
广东省科技计划项目(No.2016B030305002);广东省科技计划产学研项目(No.2017B 090901005)。
作者简介:董俊兰(1996—),通讯作者,女,硕士研究生,CCF 学生会员,主要研究方向为图像处理、模式识别,E-ma il:1135580 174@qq.
com;张灵(1968—),女,博士,教授,主要研究方向为数据挖掘、计算机视觉、无线传感;陈云华(1978—),女,博士,副教
授,CCF 会员,主要研究方向为计算机视觉、模式识别、深度学习。
收稿日期:2018-05-10 修回日期:2018-06-25 文章编号:1002-8331(2019)17-0185-06
CN KI 网络出版:2018-11-01, http://kns.cnki.net/kcms/detail/11.2127.TP.20181030.0931.016.html
Computer Engineering and Applications 计算机工程与应用
185