首页 > 专利 > 南京信息工程大学 > 基于典型相关多核学习的彩色人脸识别方法专利详情

基于典型相关多核学习的彩色人脸识别方法   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2016-09-28
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2017-03-22
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2019-06-04
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2036-09-28
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201610861197.7 申请日 2016-09-28
公开/公告号 CN106446840B 公开/公告日 2019-06-04
授权日 2019-06-04 预估到期日 2036-09-28
申请年 2016年 公开/公告年 2019年
缴费截止日
分类号 G06K9/00 主分类号 G06K9/00
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 0
权利要求数量 1 非专利引证数量 1
引用专利数量 6 被引证专利数量 0
非专利引证 1、Jiwen Lu 等.Image Set ClassificationUsing Holistic Multiple Order StatisticsFeatures and Localized Multi-KernelMetric Learning《.The IEEE InternationalConference on Computer Vision(ICCV)》.2013,王超.彩色图像识别的核特征提取方法研究《.中国优秀硕士学位论文全文数据库 信息科技辑》.2013,(第03期),Naiyang Guan 等.Sparse Representationbased Discriminative CanonicalCorrelation Analysis for FaceRecognition《.2012 11th InternationalConference on Machine Learning andApplications》.2012,周鹏飞 等.基于多核学习特征选择的彩色人脸识别研究《.信息化研究》.2014,第40卷(第6期),刘茜.彩色人脸图像特征提取方法研究《.中国博士学位论文全文数据库 信息科技辑》.2016,(第04期),;
引用专利 CN105740787A、CN105740790A、CN104680150A、CN105740885A、CN101482926A、CN104732204A 被引证专利
专利权维持 6 专利申请国编码 CN
专利事件 事务标签 公开、实质审查、授权
申请人信息
申请人 第一申请人
专利权人 南京信息工程大学 当前专利权人 南京信息工程大学
发明人 刘茜、荆晓远 第一发明人 刘茜
地址 江苏省南京市宁六路216号 邮编 210000
申请人数量 1 发明人数量 2
申请人所在省 江苏省 申请人所在市 江苏省南京市
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
江苏爱信律师事务所 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
唐小红
摘要
本发明公开了基于典型相关多核学习的彩色人脸识别方法,该方法将多核学习技术应用于彩色人脸图像的典型相关分析,对三个彩色分量分别使用三个不同的核映射,再通过典型相关多核学习对三个彩色分量分别进行非线性特征提取。对于提取到的特征,使用基于余弦距离的最近邻分类器进行分类和识别。本发明识别效果更高,通过典型相关多核学习,彩色人脸特征的分类能力得到了明显增强。
  • 摘要附图
    基于典型相关多核学习的彩色人脸识别方法
  • 说明书附图:图1
    基于典型相关多核学习的彩色人脸识别方法
  • 说明书附图:图2
    基于典型相关多核学习的彩色人脸识别方法
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2019-06-04 授权
2 2017-03-22 实质审查的生效 IPC(主分类): G06K 9/00 专利申请号: 201610861197.7 申请日: 2016.09.28
3 2017-02-22 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.基于典型相关多核学习的彩色人脸识别方法,其特征在于,对一个彩色人脸图像训练样本集X,令n表示所有彩色人脸图像训练样本的个数,c表示彩色人脸图像训练样本的类别数,nk表示第k类彩色图像训练样本的个数,XR∈Rd×n、XG∈Rd×n、XB∈Rd×n分别表示R、G、B三个彩色分量训练样本集,d表示彩色分量样本维数, 表示Xi中第p类的第q个样本,i=d d d
R,G,B;对于一个待识别样本y,令yR∈R、yG∈R 、yB∈R 分别表示该样本的R、G、B三个彩色分量;令φR:Rd→HR、φG:Rd→HG、φB:Rd→HB表示三个核映射,它们分别将R、G、B三个彩色分量样本从原始d维的线性空间Rd映射到三个非线性高维核空间HR、HG、HB,ki表示核映射φi对应的核函数,ωi表示核函数ki对应的多核组合系数,满足ωi>0且 令 和φi(yi)分别表示核映射后的样本 和yi,φi(Xi)表示核映射后的彩色分量训练样本集Xi, 表示φi(Xi)中所有样本的均值, 表示中心化后的样本 表示中心化后的φi
T
(Xi),Ki=(φi(Xi)) φi(Xi)表示对应φi(Xi)的核矩阵,
表示对应 的核矩阵,其中En∈Rn×n是一个所有元素都为1的方阵, 表示
对应φi(yi)的核矩阵;令 表示核空间Hi中i彩色分量样本对应的投影向量;核空间Hi中的投影向量 用φi(Xi)或 线性表示,即 其中ui,vi∈Rn是两个线性表示系
数向量,满足 In∈Rn×n是一个单位矩阵,具体步骤如下:
步骤1、对于彩色分量训练样本集Xi(i=R,G,B),为了选择最优的核函数 设计核函数选择准则如下:
其中, 和 分别表示Xi的类内相关性和类间相关性,定义如下:
和 分别表示Xi中第p类的第r个样本和第t个样本, 表示Xi中第q类的第t个样本,和 分别表示核映射后的样本 和
和 分别表示中心化后的样本 和
是一个块对角矩阵, 是一个所有元素值都为1的方阵,tr(·)表示方阵的迹,rank(Ki)表示矩阵Ki的秩;
步骤2、使用步骤1选择的三个最优核函数 分别对三个彩色分量训练样本集XR,XG,XB进行核映射,得到核矩阵KR,KG,KB,
步骤3、定义核空间中i和j彩色分量样本特征集之间的典型相关性Cij如下:
并定义目标函数如下:
通过轮流更新线性表示系数vR,vG,vB和多核组合系数ωR,ωG,ωB进行迭代求解,得到这两组系数的解,并通过 得到uR,uG,uB;
步骤4、彩色人脸图像训练样本集的最终特征表示如下:
待识别样本的最终特征表示如下:
计算 到 中每一个样本的余弦距离,将待识别样本y归到距离最小的那个训练样本所在的类。
说明书

技术领域

[0001] 本发明属于图像处理和模式识别技术领域,具体涉及基于典型相关多核学习的彩色人脸识别方法。

背景技术

[0002] 现有的基于彩色图像典型相关分析的人脸识别方法有“基于彩色图像典型相关分析的人脸识别方法”(CICCA,X.Y.Jing,S.Li,C.Lan,D.Zhang,J.Y.Yang,and Q.Liu“,Color Image Canonical Correlation Analysis for Face Feature Extraction and Recognition”,Signal Processing,vol.91,no.8,pp.2132-2140,2011),该方法通过求解下面的优化问题使三个彩色分量人脸图像数据集典型相关:
[0003]
[0004]
[0005] 其中,X、Y、Z分别表示R、G、B三个彩色分量人脸图像数据集, 分别表示R、G、B三个彩色分量人脸图像数据集的投影向量。该问题可以转化为下面的三个广义特征方程进行求解:
[0006]
[0007] 该方法基于线性的典型相关分析技术,很难充分适应人脸图像复杂的非线性特性(例如,光照变化、表情变化、姿态变化等),从而难以保证识别效果。

发明内容

[0008] 发明目的:为克服现有技术的不足,非线性的核技术可以通过非线性核映射改变样本的分布,使原来线性空间中难以分离的样本在非线性核空间中可分离。另外,考虑到彩色人脸图像存在三个彩色分量(也可以看作三个光谱),为了应对不同彩色分量的不同特性,将多核学习技术应用于彩色人脸图像,对彩色人脸图像的三个彩色分量分别使用三个不同的核映射,再通过典型相关多核学习对每一个彩色分量分别进行非线性特征提取,然后将每幅彩色人脸图像三个彩色分量的特征向量串联成一个列向量,最后使用基于余弦距离的最近邻分类器进行分类和识别。
[0009] 在Face Recognition Grand Challenge(FRGC)version 2Experiment 4彩色人脸数据库(P.J.Phillips,P.J.Flynn,T.Scruggs,K.Bowyer,J.Chang,K.Hoffman,J.Marques,J.Min,and W.Worek“, Overview of the Face Recognition Grand Challenge”,IEEE Conf.Computer Vision and Pattern Recognition,vol.1,pp.947-954,2005)上做仿真实验,证明基于典型相关多核学习的彩色人脸识别方法在人脸识别问题中的有效性。
[0010] 本发明的技术方案如下:
[0011] 对一个彩色人脸图像训练样本集X,令n表示所有彩色人脸图像训练样本的个数,c表示彩色人脸图像训练样本的类别数,nk表示第k类彩色图像训练样本的个数,XR∈Rd×n、XG∈Rd×n、XB∈Rd×n分别表示R、G、B三个彩色分量训练样本集,d表示彩色分量样本维数,表示Xi中第p类的第q个样本,i=R,G,B。对于一个待识别样本y,令yR∈Rd、yG∈Rd、yB∈Rd分别表示该样本的R、G、B三个彩色分量。令φR:Rd→HR、φG:Rd→HG、φB:Rd→HB表示三个核映d射,它们分别将R、G、B三个彩色分量样本从原始d维的线性空间R映射到三个非线性高维核空间HR、HG、HB,ki表示核映射φi对应的核函数,ωi表示核函数ki对应的多核组合系数,满足ωi>0且 令 和φi(yi)分别表示核映射后的样本 和yi,φi(Xi)表示核映射后的彩色分量训练样本集Xi, 表示φi(Xi)中所有样本的均值, 表示中心化后的样本 表示中心化后的φi(Xi),Ki=(φi(Xi))Tφi(Xi)表示对应φi(Xi)的核矩阵, 表示对应 的核矩阵,其中En∈Rn×n是一个所有
元素都为1的方阵, 表示对应φi(yi)的核矩阵。令 表示核空间Hi中i彩色分量样本对应的投影向量。根据核重构理论(J.S.Taylor,and N.Cristianini,“Kernel Methods for Pattern Analysis”,Cambridge University Press,Cambridge,2004),核空间Hi中的投影向量 可以用φi(Xi)或 线性表示,即 其中ui,vi∈Rn是两
个线性表示系数向量,满足 In∈Rn×n是一个单位矩阵。
[0012] 步骤1,对于彩色分量训练样本集Xi(i=R,G,B),为了选择最优的核函数 设计核函数选择准则如下:
[0013]
[0014] 其中, 和 分别表示Xi的类内相关性和类间相关性,定义如下:
[0015]
[0016]和 分别表示Xi中第p类的第r个样本和第t个样本, 表示Xi中第q类的第t个样本,和 分别表示核映射后的样本 和
和 分别表示中心化后的样本 和
是一个块对角矩阵, 是一个所有元素值都为1的方阵,tr(·)表示方阵的迹,rank(Ki)表示矩阵Ki的秩。
[0017] 步骤2,使用步骤1选择的三个最优核函数 分别对三个彩色分量训练样本集XR,XG,XB进行核映射,得到核矩阵KR,KG,KB,
[0018] 步骤3,定义核空间中i和j彩色分量样本特征集之间的典型相关性Cij如下:
[0019]
[0020] 并定义目标函数如下:
[0021]
[0022] 通过轮流更新线性表示系数vR,vG,vB和多核组合系数ωR,ωG,ωB进行迭代求解,得到这两组系数的解,并通过 得到uR,uG,uB。
[0023] 步骤4,彩色人脸图像训练样本集的最终特征表示如下:
[0024]
[0025] 待识别样本的最终特征表示如下:
[0026]
[0027] 计算 到 中每一个样本的余弦距离,将待识别样本y归到距离最小的那个训练样本所在的类。
[0028] 有益效果
[0029] 本发明采用以上技术方案与现有技术相比,具有以下有益效果:
[0030] 本发明提供基于典型相关多核学习的彩色人脸识别方法,将多核学习技术应用于彩色人脸图像的典型相关分析,对三个彩色分量分别使用三个不同的核映射,再通过典型相关多核学习对三个彩色分量分别进行非线性特征提取。对于提取到的特征,使用基于余弦距离的最近邻分类器进行分类和识别。本发明识别效果更高,通过典型相关多核学习,彩色人脸特征的分类能力得到了明显增强。

实施方案

[0033] 以下结合附图具体说明本发明的技术方案。
[0034] 实验验证选用Face Recognition Grand Challenge(FRGC)version 2Experiment 4彩色人脸数据库(P.J.Phillips,P.J.Flynn,T.Scruggs,K.Bowyer,J.Chang,K.Hoffman,J.Marques,J.Min,and W.Worek,“Overview of the Face Recognition Grand Challenge”,IEEE Conf.Computer Vision and Pattern Recognition,vol.1,pp.947-
954,2005)。该数据库规模较大,包含了training、target、query三个子库,training子库包含222个人的12776张图片,target子库包含466个人的16028张图片,query子库包含466个人的8014张图片。实验选用了training子库的222个人,每个人36幅图像。所有选中的原始图像都进行了校正(使两眼处于水平位置)、缩放和裁剪,每个图像样本只保留60×60大小的人脸及附近区域。处理后的人脸示例图片见图1。
[0035] 在实验数据库中,每个类别随机选择8个彩色人脸图像样本作为训练样本,其余样本作为待识别样本,进行20次随机测试。对于每个彩色分量样本集,按照公式(1)的核函数选择准则从以下六种常用的核函数中挑选最优的核函数:
[0036] (1)Linear Kernel:k(x,y)=xTy;
[0037] (2)Polynomial Kernel:k(x,y)=(axTy+b)p,其中,a>0,b>0,p是核参数,p取值为自然数;
[0038] (3)Gaussian Kernel:k(x,y)=exp(-||x-y||2/σ),其中σ>0是核参数;
[0039] (4)Cauchy Kernel: 其中σ>0是核参数;
[0040] (5)Inverse Multi-quadric Kernel: 其中,c≥0是核参数;
[0041] (6)Generalized T-Student Kernel: 其中p≥0是核参数。
[0042] 经过核函数选择,最终R、G、B三个彩色分量都使用Polynomial Kernel,其中,R和G分量的三个参数都是a=10-9,b=0.1,p=1,B分量的三个参数分别是a=10-8,b=0.1,p=1。
[0043] 图2和表1显示了CICCA方法和基于典型相关多核学习的彩色人脸识别方法(即图中的CCMKL方法)20次随机测试的识别效果。在图2中,横坐标是随机测试的序号,纵坐标为识别率(=正确识别的待识别样本个数/待识别样本总数)。与CICCA方法相比,基于典型相关多核学习的彩色人脸识别方法的识别率明显更高一些,这说明多核学习使特征的分类能力得到了增强。
[0044] 表1 20次随机测试的平均识别率和标准差
[0045]方法名称 识别率(均值和标准差,%)
CICCA 79.55±1.87
CCMKL 82.32±1.76

附图说明

[0031] 图1为人脸示例图片;
[0032] 图2为20次随机测试识别率波动图。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号