基于视频的人脸识别研究进展

基于视频的人脸识别研究进展

第３２卷第５期

２００９年５月

计算机学报

ｖ０１．３２Ｎｏ．５

ＣＨＩＮＥＳＥＪＯＵＲＮＡＬ０ＦＣＯＭＰＵＴＥＲＳＭａｙ２００９

基于视频的人脸识别研究进展

严

严”’２’

章毓晋”矗’

１０００８４）

１’（清华大学信息科学与技术国家实验室北京

２’（清华大学电子工程系北京１０００８４）

擅耍近年来基于视频的人脸识别已成为人脸识别领域最为活跃的研究方向之一．如何充分利用视频中人脸的时间和空间信息克服视频中人脸分辨率低，尺度变化范围大，光照、姿态变化比较剧烈以及时常发生遮挡等困难是研究的重点．文中对近期（主要近５年）基于视频的人脸识别研究进行了详细的介绍和讨论。在对相关方法分类的基础上。分析了各类方法中典型技术的优缺点，并概况介绍了常用的视频人脸数据库和实验结果，最后展望了基于视频人脸识别未来的发展方向和趋势．

关键词模式识别；人脸识别；基于视频的人脸识别；进展

中图法分类号ＴＰ３９１

ＤＯＩ号：１０．３７２４／ｓＰ．Ｊ．１０１６．２００９．００８７８

Ｓｔａｔｅ。。ｏｆ－ｔｈｅ －Ａｒｔ

ｏｎ

Ｖｉｄｅｏ－ＢａｓｅｄＦａｃｅＲｅｃｏｇｎｉｔｉｏｎ

ＺＨＡＮＧＹｕ－Ｊｉｎｌ’，２’

Ｔｅｃｈｎｏｌｏｇｙ，Ｔｓｉｎｇｈ∽Ｕｎｉｖｅｒｓｉｔｙ。ＢｅＯｉｎｇ

１０００８４）

１０００８４）

ＹＡＮＹａｎｌ’’２’

１’（Ｎａｔｉｏｎａｌ

Ｌａｂｏｒａｔｏｒｙ

１＂ｏｒＩｎｆｏｒｍａｔｉｏｎ

Ｓｃｉｅｎｃｅａｎｄ

”（Ｄｅｐａｒｔｒｔ＂ｎｔ

ｏｆＥｌｅｃｔｒｏｎｉｃＥｎｇｉｎｅｅｒｉｎｇ，ＴｓｉｎｇｈｕａＵｎｉｖｅｒｓｉｔｙ，Ｂｅｉｊｉｎｇ

Ａｂｓｔｒａｃｔ

Ｒｅｃｅｎｔｌｙ，ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎｈａｓｂｅｃｏｍｅ

ｔｏ

ｏｎｅ

ｏｆｔｈｅｈｏｔｔｅｓｔｔｏｐｉｃｓｉｎｔｈｅｄｏ—

ｍａｉｎｏｆｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ．Ｈｏｗｆｕｌｌｙｕｔｉｌｉｚｅｂｏｔｈｓｐａｔｉａｌａｎｄｔｅｍｐｏｒａｌｉｎｆｏｒｍａｔｉｏｎｉｎｖｉｄｅｏｔｏ

ａｓ

ｏｖｅｒｃｏｍｅｔｈｅｄｉｆｆｉｃｕｌｔｉｅｓｅｘｉｓｔｉｎｇｉｎｔｈｅｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ，ｓｕｃｈ

ｌｏｗｒｅｓｏｌｕｔｉｏｎｏｆ

ａｓｅｘ－

ｆａｃｅｉｍａｇｅｓｉｎｖｉｄｅｏ，ｌａｒｇｅｖａｒｉａｔｉｏｎｓｗｅｌｌ

ｆ１８

ｏｆ’ｆａｃｅｓｃａｌｅ，ｒａｄｉｃａｌｃｈａｎｇｅｓｏｆｉｌｌｕｍｉｎａｔｉｏｎａｎｄｐｏｓｅ

ｏｃｃａｓｉｏｎａｌｌｙｏｃｃｌｕｓｉｏｎｏｆｄｉｆｆｅｒｅｎｔｐａｒｔｓｏｆｆａｃｅｓ。ｉｓｔｈｅｆｏｃｕｓ．Ｔｈｅｐａｐｅｒｒｅｖｉｅｗｓｍｏｓｔ

ｉｓｔｉｎｇｔｙｐｉｃａｌｍｅｔｈｏｄｓｆｏｒｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ（ｅｓｐｅｃｉａｌｌｙｆｏｒｔｈｅｌａｓｔ５ｙｅａｒｓ）ａｎｄａｎａｌｙ—

ｓｅｓ

ｔｈｅｉｒｒｅｓｐｅｃｔｉｖｅｐｒｏｓａｎｄｃｏｎｓ．Ｔｗｏｃｏｍｍｏｎｌｙｕｓｅｄｖｉｄｅｏｆａｃｅｄａｔａｂａｓｅｓａｎｄｓｏｍｅｅｘｐｅｒｉｍｅｎ—

ａｒｅ

ｔａｌｒｅｓｕｌｔｓｗｏｒｋｓ

ａｒｅ

ｇｉｖｅｎ．Ｔｈｅｐｒｏｓｐｅｃｔｓｆｏｒｆｕｔｕｒｅｄｅｖｅｌｏｐｍｅｎｔａｎｄｓｕｇｇｅｓｔｉｏｎｓｆｏｒｆｕｒｔｈｅｒｒｅｓｅａｒｃｈｆｏｒｗａｒｄｉｎｔｈｅｅｎｄ．

ｐｕｔ

Ｋｅｙｗｏｒｄｓ

ｐａｔｔｅｒｎ

ｒｅｃｏｇｎｉｔｉｏｎ；ｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ；ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ；ｐｒｏｇｒｅｓｓ

个领域也有着广泛的应用．

引言

经过多年研究，人脸识别技术已取得了长足的进步和发展．随着视频监控、信息安全、访问控制等应用领域的发展需求，基于视频的人脸识别已成为人脸识别领域最为活跃的研究方向之一［１１］．如何充分利用视频中人脸的时间和空间信息克服视频中人脸分辨率低，尺度变化范围大，光照、姿态变化剧烈以及时常

人脸识别具有非常重大的理论意义和应用价值．人脸识别的研究对于图像处理、模式识别、计算机视觉、计算机图形学等领域的发展具有重大的推动作用，同时在生物特征认证、视频监控、安全等各

收稿日期：２００６－０９－０３ｌ最终修改稿收到日期。２００９—０４－０６．本课题得到国家自然科学基金（６０８７２０８４）和教育部高等学校博士学科点专项科研基金（ｓＲＦＤＰ一２００６０００３１０２）资助．严严，男，１９８４年生，博士，主要研究领域为人脸识别等．章靛青（通信作者），男，１９５４年生，博士，教授，博士生导师，主要研究领域为图像工程（图像处理，图像分析、图像理解及其技术应用）．Ｅ－ｍａｉｌ：ｚｈａｎｇｙｊ（鱼ｅｅ．ｔｓｉｎｇｈｕａ．ｅｄｕ．ｃ仉

万方数据　

基于视频的人脸识别研究进展

５期

严严等：基于视频的人脸识别研究进展８７９

发生遮挡等困难是研究的重点．国内外众多的大学和研究机构，如美国的ＭＩＴｃ５｜、ＣＭＵｃ”］、ＵＩＵＣｔ¨］、Ｍａｒｙｌａｎｄ大学Ｄｏ－１２］、英国的剑桥大学［１３－１５］、日本的Ｔｏｓｈｉｂａ公司［１¨８］和国内的中国科学院自动化所［１９屯１］都对基于视频的人脸识别进行了广泛而深入的研究．鉴于目前现有的人脸识别国内外综述文献主要针对基于静止图像的人脸识别研究［１≈］，因此有必要对现阶段基于视频的人脸识别研究情况进行分析和总结，期望能够更好地指导未来的研究工作．

２人脸识别概述

一个自动的基于视频的人脸识别系统包括了人脸检测模块、人脸跟踪模块、人脸特征提取模块和人脸识别模块［２２１．关于人脸检测、人脸跟踪和人脸特征提取的研究进展可以参考综述文献［１—３］．本文重点介绍基于视频的人脸识别研究进展．

人脸识别问题可以定义成：输入（查询）场景中的静止图像或者视频，使用人脸数据库识别或验证场景中的一个人或者多个人［１≈］．基于静止图像的人脸识别通常是指输入（查询）一幅静止的图像，使用人脸数据库进行识别或验证图像中的人脸．而基于视频的人脸识别是指输入（查询）一段视频，使用人脸数据库进行识别或验证视频中的人脸．如不考虑视频的时间连续信息，问题也可以变成采用多幅图像（时间上不一定连续）作为输入（查询）进行识别或验证．因此按照上面的分析，根据输入（查询）和人脸数据库的不同，人脸识别可以分成如表１所示的４种情况．

表ｌ输入（查询）和数据库不同情况下的人脸识别

表中“图像一图像（多幅图像）”人脸识别就是传统的基于静止图像的人脸识别［１｛］．而“图像一视频”人脸识别是指利用人脸图像作为输入采用视频人脸数据库进行识别或验证．通常的应用领域是基于人脸的视频信息检索．本文重点介绍的基于视频的人脸识别主要是指后面两种情况，即“视频一图像（多幅图像）”人脸识别和“视频一视频”人脸识别．“视频一图像（多幅图像）”人脸识别是指输入（查询）一段人脸视频，利用静止图像人脸数据库进行识别或验证．“视频一视频”人脸识别是指输入和数据库都利用视频进行人脸识别或验证．相对于前面３种情况，

万　

方数据“视频一视频”人脸识别可以利用的信息最多．视频中可以利用的信息包括‘“：多幅同一个人的人脸图像，视频中人脸在时间和空间上的连续性，利用视频生成的三维（３Ｄ）人脸模型等．需要强调的是本文这样分类的目的是为了能够对整个人脸识别领域的研究现状有一个宏观上的认识，并区分不同情况下的人脸识别．事实上不同情况下人脸识别采用的技术可以是相同的，例如对所有人脸视频序列的处理是按照某种规则（如大小、姿态、清晰度等）提取一张人脸图像，则上面的情况都可以采用基于静止图像的人脸识别技术．

本文首先对现阶段基于视频的人脸识别研究现状进行了详细的分析和讨论，接着介绍了常用的视频人脸数据库和实验结果，最后展望了未来的发展方向．本文假设已经得到图像或者视频中需识别人脸的位置．对静止图像中人脸的定位可参见文献［２３－Ｚ４－］，对视频中人脸的定位和分割可参见文献Ｖｚ５３．

３基于视频的人脸识别

根据上一节的讨论，下面把基于视频的人脸识别分成“视频一图像（多幅图像）”人脸识别和“视频一视频”人脸识别两种情况分别给予综述．３．１“视频一图像（多幅图像）”人脸识别

“视频一图像（多幅图像）”人脸识别是指采用人脸视频作为输入（查询）利用静止图像人脸数据库进行识别或验证．由于现有的大部分人脸数据库都是静止图像人脸数据库，如何充分利用视频中的人脸信息更好地进行人脸识别是现阶段迫切需要解决的问题．

解决这类问题的传统做法［２¨８］可以分成两大类：一类方法对输入视频中的人脸进行跟踪，寻找满足一定规则（如大小、姿态、清晰度等）的人脸图像，然后利用基于静止图像的人脸识别方法．这类方法的

缺点是规则很难定义，并且没有最大限度地利用人脸视频中的时间和空间连续信息．另一类方法利用视频中的空间信息进行人脸识别．通过对输入视频中每一幅人脸或者若干幅人脸采用基于静止图像的人脸识别方法［１４］，利用各种联合规则［２９］（如多数投票或者概率／距离累加等方法）再进行最终的识别．这类方法的缺点是联合规则常有相当的随机性［４］．

近年来，一些研究者开始利用视频中人脸的时间和空间连续信息进行识别．文献［１０３讨论了在贝叶斯理论的框架下统一解决人脸识别和跟踪问题，采用时间序列模型刻画人脸的动态变化，把身份变

基于视频的人脸识别研究进展

８８０

计算机学报

量和运动矢量作为状态变量从而引进时间和空间的信息；利用序贯重要度采样（Ｓｅｑｕｅｎｔｉａｌ

Ｉｍｐｏｒｔａｎｃｅ

上述方法中都采用贝叶斯理论引进了时间信息。极大地提高了识别率．并且采用序贯重要度采样克服非高斯分布和非线性系统带来的难以估计概率密度的问题．但是估计概率密度需要大量的粒子，导致其计算量比较大．

３．２“视频一视频”人脸识别

“视频一视频”人脸识别是指输入和数据库中的人脸均是以视频的形式存在．大量的文献对如何同时利用输入和数据库中的人脸视频进行了深入的研究．现有文献中对视频中人脸信息的描述方式总结起来有下面几种：

（１）利用一幅代表性的图像得到的特征（矢量表示），如主成分分析（ＰＣＡ）降维后的矢量等；

（２）利用所有图像得到的特征（矩阵表示），如特征空间、示例（ｅｘｅｍｐｌａｒ）等；

（３）利用概率密度函数刻画视频中的人脸分布，如高斯模型等；

（４）利用动态模型刻画视频中人脸随时间的动态变化，如隐马尔可夫模型等；

（５）利用流形（ｍａｎｉｆｏｌｄ）刻画视频中的人脸分布，如分段线性ＰＣＡ子空间等．

上述各种描述方式（矢量、矩阵、概率密度、动态模型、流形）之间可能的度量如表２所示．

Ｓａｍｐｌｉｎｇ，ＳＩＳ）的方法有效估计出身份变量和运动矢量的联合后验概率分布，通过边缘化提取出身份变量的概率分布．实验结果表明了该算法的有效性．不过当姿态变化时识别率只有５７％．之所以出现姿态变化时识别率低的原因是对时间连续性的利用体现在人脸外观一致上，而随着光照或姿态的变化会导致外观的明显不同．因此文献［１１］进一步提出了自适应外观变化模型并且采用自适应运动模型更准确地处理姿态的变化，对运动模型中噪声的方差和采样算法中的粒子数根据计算得到外观模型的误差进行更新，采用鲁棒统计学（ｒｏｂｕｓｔｓｔａｔｉｓｔｉｃｓ）处理脸部遮挡问题．利用基于贝叶斯人脸识别［３０］方法的似然函数进行权重更新使得整个算法更加有效．

文献［３１—３２］通过对输入视频中人脸的脸部特

征或外观的跟踪进行人脸验证．基本思想是，如果是

正确的输入（对应数据库中要验证的人脸），则跟踪的轨迹基本一致；而如果是不正确的输入，则跟踪轨迹没有规律性．相应的数学模型就是考虑所得到的运动矢量分布，如果呈现尖峰（一致的运动参数）则认为是正确的人脸．如果没有呈现尖峰，而是类似均匀分布，则认为是错误的人脸．

表２描述方式之间的度量

表２中ｄ代表两个模型之间的距离或相似度，，（Ｘ），Ｍ（ｘ）代表概率／距离累加或多数投票，Ｄ（Ｘ）代表各帧后验概率．

下面按照对输入描述方式的不同，分成矢量、矩阵、概率、动态模型、流形５个小节分别给予介绍．

３．２．１矢量

基于视频的人脸验证方法，采用形状和归一化纹理的联合外观模型（Ａｃｔｉｖｅ

ＡｐｐｅａｒａｎｃｅＭｏｄｅｌ，ＡＡＭ）

来表示人脸，通过加入类别信息的改进线性鉴别分

析（ＬｉｎｅａｒＤｉｓｃｒｉｍｉｎａｎｔＡｎａｌｙｓｉｓ，ＬＤＡ）分离出身

份变量（ｉｄｅｎｔｉｔｙ）和其他变化因素（姿态、光照和表情）．采用卡尔曼滤波器（Ｋａｌｍａｎｆｉｌｔｅｒ）对身份变量进行跟踪得到的稳定值就是身份稳定估计量．人脸验证就可以通过对输入人脸视频进行跟踪得到的估计量和数据库得到的身份估计量进行比较看是否大于某个阈值来实现．与基于静止图像的人脸验证方法相比，采用基于视频的人脸验证能利用更多的信息，效果更好．算法采用ＡＳＭ（Ａｃｔｉｖｅ

ＳｈａｐｅＭｏｄｅｌ）

利用矢量作为输入描述方式的基本思想是利用视频得到一个反映输入人脸视频特性（如均值人脸图像、最好的正面图像等）的特征（矢量表示），和数据库中的人脸视频描述方式进行匹配．数据库中人脸视频的描述方式可以是矢量、矩阵、概率、动态模型、流形等．

文献［３３］对数据库中的每类人脸建立一个ＰＣＡ子空间，利用与各个人脸子空间的距离对输入视频中的所有人脸进行标注．文献［３４］介绍了一种

进行人脸定位可以避免误配准带来的影响．但是一旦定位不准，则对后继的参数跟踪会产生很大的误差，导致识别率下降．并且对于达到稳定估计值需要

万方数据　

基于视频的人脸识别研究进展

５期．

严严等：基于视频的人脸识别研究进展８８１

的视频长度无法计算和估计．另一个借助视觉约束的人脸跟踪和识别方法可见文献［３５］．

３．２．２矩

阵

采用矩阵作为输入描述方式进行人脸识别的算法可以分成两类，一类是利用得到的特征（矩阵表示）逐个与数据库中的人脸描述方式进行比较（相当于每次取出矩阵的一行或者一列），然后利用多数投票或者概率（距离）累加最大的方法进行识别．另一类是把得到的特征（矩阵表示）看成一个整体和数据库中的人脸描述方式进行比较．相对于前面一种方法，后者采用矩阵作为整体更能利用视频的空间连续信息．数据库中人脸视频的描述方式可以是矢量、矩阵、概率、动态模型、流形等．

文献［３６］采用总体ＰＣＡ方法进行降维，在低维空间中采用混合高斯模型（ＧａｕｓｓｉａｎＭｉｘｔｕｒｅＭｏｄｅｌ，ＧＭＭ）来表示数据库中每个人脸．通过计算输入视频中每一帧人脸的后验概率，采用多数投票和概率累加最大的方法得到最终结果。文献［３７］对数据库的每类人脸建立多个匹配模板，并根据视频中的动态的信息（如人脸姿态、运动模糊等）对多个模板进行自适应的融合．文献［１６］对输入的人脸序列和数据库中的人脸序列分别建立一个ＰＣＡ特征子空间，两个特征子空间之间的距离由它们之间的夹角确定．为了进一步去除光照、姿态、表情等的影响，把子空间重新投影到限制子空间（ｃｏｎｓｔｒａｉｎｔ

ｓｕｂｓｐａｃｅ）

中，限制子空间只包含对识别有用的成分（身份）［１７１．为了解决限制子空间中需要大量样本的问题，进一步利用整体学习（ｅｎｓｅｍｂｌｅｌｅａｒｎｉｎｇ）的方法训练出Ｍ个限制子空间，通过投影到这Ｍ个限制子空间的距离加权和作为人脸之间距离的度量［１８１．该类算法的主要缺点在于没有考虑每一类人脸的整体概率分布，没有利用每一类的均值和特征值，在投影到限制子空间时可能会产生一定的问题，并且参数的设定和空间维数都需要通过经验给出．

由于人脸在姿态、光照、表情变化时呈现非线性分布，文献［３８］在线性空间中通过核的方法映射到高维的非线性空间（核Ｈｉｌｂｅｒｔ空间），在高维空间中的夹角（核主成分夹角）作为矩阵的相似性度量，并且利用正定的核函数就可以和ＳＶＭ（Ｓｕｐｐｏｒｔ

Ｖｅｃｔｏｒ

Ｍａｃｈｉｎｅ）结合起来提高分类的性能．文献

［１９—２０］首先通过ＬＤＡ进行线性降维，然后对每个人的人脸视频通过矢量量化技术或者Ｋ均值聚类形成Ｋ个类别，每个类别用聚类中心和聚类的权重来表示．最后采用ＥＭＤ（ＥａｒｔｈＭｏｖｅｒ’ＳＤｉｓｔａｎｃｅ）

距离作为相似性度量进行人脸识别．

万　

方数据文献［３９］利用聚类的方法建立局部参数模型，对数据库中的每个人脸建立多个局部流形．首先对数据库中的每段人脸视频经过ＬＤＡ进行线性降维，通过采取ＩＳＯＭＡＰ（Ｉｓｏｍｅｔｒｉｃ

ｆｅａｔｕｒｅ

Ｍａｐ—

ｐｉｎｇ）［４阳提取各点的测地距离（ｇｅｏｄｅｓｉｃｄｉｓｔａｎｃｅ）作为人脸之间的距离，从而可以更准确地刻画各点在

流形空间中的位置关系，然后采用ＨＡＣ（Ｈｉｅｒａｒｅｈｉ—

ｃａｌＡｇｇｌｏｍｅｒａｔｉｖｅ

Ｃｌｕｓｔｅｒｉｎｇ）聚类方法得到Ｋ个

示例，对每一示例采用类似文献［４１］的方法对每个局部模型建立双子空间（ｄｕａｌｓｕｂｓｐａｃｅ）概率模型，使用概率测度作为相似性度量，采用多数投票进行识别．文献［６］对每段人脸视频建立一个特征空间并把视频中人脸的变化看成一个非平稳的随机过程（ＡＲ模型），采用逐步更新特征空间的方法并且引进了权重的概念，对新的样本权重大，对以前的样本权重小．该文中针对每个人脸建立两个特征空间，包括训练集中的特征空间和识别后不断更新建立的新的特征空间来解决过慢学习的问题．文献［４２—４３］利用数据库中的人脸视频得到三维模型生成查询人脸视频条件下的光照和姿态变化，然后逐一进行比对，采用距离累计最大的方法得到识别结果．３．２．３概率

采用概率作为输入描述形式的基本思想是把视频中人脸的动态变化看成是满足一定的概率分布的高维随机变量．一般对数据库中视频的描述方式也是概率方式，通过比较概率密度函数的相似性来度

量人脸之间相似性．

文献［１３］采用ＧＭＭ模型学习不同姿态和光照条件下的人脸分布，对输入人脸视频和数据库中的人脸视频都利用ＧＭＭ模型进行建模，采用Ｋ—Ｌ

散度（Ｋｕｌｌｂａｃｋ—Ｌｅｉｂｌｅｒｄｉｖｅｒｇｅｎｃｅ）作为人脸之间相

似性度量．文献［５］把人脸识别问题看成是一个假设检验问题，证明了如果人脸视频中每一帧之间是相互独立的，则得到的最优准则是Ｋ－Ｌ散度．假设每个人脸服从高斯分布，采用Ｋ－Ｌ散度作为相似性度量．但是由于假设是单高斯分布，因此无法刻画由于光照或者是姿态变化导致人脸呈现流形的情况，并且Ｋ—Ｌ散度本身是一种非对称的度量方式．文献［１４］采用基于核函数方法把低维空间映射到高维空间，这样就可以在高维空间中利用低维空间中的线性方法（如ＰＣＡ）来解决一般的复杂的非线性问题，采用

ＲＡＤ（Ｒｅｓｉｓｔｏｒ—Ａｖｅｒａｇｅ

Ｄｉｓｔａｎｃｅ）作为人脸相似性

度量．为了解决配准误差所带来的识别率下降的问题，利用了多幅图像和ＲＡＮＳＡＣ（Ｒａｎｄｏｍ

Ｓａｍｐｌｅ

Ｃｏｎｓｅｎｓｕｓ）算法来解决．另外文献［４４］利用了核的

基于视频的人脸识别研究进展

８８２

计算

机学报

方法，把原来的矢量空间映射到高维非线性空间

ＲＫＨＳ（ＲｅｐｒｏｄｕｃｉｎｇＫｅｒｎｅｌ

Ｈｉｌｂｅｒｔ

很好地处理人脸的大规模旋转时的识别和跟踪问题．文献［２１］首先对所有的人脸利用ＬＬＥ（Ｌｏｃａｌｌｙ

Ｌｉｎｅａｒ

Ｓｐａｃｅ）中计算

概率分布之间的距离．

３．２．４动态模型

Ｅｍｂｅｄｄｉｎｇ）降维后建立整体分段线性模型，

根据到各个分段子流形的距离采用贝叶斯推理的方法计算最大后验概率．在文献［４５］中作者通过实验结果指出，利用时空结构的ＨＭＭ［７３大于一定长度时要优于基于静止图像的多数投票方法，但是当视频的长度过短时则不一定．这说明时间长短对动态模型的识别率会有一定影响．

３．２．５流形

无论是矢量、矩阵和概率都没有利用时间连续的信息，所以可以自然地推广到多幅人脸图像（时间上不必连续）作为输入时的人脸识别问题．而动态模型则利用了人脸的时间和空间连续变化的信息，能够更好地刻画人脸的动态变化特性．数据库通常的描述方式可以是矩阵、动态模型、流形．

文献［１０３中采用３．１节中介绍的概率模型，通过自动选择人脸视频中的示例（在线Ｋ均值聚类），把人脸示例的索引也作为状态变量，采用ＳＩＳ的方法估计出联合概率密度分布，最后通过边缘化求出身份变量的分布进行人脸识别．文献Ｅ７３中对数据库中的每段人脸视频采用ＰＣＡ变换建立了特征子空间，在特征子空间中建立一个自适应隐马尔可夫模型

（ＨｉｄｄｅｎＭａｒｋｏｖ

人脸在不同的光照、姿态变化下会构成一个的低维空间的流形［３９’删．所以利用流形作为输入描述可以更好地描述人脸的分布．一般对数据库中的人脸采用同样的描述方法．比较输入和数据库中流形的相似性作为度量．

文献［４７—４９３使用流形来解决基于视频的人脸识别问题，首先建立了一个多视角动态人脸模型，包含了一个３Ｄ模型，一个和形状姿态无关的纹理模型，一个仿射变化模型．其基本思想是基于分析的合成，通过最小化损失函数，求解出模型的参数．在视频序列中该问题可以进一步简化，利用Ｋａｌｍａｎ滤波求解出形状和纹理．人脸纹理通过ＫＤＡ（Ｋｅｒｎｅｌ

Ｄｉｓｃｒｉｍｉｎａｎｔ

Ｍｏｄｅｌ，ＨＭＭ），识别阶段就可以计

算每个识别序列的后验概率作为相似性度量，并且当满足一定条件时对ＨＭＭ模型进行更新．文献［１２］把运动人脸建模成一个ＡＲＭＡ（Ａｕｔｏ－Ｒｅｇｒｅｓｓｉｖｅ

ａｎｄ

ＭｏｖｉｎｇＡｖｅｒａｇｅ）模型（用姿态作为状态量，采用外

观作为观测量），采用ＡＲＭＡ子空间之间的夹角作为相似性度量．

文献［８—９］和文献Ｅｌｏ］的想法类似，认为应该把跟踪和识别结合起来，减少跟踪的误配准对识别的影响．对不同姿态下的人脸构造一个低维分段线性流形．为了引进时间信息，采用贝叶斯推理的方法，建立了不同姿态之间的转移矩阵，该文的算法能够

Ａｎａｌｙｓｉｓ）降维后对单个人脸序列建立

一个分段的线性流形（特征矢量随着姿态的变化）．接着就可以通过比较轨迹的匹配程度进行人脸识别．但是要进行３Ｄ模型的估计需要大量的多视角图像，计算复杂度较大．

现有文献中的典型算法总结如表３所示．

表３典型的“视频一视频”人脸识别的方法

万方数据　

基于视频的人脸识别研究进展

５期严严等：基于视频的人脸识别研究进展

３．３小结

综上可以看出“视频一图像（多幅图像）”人脸识别和“视频一视频”人脸识别研究的主要问题包括：

（１）如何对高维的人脸图像降维；（２）如何对降维后的人脸序列进行描述；（３）如何刻画描述方式之间的度量；

人脸数据降维的目的是得到表达性特征（如主成分分析等）或鉴别性特征（如线性鉴别分析等）以降低高维人脸数据的计算复杂度和减弱噪声、表情、光照等因素的影响¨…．对各种常见线性和非线性的降维方法研究的介绍可参考文献Ｅ５Ｇ．

现阶段对降维后的人脸序列描述方式包括矢量、矩阵、概率、动态模型、流形等．其中采用概率和流形的方法需要大量反映人脸分布的样本才能更准确地刻画人脸的分布，达到较好的性能．利用动态模型能够很好地利用时间和空间的信息，但是方法相对比较复杂，计算量一般都比较大．而利用矢量作为输入描述方式的主要缺点是样本选取的随机性．矩阵方式最为简单，并且可以应用到时间上不连续的多幅图像情况，但如何更好地刻画矩阵之间的度量是一个值得研究的内容．

４常用的视频人脸数据库及

一些实验结果

目前基于视频的人脸识别常用的视频人脸数据库包括Ｍｏｂｏ（Ｍｏｔｉｏｎ

ｏｆ

ｂｏｄｙ）数据库［５２］和Ｈｏｎｄａ／

ＵＣＳＤ数据库阻９１．Ｍｏｂｏ数据库最初是ＣＭＵ为了

Ｈｕｍａｎ

ＩＤ计划进行步态识别而采集的数据库．整

个数据库包含２５个人在跑步机上以四种不同的方式行走的视频序列．行走的方式包括慢速行走、快速行走、斜面行走和拿球行走．正面角度拍摄的视频序列共９９段（一段丢失）．ＵＣＳＤ／Ｈｏｎｄａ数据库包含２０个人的共５２段视频．数据库中的人脸视频包含了大规模的２Ｄ（平面内）和３Ｄ（平面外）的头部旋转．另外还有ＤＸＭ２ＶＴＳ数据库［５引．

这些视频人脸数据库普遍的缺点是没有考虑到各种条件的变化．大部分都是姿态的变化，其他的如光照、表情的变化等考虑较少，并且数据库的人偏少（＜５０个人），无法进行大规模有效的实验来评价各种算法的优劣．

目前大部分的文献中采用的数据库以及训练，测试方法都不尽相同．但为了对目前典型方法的实验结果有一个直观的认识，表４汇集了在视频人脸数据库上一些典型方法的实验结果．

万　

方数据表４视频人脸数据库上典型方法的实验结果

５总结和展望

本文介绍了现阶段基于视频的人脸识别研究进展．在对人脸识别不同情况分类的基础上，重点介绍了现阶段基于视频的人脸识别的主要方法，分析和讨论了各种方法的优缺点，还介绍了常用的视频人脸数据库及一些典型方法的实验结果．

现阶段基于视频的人脸识别一般都是把人脸视频看成一个整体来克服分辨率低的问题【３５‘．对于光照或者姿态的单独变化可以通过矩阵、概率或者流形的方式部分解决［９’１引，但是需要不同条件下的大

量的训练样本．对于遮挡问题可以采用鲁棒统计学［１ｕ或者对脸部的分块处理口４］来解决．

随着研究的深入，基于视频的人脸识别需要进一步研究的工作包括：

（１）人脸特征的准确定位

本文假设已经得到了图像或者视频中人脸的位置，并且人脸的特征已经准确定位．但是在实际应用中，人脸视频的分辨率过低常会使得人脸的检测和准确的特征定位存在一定的困难．人脸的误配准也会严重影响人脸识别的结果．作为人脸识别的基础，准确和快速的人脸检测和特征定位方法是必不可

少的．

（２）人脸的超分辨率重建和模糊复原

视频序列中的人脸由于采集条件和运动的影响，人脸图像分辨率低且人脸模糊．需要研究人脸图像超分辨率技术［踟和图像复原技术‘５６］以得到清晰的人脸图像也是未来需要重点解决的问题．

（３）人脸的３Ｄ建模

现阶段基于二维的人脸识别方法可以在一定程

基于视频的人脸识别研究进展

８８４

计算

机学报２００９年

度上解决姿态或光照的变化问题．但是人脸是一个三维的物体，利用人脸的三维信息是解决姿态，光照变化问题的最本质方法．现阶段利用视频数据生成

Ｅ９］ＬｅｅＫＣ，ＨｏＪ，ＹａｎｇＭＨ，ＫｒｉｅｇｍａｎＤ．Ｖｉｓｕａｌｔｒａｃｋｉｎｇ

ａｎｄ呲ｏｇ眦１０“”１ｒｉｇ

ｐｒｏｂａｂｉｌｉｓｔｉｃａｐｐｅａｒａｎｃｅ

ｍ“蛔１ｄ３‘

！：Ｉｌ！：。‘Ｖｉ８ｉｏｎ“ｄ１”８。Ｕｎｄｅ鹅饱ｎｄ啦＇２００５’９９‘３’：

３Ｄ模型的计算复杂度很大㈨５７‘５９３，无法达到使用要

求．更好地降低三维人脸建模的复杂度和提高建模

Ｅ１０］ｚｈ。。ｓ，Ｋ。ｇ。，ｖ，ｃｈ。ｌｌ。ｐｐ。Ｒ．Ｐｒｏｂ。ｂ池ｔｉ。，。ｃｏｇ。ｉｔｉｏ。

“ｈ眦。。ｆａ。。。ｆ，。ｍ，ｉｄ。。．Ｃｏ。ｐ。ｔ。，Ｖｉ。ｉｏ。。ｎｄＩ。。ｇ。Ｕ。．

的精度是未来发展的一个重要方向．ｄｅｒｓｔａｎｄｉｎｇ。２００３，９１（１）；２１４．２４５

（４）视频人脸数据库和测试方法的标准化ＤＩ］ＺｈｏｕＳ，ＣｈｅｌｌａｐｐａＲ，ＭｏｇｈａｄｄａｍＢ．Ｖｉｓｕａｌｔｒａｃｋｉｎｇａｎｄ

与基于静止图像的人脸识别相比，基于视频的

人脸识别的最大问题是还没有一个包含各种条件变化的、统一的、大规模的视频人脸数据库和测试标准．许多文章采用的视频人脸数据库和测试方法都不尽相同，无法进行算法之间的比较．建立一个公共的、大规模的视频人脸数据库和标准的测试方法是该领域的一个首要任务．

（５）多模生物特征认证

现阶段基于视频的人脸识别算法主要是基于室内的环境条件．室外条件下的人脸图像光照、姿态等

的剧烈变化使人脸识别仍然面临着许多困难，融合Ｄａｒｒｅｌｌ多种生物特征提高识别的性能也将是未来研究的一ｄｅｎｓｉｔｙ个重点［６０－６Ｃ．

参考文献

Ｅ１］ＣｈｅｌｌａｐｐａＲ，ＷｉｌｓｏｎＣ，ＳｉｒｏｈｅｙＳ．Ｈｕｍａｎａｎｄｍａｃｈｉｎｅ

ｒｅｃ—

ｏｇｎｉｔｉｏｎｏｆｆａｃｅｓ：Ａｓｕｒｖｅｙ．ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩＥＥＥ，１９９５，８３（５）ｌ

７０５－７４０

［２３

Ｚｈａｏ

Ｗ，ＣｈｅｌｌａｐｐａＲ，ＲｏｓｅｎｆｅｌｄＡ，ＰｈｉｌｌｉｐｓＰＪ．Ｆａｃｅ

ｒｅｃ—

ｏｇｎｉｔｉｏｎ：Ａｌｉｔｅｒａｔｕｒｅｓｕｒｖｅｙ．ＡＣＭＣｏｍｐｕｔａｔｉｏｎ

Ｓｕｒｖｅｙ，

２００３，３５（４）ｌ

３９９－４５８

Ｅ３３ＬｉＳＺ．ＪａｉｎＡＫ．ＨａｎｄｂｏｏｋｏｆＦａｃｅＲｅｃｏｇｎｉｔｉｏｎ．Ｎｅｗ

Ｙｏｒｋ：Ｓｐｒｉｎｇｅｒ，２００５

［４］ＺｈｏｕＳ。ＣｈｅｌｌａｐｐａＲ．Ｂｅｙｏｎｄ

ａ

ｓｉｎｇｌｅｓｔｉｌｌｉｍａｇｅｌ

Ｆａｃｅ

ｒｅｃ—

ｏｇｎｉｔｉｏｎｆｒｏｍｍｕｌｔｉｐｌｅｓｔｉｌｌｉｍａｇｅｓａｎｄｖｉｄｅｏｓ／／ＺｈａｏＷ

ｅｔ

ａｌ

ｅｄｓ．ＦａｃｅＰｒｏｃｅｓｓｉｎｇｔ

ＡｄｖａｎｃｅｄＭｏｄｅｌｉｎｇ

ａｎｄＭｅｔｈｏｄｓ．

Ｎｅｗ

Ｙｏｒｋ：ＡｃａｄｅｍｉｃＰｒｅｓｓ，２００５

［５３ＳｈａｋｈｎａｒｏｖｉｃｈＧ，ＦｉｓｈｅｒＪＷ，ＤａｒｒｅｌｌＴ．Ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ

ｆｒｏｍｌｏｎｇ－ｔｅｒｍｏｂｓｅｒｖａｔｉｏｎｓ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＥｕｒｏｐｅａｎ

Ｃｏｎｆｅｒｅｎｃｅ

ｏｎ

Ｃｏｍｐｕｔｅｒ

Ｖｉｓｉｏｎ．Ｂａｉｌ。２００２：８５１－８６８

［６］“ｕＸＭ，ＣｈｅｎＴ，Ｔｈｏｒｎｔｏｎ

Ｓ

Ｍ．Ｅｉｇｅｎｓｐａｃｅｕｐｄａｔｉｎｇｆｏｒ

ｎｏｎ－ｓｔａｔｉｏｎａｒｙｐｒｏｃｅｓｓａｎｄｉｔｓ

ａｐｐｌｉｃａｔｉｏｎ

ｔｏ

ｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ．

ＰａｔｔｅｒｎＲｅｃｏｇｎｉｔｉｏｎ，２００３，３６（９）：１９４５—１９５９

［７３

ＬｉｕＸＭ，ＣｈｅｎＴ．Ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎｕｓｉｎｇ

ａｄａｐ—

ｆｉｖｅ

ｈｉｄｄｅｎＭａｒｋｏｖ

ｍｏｄｅｌｓ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩＥＥＥ

Ｉｎｔｅｒ－

ｎａｔｉｏｎａｌ

Ｃｏｎｆｅｒｅｎｃｅ

ｏｎ

ＣｏｍｐｕｔｅｒＶｉｓｉｏｎａｎｄ

Ｐａｔｔｅｒｎ

Ｒｅｃｏｇ－

ｎｉｔｉｏｎ．Ｍａｄｉｓｏｎ，２００３

ｌ

３４０－３４５［８］ＬｅｅＫ

Ｃ，Ｈｏ

Ｊ，ＹａｎｇＭＨ，ＫｒｉｅｇｍａｎＤ．Ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎｕｓｉｎｇ

ｐｒｏｂａｂｉｌｉｓｔｉｃ

ａｐｐｅａｒａｎｃｅ

ｍａｎｉｆｏｌｄｓ／／Ｐｒｏ—

ｃｅｅｄｉｎｇｓｏｆｔｈｅＩｎｔｅｒｎａｔｉｏｎａｌＩＥＥＥＣｏｎｆｅｒｅｎｃｅ

ｏｎ

Ｃｏｍｐｕｔｅｒ

Ｖｉｓｉｏｎ

ａｎｄ

ＰａｔｔｅｒｎＲｅｃｏｇｎｉｔｉｏｎ．Ｍａｄｉｓｏｎ，２００３

Ｉ

３１３—３２０

万　

方数据ｒｅ。ｏｇ“ｎｏｎ”１“ｇ

８ＰＰ”“””ａｄ似Ｐ“。ｍｏｄｅｌ３ｍＰａｎ”ｋ

ｎ卜

２８” １ＥＥＥ

Ｔｒａ“”。‘ｉｏｎ８

ｏｎ

１ｍ８９。Ｐｍ。”１ｎｇ，２００４，１３

Ｅ１２３

Ａｇｇ。。。ｌＧ，ｃｈ。。ｄｈ。，ｙＡ

Ｋ

Ｒ，ｃｈ。１１。ｐｐ。Ｒ．Ａ。ｙ。ｔ。。

ｉｄｅｎｔｉｆｉ。。ｔｉ。。。ｐｐ。。。ｈｆｏ，，ｉｄｃｏ－ｂ。。。ｄｆ。。。，。ｃｏｇ。ｉｔｉｏ。／／Ｐｒｏ一

ｃｅｅｄｉｎｇｓ

ｏｆｔｈｅＩＥＥＥＩｎｔｅｒｎａｔｉｏｎａｌＣｏｎｆｅｒｅｎｃｅ

ｏｎ

Ｐａｔｔｅｒｎ

Ｒｅｃｏｇｎｉｔｉｏｎ．Ｃａｍｂｒｉｄｇｅ，２００４；２３—２６

［１３］Ａｒａｎｄｊｅｌｏｖｉｅ

Ｏ，ｃｉｐｏｌｌａＲ Ｆ８ｃｅ

ｒｅｃｏｇ“胁“ｆｒｏｍｆａｃｅ

ｍｏｔｉｏｎ

ｍａ“蛔１ｄ８

７Ｓｌｎｇｍｕ８蚀。ｒ．ｎｅｌ”５１瓢ｏｒ．＝８”ｒａｇｅ．ｄ．ｉ５协”“／．Ｐ．ｒｏ＋

ｔ。，Ｒ。：ｇ。ｉｔｉ。。。。ｒｋｓｈ。ｐ．ｗａ。ｈｉ。ｇｔｏ。矗ｃ，２００４：８８＿９３

［１４］Ａｒａｎｄｊ。１。，记Ｏ，Ｓｈ。ｋｈ。。。ｖｉ。ｈＧ，Ｆｉ。ｈ。ｒＧ，Ｃｉｐ０１１。Ｒ，

Ｔ．Ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ

ｗｉｔｈｉｍａｇｅ

ｓｅｔｓ

ｕｓｉｎｇ

ｍａｎｉｆｏｌｄ

ｄｉｖｅｒｇｅｎｃｅ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩＥＥＥＣｏｎｆｅｒｅｎｃｅ

ｏｎ

Ｃｏｍｐ“‘ｅ‘Ｖｉｓｉｏｎ８“ｄＰａｔｔｅｌｌｌ

Ｒｅｃｏｇ“№“ Ｓａ“Ｄｉｅｇｏ，２００５

ｌ

５８１－５８８

口阳勰。ｅ。ｌｏ诎ｖｉ６Ｏ，．…Ｃｉｐｏｌ。ｌａ。Ｒ…．Ａ三一盖Ｈ慧ｊ１１＝＝

ＶｉｓｉｏｎａｎｄＩｍａｇｅＵｎｄｅｒｓｔａｎｄｉｎｇ，２００９ｔ１１３（１）：１１３—１２５

［１６］ＹａｍａｇｕｃｈｉＯ，ＦｕｋｕｉＫ，Ｍａｅｄａ

Ｋ．Ｆａｃｅｒｅｃｏｇｎｉｔｉｏｎｕｓｉｎｇ

ｔｅｍｐｏｒａｌｉｍａｇｅｓｅｑｕｅｎｃｅ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩＥＥＥＩｎｔｅｒｎａ—ｔｉｏｎａｌ

Ｃｏｎｆｅｒｅｎｃｅ

ｏｎ

ＡｕｔｏｍａｔｉｃＦａｃｅａｎｄＧｅｓｔｕｒｅＲｅｃｏｇｎｉ—

ｔｉｏｎ．Ｎａｒａ，１９９８：３１８－３２３

［１７］ＦｕｋｕｉＫ，ＹａｍａｇｕｃｈｉＯ．Ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎｕｓｉｎｇ

ｍｕｌｔｉ—ｖｉｅｗ—

ｐｏｉｎｔｐａｔｔｅｒｎｓｆｏｒｒｏｂｏｔｖｉｓｉｏｎ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩｎｔｅｒｎａ—

ｔｉｏｎａｌ

ＳｙｍｐｏｓｉｕｍｏｆＲｏｂｏｔｉｃｓＲｅｓｅａｒｃｈ．Ｓｉｅｎａ，Ｉｔａｌｙ，２００３：

１９２—２０１

［１８］ＮｉｓｈｉｙａｍａＭ，ＹａｍａｇｕｃｈｉＯ，ＦｕｋｕｉＫ．ＦａｃｅＲｅｃｏｇｎｉｔｉｏｎ

ｗｉｔｈｔｈｅｍｕｌｔｉｐｌｅ

ｃｏｎｓｔｒａｉｎｅｄｍｕｔｕａｌｓｕｂｓｐａｃｅｍｅｔｈｏｄ／／Ｐｒｏ

ｃｅｅｄｉｎｇｓｏｆｔｈｅ５ｔｈＩｎｔｅｒｎａｔｉｏｎａｌＣｏｎｆｅｒｅｎｃｅ

ｏｎ

Ａｕｄｉｏ－ａｎｄ

Ｖｉｄｅｏ－ＢａｓｅｄＢｉｏｍｅｔｒｉｃ

Ｐｅｒｓｏｎ

Ａｕｔｈｅｎｔｉｃａｔｉｏｎ．ＮｅｗＹｏｒｋ，

２００５ｌ

７１－８０

Ｄ９］ＬｉＪＷ，ＷａｎｇＹＨ，ＴａｎＴＮ．Ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ

ｕｓｉｎｇ

ａ

ｍｅｔｒｉｃｏｆ

ａｖｅｒａｇｅＥｕｃｌｉｄｅａｎ

ｄｉｓｔａｎｃｅ／／Ｐｒｏｃｅｅｄｉｎｇｓｏｆ

ｔｈｅ５ｔｈＣｈｉｎｅｓｅ

Ｃｏｎｆｅｒｅｎｃｅ

ｏｎ

ＢｉｏｍｅｔｒｉｃＲｅｃｏｇｎｉｔｉｏｎ．Ｇｕａｎ‘

ｇｚｈｏｕ，Ｃｈｉｎａ，２００４：２２４—２３２

［２０］ＬｉＪＷ，ＷａｎｇＹＨ，ＴａｎＴＮ．Ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ

ｕｓｉｎｇ

ｅａｒｔｈｍｏｖｅｒ’ｓ

ｄｉｓｔａｎｃｅ／／ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＩｎｔｅｒｎａ—

ｔｉｏｎａｌＣｏｎｆｅｒｅｎｃｅ

ｏｎ

Ａｕｄｉｏ－ａｎｄ

Ｖｉｄｅｏ－ｂａｓｅｄｐｅｒｓｏｎＡｕｔｈｅｎ－

ｔｉｃａｔｉｏｎ．ＮｅｗＹｏｒｋ，２００５：２２９—２３９

［２１］ＦａｎＷ，ＷａｎｇＹ

Ｈ，ＴａｎＴ

Ｎ．Ｖｉｄｅｏ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ

ｕｓｉｎｇＢａｙｅｓｉａｎ

ｉｎｆｅｒｅｎｃｅ

ｍｏｄｅｌ／／Ｐｒｏｃｅｅｄｉｎｇｓｏｆ

ｔｈｅＩｎｔｅｒｎａ－

ｔｉｏｎａｌ

ＣＯｎｆｅｒｅｎｃｅｏｎ

Ａｕｄｉｏ－ａｎｄＶｉｄｅｏ－ｂａｓｅｄＰｅｒｓｏｎＡｕｔｈｅｎ—

ｔｉｃａｔｉｏｎ．Ｎｅｗ

Ｙｏｒｋ．２００５：１２２—１３０

基于视频的人脸识别研究进展

［２５］ｓｒｉｋａｎｔａｓＷａｍｙ

Ｒ，ＳＢ砌ｅｌ

Ｒ

ＤＳ．Ａｎｏｖｅｌｆａｃｅｓｅｇｍｅｎｔａｔｉｏｎ

ａ．１９０ｒ；ｔｈｉｎ

ｎｏｎ ＥＵＲＡＳＩＰ

ｆｒｏｒｌｌ“…ｅｑｕｅ。ｎｃｅｆｏｒ

Ｊｏｕｒｎａｌ“Ａｄ””铭ｍ甄ｇｎａｌＰ研”５ｉ嘶

ｒｅ—ａｌ－ｔｉｍｅ芝ｆａｃｅ掣一哪，黧ｏｎ２００７，２００７：卜６

Ｅ２６３ＷｅｃｈｓｌｅｒＨ，ＫａｋｋａｄＶ，ＨｕａｎｇＪ，Ｇｕｔｔａｓ Ｃｈｅｎｖ．Ａｕｔｏ－

ｍａｔｉｃ“ｄ矾ａ８ｅｄ

ｐｅ。ｓｏｎ

ａｕｔｈ锄ｔｉｃａｔｉ。ｎ

ｕ８ｉｎｇ

ｔｈｅ

ＲＢＦｎｅｔ．

啪ｒｋ／／Ｐ‘。”ｅｄｉ“９３。ｆ

２ｈ。Ｉ“‘８“８‘ｉ。ｎａｌＣｏ“ｆ。‘。“。。。“Ａ“ｄｂ

［３１］

ＬｉＢ。ｃｈｅＩＩａｐｐａＲ．Ｆａｃｅｖｅｒｉｆｔｃａｔｉ。ｎｔｈｒｏｕｇｈｔｒａｃｋｉＩｌｇｆａｄａＩ

ｆｅａｔｕｒｅｓ．ＪｏｕｍａｌｏｆｔｈｅＯｐｔｉｃａｌＳｃ．ｃｉｅｔｙｏｆＡｍｅｒｉ∞Ａ，８００１，

［３２］

Ｌｉ

Ｂ ｃｈ。ｌｌａｐｐａ

Ｒ

Ａ

ｇｅｎｅｒｉｃ

ａｐｐｒｏａ。ｈ。。ｓ酬‘８ｎｅｏ惦

ｔｒａｃｋｉｎｇａｎｄ

ＶｅＴｉｆｉｃａ‰ｉｎ“ｄｅｏ．ＩＥＥＥＴ‘ａｎｓａｃｔｉｏｎ５

ｏｎ

Ｉｍ．

ａｇ。Ｐ‘ｏｃｅ３ｓｉｎｇ＇２００２＇１１（５）：５３０一５５４

万　

方数据２ｉ。ｎ／／ＰｒｏｃｅｅｄｉＩｌｇｓ。ｆ‘ｈ。ＩＥＥＥｃｏｎｆ。。。ｎｃｅ

ｏｎ

ｃｏｍｐｕ‘ｅ‘Ｖｉ

～ａｎｃｅａＩｌｄｍＰａｔ则ｔｅｒｎｍｎｉｆｏｌｄ二ｈａｐｐｌｉｃａｔｉ：ｎＲｅＹｃ．ｏｇ…ｎｉｔｉｏｒＬＭｈａ。ｄｉｓｏ…ｎ，２００３。：。６誉‰一

‘‘

ｔｏｄｕａｌ＿ｓｕｂｓｐａｃｅ

‘

ｂａｓｅｄ五ｉ一

ｆｊｃａｔｊｏｎ／／ＰｒｏｃｅｅｄｊｎｇｓｏｆｔｈｅＩＥＥＥＣｏｎｆｅｒｅｎｃｅＯｒ／Ｃｏｍｐｕｔｅｒ

ｖｉｓｉｏｎａｎｄｐａｔｔｅｍＲｅｃｏｇＴｌｉｔｉ。ｌＬ

Ｎｅｗ

Ｙｏｒｋ，２００６：１３８４一

１３９０

［４０］ＴｃｎｅｎｂａｕｍＪＢ，Ｓｉｌｖａ

ｖ

Ｄ，ＬａｎｇｆｏｒｄＪＣ．Ａｇｌ。ｂａｌｇｅ。ｍｅｔ．

ｒｅ。。ｇ“１‘‘ｏｎ：Ａｎｅ】【ｐｅｒｉｍｅｎｔａｌａｍｌｙｓｉｓ／／Ｐｒｏｃｅｅｄｉｎ９５。ｆ。ｈｅ

６‘ｈＩＥＥＥ

Ｉｎ‘ｅｍａ‘ｉｏｎａｌ（二ｏｎｆ。ｒ８ｎｃｅｏｎ

Ａｕ‘ｏｍａｔｉｃＦａｃｅ

ａ“

ｂｙ

ｌｏｃａｌｌｙｌｉｎｅａｒ

ｅｍｂｅｄｄｉ嗨

Ｓｃｉ锄ｃｅ，２０００’２９０（５５００）：

２３２３～２３２６

［４７］“Ｙ，Ｇ＿ｏｎｇＳ．“ｄｅＩＩＨ．Ｍｏｄｅｌｉｎｇｆａｃ鹳ｄｙｎａｍｉｃａＵｙ

ａｃｆｏｓｓ

基于视频的人脸识别研究进展

８８６

计算

机学报

２００９年

［５１］ＹａｎＳＣ，ＸｕＤ，ＺｈａｎｇＢ，ＺｈａｎｇＨＪ．Ｇｒａｐｈｅｍｂｅｄｄｉｎｇａｎｄ

ｅｘｔｅｎｓｉｏｎｓ

ｚ

ＣｏｍｐｕｔｅｒＶｉｓｉｏｎａｎｄＩｍａｇｅＵｎｄｅｒｓｔａｎｄｉｎｇ，２００３，９１（１）；

１８８’。２１３

Ａｇｅｎｅｒａｌｆｒａｍｅｗｏｒｋｆｏｒｄｉｍｅｎｓｉｏｎａｌｉｔｙｒｅｄｕｃ。。Ｔｒａｎｓａｃｔｉｏｎｓ

ｏｎ

ｔｉｏｎ．ＩＥＥＥＰａｔｔｅｒｎ

ＡｎａｌｙｓｉｓａｎｄＭａｃｈｉｎｅ［５８］ＣｈｏｕｄｈｕｒｙＡ。ＣｌａｒｋｓｏｎＢ，ＪｅｂａｒａＴ，ＰｅｎｌａｎｄＡ．Ｍｕｌｔｉｍｏ—ｄａｌ

ｐｅｒｓｏｎｒｅｃｏｇｎｉｔｉｏｎｕｓｉｎｇ

Ｉｎｔｅｌｌｉｇｅｎｃｅ，２００７．２９（１）：４０ ５１

ｕｎｃｏｎｓｔｒａｉｎｅｄ

ｏｎ

ａｕｄｉｏａｎｄｖｉｄｅｏ／／Ｖｉｄｅｏ－ｂａｓｅｄ

［５２３

Ｇｒｏｓｓ

Ｒ，ＳｈｉＪ．ＴｈｅＣＭＵＭｏｔｉｏｎｏｆＢｏｄｙ（ＭｏＢｏ）ｄａｔａ—ＰｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅＣｏｎｆｅｒｅｎｃｅ

Ａｕｄｉｏ‘ａｎｄ

ｂａｓｅ．ＲｏｂｏｔｉｃｓＩｎｓｔｉｔｕｔｅ，ＣａｒｎｅｇｉｅＭｅｌｌｏｎＵｎｉｖｅｒｓｉｔｙｌ

Ｔｅｃｈ—ｎｉｃａｌＲｅｐｏｒｔＣＭＵ—ＲＩ—ＴＲ－０１－１８，２００１

［５３］ＴｅｆｅｒｉＤ，ＢｉｇｕｎＪ．Ｄａｍａｓｃｅｎｉｎｇ

ｖｉｄｅｏ

ｄａｔａｂａｓｅｓｆｏｒｅｖａｌｕａ一

ｔｉｏｎ

ｏｆｆａｃｅｔｒａｃｋｉｎｇａｎｄｒｅｃｏｇｎｉｔｉｏｎ－－ＴｈｅＤＸＭ２ＶＴＳｄａｔａ—ｂａｓｅ．ＰａｔｔｅｒｎＲｅｃｏｇｎｉｔｉｏｎＬｅｔｔｅｒｓ，２００７，２８（１５）ｌ２１４３—２１５６

［５４］ＺｈａｎｇＹ。Ｍａｒｔｉｎｅｚ

Ａ

Ｍ．Ａｗｅｉｇｈｔｅｄｐｒｏｂａｂｉｌｉｓｔｉｃａｐｐｒｏａｃｈ

ｔｏ

ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ

ｆｒｏｍｍｕｌｔｉｐｌｅｉｍａｇｅｓａｎｄｖｉｄｅｏｓｅｑｕｅｎｃｅｓ．

ＩｍａｇｅａｎｄＶｉｓｉｏｎＣｏｍｐｕｔｉｎｇ，２００６，２４（６）：６２６—６３８

［５５］Ａｌ—ＡｚｚｅｈＭ。ＥｌｅｙａｎＡ．ＤｅｍｉｒｅｌＨ．ＰＣＡ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉ—

ｔｉｏｎ

ｆｒｏｍ

ｖｉｄｅｏ

ｕｓｉｎｇ

ｓｕｐｅｒ－ｒｅｓｏｌｕｔｉｏｎ／／Ｐｒｏｃｅｅｄｉｎｇｓｏｆ

ｔｈｅ

２３ｒｄＩｎｔｅｒｎａｔｉｏｎａｌＳｙｍｐｏｓｉｕｍｏｎ

Ｃｏｍｐｕｔｅｒ

ａｎｄＩｎｆｏｒｍａｔｉｏｎ

Ｓｃｉｅｎｃｅｓ．Ｉｓｔａｎｂｕｌ，２００８：１－４

［５６］ＧｏｋｓｅｌＤ．Ｅｘｐｌｏｉｔｉｎｇｓｐａｃｅ—ｔｉｍｅ

ｓｔａｔｉｓｔｉｃｓ

ｏｆｖｉｄｅｏｓｆｏｒｆａｃｅ

ｈ１１ｕｃｉｎａｔｉｏｎ［Ｐｈ．Ｄ．ｄｉｓｓｅｒｔａｔｉｏｎ］．ＣａｒｎｅｇｉｅＭｅｌｌｏｎ

Ｕｎｉｖｅｒ一

ｓｉｔｙ。Ｐｉｔｔｓｂｕｒｇｈ，ＵＳＡ，２００７

［５７］ＣｈｏｗｄｈｕｒｙＡ，ＣｈｅｌｌａｐｐａＲ．Ｆａｃｅ

ｒｅｃｏｎｓｔｒｕｃｔｉｏｎ

ｆｒｏｍｍｏ－ｔｉｏｎａｌｎｏｃｕｌａｒｖｉｄｅｏ

ｕｓｉｎｇ

ｕｎｃｅｒｔａｉｎｔｙ

ａｎａｌｙｓｉｓａｎｄ

ａ

ｇｅｎｅｒｉｃ

ｍｏｄｅｌ．

ＹＡＮＹａｈ，ｂｏｍｉｎ１９８４，Ｐｈ．Ｄ．．

Ｈｉｓｍａｉｎｒｅｓｅａｒｃｈｉｎｔｅｒｅｓｔｓｆｏｃｕｓ

ｏｎ

ｐａｔ

ｔｅｒｎ

ｒｅｃｏｇｎｉｔｉｏｍＢａｃｋｇｒｏｕｎｄ

ＴｈｉｓｗｏｒｋｉｓｓｕｐｐｏｒｔｅｄｂｙｔｈｅＮａｔｉｏｎａｌＮａｔｕｒａｌＳｃｉｅｎｃｅ

ＦｏｕｎｄａｔｉｏｎｏｆＣｈｉｎａｕｎｄｅｒｇｒａｎｔＮｏ．６０８７２０８４ａｎｄｔｈｅＳｐｅ—ｃｉａｌｉｚｅｄＲｅｓｅａｒｃｈＦｕｎｄｆｏｒｔｈｅＤｏｃｔｏｒａｌＰｒｏｇｒａｍｏｆ

Ｈｉｇｈｅｒ

Ｅｄｕｃａｔｉｏｎｕｎｄｅｒ

ｇｒａｎｔ

Ｎｏ．２００６０００３１０２．Ｔｒａｄｉｔｉｏｎａｌｓｔｉｌｌｉｍａｇｅ－ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎｈａｓａｃｈｉｅｖｅｄ

ｇｒｅａｔ

ＳＵＣＣＰ嬉Ｓ

ｉｎ

ｃｏｎｓｔｒａｉｎｅｄｅｎｖｉｒｏｎｍｅｎｔｓ．Ｈｏｗｅｖｅｒ，ｏｎｃｅ

ｔｈｅ

ｃｏｎｄｉｔｉｏｎｓ，ｉｎｃｌｕｄｉｎｇ

ｉｌｌｕｍｉｎａｔｉｏｎ，ｐｏｓｅ，ｅｘｐｒｅｓｓｉｏｎ，

ａｇｅ，ｅｔｃ．，ｃｈａｎｇｅ

ｔＯＯ

ｍｕｃｈ，ｔｈｅｐｅｒｆｏｒｍａｎｃｅｄｅｃｌｉｎｅｓｄｒａ—ｍａｔｉｃａｌｌｙ．Ｔｈｅ

ｒｅｃｅｎｔ

ＦＲＶＴ２００２ｓｈｏｗｓｔｈａｔｔｈｅｒｅｃｏｇｎｉｔｉｏｎ

ｐｅｒｆｏｒｍａｎｃｅｏｆｆａｃｅｉｍａｇｅｓｃａｐｔｕｒｅｄｉｎ

ａｎ

ｏｕｔｄｏｏｒｅｎｖｉｒｏｎ—ｍｅｎｔａｎｄｄｉｆｆｅｒｅｎｔｄａｙｓ

ｉｓ

ｓｔｉｌｌ

ｎｏｔ

ｓａｔｉｓｆｙｉｎｇ．Ｃｕｒｒｅｎｔｓｔｉｌｌ

ｉｍａｇｅ—ｂａｓｅｄ

ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎａｌｇｏｒｉｔｈｍｓ

ａｒｅ

ｅｖｅｎ

ｆａｒａｗａｙ

ｆｒｏｍｔｈｅｃａｐａｂｉｌｉｔｙｏｆｈｕｍａｎｐｅｒｃｅｐｔｉｏｎｓｙｓｔｅｍ．Ｏｎｔｈｅｏｔｈ—

ｅｒ

ｈａｎｄ，ｐｓｙｃｈｏｌｏｇｙａｎｄｐｈｙｓｉｏｌｏｇｙｓｔｕｄｉｅｓｈａｖｅｓｈｏｗｎｔｈａｔ

ｍｏｔｉｏｎ

ｃａｎ

ｈｅｌｐｐｅｏｐｌｅｆｏｒｂｅｔｔｅｒｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ．万　

方数据ＢｉｏｍｅｔｒｉｃＰｅｒｓｏｎ

Ａｕｔｈｅｎｔｉｃａｔｉｏｎ．ＷａｓｈｉｎｇｔｏｎＤ．Ｃ，１９９９

ｌ

１７６—１８０

［５９］ＺｈａｎｇＺ

Ｙ，Ｌｉｕ

ｚＣ，Ａｄｌｅｒ

Ｄ，Ｃｏｈｅｎ

ＭＦ，ＨａｎｓｏｎＥ，Ｓｈａｎ

Ｙ．Ｒｏｂｕｓｔａｎｄｒａｐｉｄｇｅｎｅｒａｔｉｏｎｏｆａｎｉｍａｔｅｄｆａｃｅｓｆｒｏｍｖｉｄｅｏ

ｉｍａｇｅｓｌＡｍｏｄｅｌ—ｂａｓｅｄ

ｍｏｄｅｌｉｎｇ

ａｐｐｒｏａｃｈ．Ｉｎｔｅｒｎａｔｉｏｎａｌ

ＪｏｕｒｎａｌｏｆＣｏｍｐｕｔｅｒＶｉｓｉｏｎ，２００４，５８（２）Ｉ９３—１１９

［６０］ＺｈｏｕＸ，ＢｈａｎｕＢ．Ｉｎｔｅｇｒａｔｉｎｇｆａｃｅａｎｄ

ｇａｉｔ

ｆｏｒｈｕｍａｎ

ｒｅｃｏｇ—

ｎｉｔｉｏｎ

ａｔａ

ｄｉｓｔａｎｃｅｉｎｖｉｄｅｏ．ＩＥＥＥＴｒａｎｓａｃｔｉｏｎｓ

ｏｎ

Ｓｙｓｔｅｍｓ，

Ｍａｎａｎｄ

Ｃｙｂｅｒｎｅｔｉｃｓ，ＰａｒｔＢ，２００７，３７（５）：１１１９—１１３７

［６１］ＪｉｎｇＸＹ，ＹａｏＹ

Ｆ，ＺｈａｎｇＤ，ＹａｎｇＪＹ，ＬｉＭ．Ｆａｃｅａｎｄ

ｐａｌｍｐｒｉｎｔｐｉｘｅｌｌｅｖｅｌｆｕｓｉｏｎａｎｄｋｅｒｎｅｌ

ＤＣＶ－ＲＢＦ

ｃｌａｓｓｉｆｉｅｒ

ｆｏｒｓｍａｌｌｓａｍｐｌｅｂｉｏｍｅｔｒｉｃｒｅｃｏｇｎｉｔｉｏｎ．ＰａｔｔｅｒｎＲｅｃｏｇｎｉｔｉｏｎ，

２００７．４０（１１）：３２０９—３３２４

［６２］

ＹａｎＹ，ＺｈａｒｌｇＹＪ．Ｍｕｌｔｉｍｏｄａｌｂｉｏｍｅｔｒｉｃｓｆｕｓｉｏｎｕｓｉｎｇｃｏｔ－

ｒｅｌａｔｉｏｎｆｉｌｔｅｒｂａｎｋ／／Ｐｒｏｃｅｅｄｉｎｇｓｏｆｔｈｅ１９ｔｈＩＡＰＲＩｎｔｅｒｎａ一

Ｃｏｎｆｅｒｅｎｃｅ

ｏｎ

ＰａｔｔｅｒｎＲｅｃｏｇｎｉｔｉｏｎ．Ｔａｍｐａ，２００８，

ＭｏＢＴ７．３（卜４）

ＺＨＡＮＧＹｕ－Ｊｉｎ，ｂｏｒｎｉｎ

１９５４，Ｐｈ．Ｄ。，ｐｒｏｆｅｓｓｏｒ。

Ｐｈ．Ｄ．ｓｕｐｅｒｖｉｓｏｒ．Ｈｉｓｍａｉｎｒｅｓｅａｒｃｈｉｎｔｅｒｅｓｔｓｉｎｃｌｕｄｅｉｍａｇｅ

ｅｎｇｉｎｅｅｒｉｎｇ（ｉｍａｇｅｐｒｏｃｅｓｓｉｎｇ，ｉｍａｇｅ

ａｎａｌｙｓｉｓ，ｉｍａｇｅｕｎｄｅｒ－

ｓｔａｎｄｉｎｇａｎｄｔｅｃｈｎｉｑｕｅ

ａｐｐｌｉｃａｔｉｏｎ）．ｈｔｔｐ：／／ｗｗｗ．ｅｅ．ｔｓｉｎｇ－

ｈｕａ．ｅｄｕ．ｃｎ／～ｚｈａｎｇｙｕｊｉｎ／

Ｄｕｒｉｎｇ

ｔｈｅ

ｐａｓｔ

ｓｅｖｅｒａｌ

ｙｅａｒｓ，ｍａｎｙ

ｒｅｓｅａｒｃｈｅｆｆｏｒｔｓ

ｈａｖｅ

ｂｅｅｎ

ｃｏｎｃｅｎｔｒａｔｅｄｏｎ

ｖｉｄｅｏ－ｂａｓｅｄ

ｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ．

Ｃｏｍｐａｒｅｄｗｉｔｈｓｔｉｌｌｉｍａｇｅ—ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎ，ｔｒｕｅｖｉｄｅｏ－

ｂａｓｅｄｆａｃｅｒｅｃｏｇｎｉｔｉｏｎａｌｇｏｒｉｔｈｍｓｔｈａｔ

ｕｓｅ

ｂｏｔｈｓｐａｔｉａｌａｎｄ

ｔｅｍｐｏｒａｌｉｎｆｏｒｍａｔｉｏｎｓｔａｒｔｅｄｏｎｌｙａ

ｆｅｗ

ｙｅａｒｓ

ａｇｏ．Ｎｏｃｏｍ—

ｐｒｅｈｅｎｓｉｖｅ

ｓｕｒｖｅｙ

ｉｎｔｈｉｓｆｉｅｌｄｈａｓｂｅｅｎ

ｍａｄｅ，ａｎｄ

ａ

ｌｏｔｏｆｉｓ—ｓｕｅｓ

ｉｎｖｉｄｅｏ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎｓｔｉｌｌｈａｖｅ

ｎｏｔ

ｂｅｅｎａｄ—ｄｒｅｓｓｅｄｗｅｌｌ．Ｓｏｔｈｅ

ｃｏｎｔｅｎｔ

ｏｆｔｈｉｓｐａｐｅｒｇｉｖｅｓ

ａｎ

ｏｖｅｒｖｉｅｗ

ｏｆｔｈｅｍｏｓｔｅｘｉｓｔｉｎｇｍｅｔｈｏｄｓｉｎｔｈｅｆｉｅｌｄｏｆｖｉｄｅｏ－ｂａｓｅｄｆａｃｅ

ｒｅｃｏｇｎｉｔｉｏｎ．Ａｓｕｉｔａｂｌｅ

ｃｌａｓｓｉｆｉｃａｔｉｏｎ

ｆｏｒｄｉｆｆｅｒｅｎｔｍｅｔｈｏｄｓ

ｈａｓｂｅｅｎｍａｄｅ，ｔｈｅｒｅｓｐｅｃｔｉｖｅｐｒｏｓ

ａｎｄ

ｃｏｎｓ

ｏｆｔｙｐｉｃａｌｔｅｃｈ’

ｎｉｑｕｅｓｉｎｅａｃｈｍｅｔｈｏｄｇｒｏｕｐ

ａｒｅ

ａｎａｌｙｚｅｄ．Ｔｈｅｉｍｐｏｒｔａｎｔｉｓ—

ｓｕｅｓ

ｗｈｉｃｈｎｅｅｄｔｏ

ｂｅｓｏｌｖｅｄ，ｔｈｅｐｒｏｓｐｅｃｔｓｆｏｒｆｕｔｕｒｅｄｅｖｅｌ—

ｏｐｍｅｎｔａｎｄｓｏｍｅｓｕｇｇｅｓｔｉｏｎｓｆｏｒｆｕｒｔｈｅｒｒｅｓｅａｒｃｈｗｏｒｋｓａｒｅ

ｐｕｔｆｏｒｗａｒｄ

ｔｏ

ｍｅｅｔｔｈｅｇｏａｌｏｆｔｈｉｓ

ｐａｐｅｒ．

基于视频的人脸识别研究进展

基于视频的人脸识别研究进展

作者：作者单位：刊名：英文刊名：年，卷(期)：被引用次数：

严严， 章毓晋， YAN Yan， ZHANG Yu-Jin

清华大学信息科学与技术国家实验室,北京,100084;清华大学电子工程系,北京,100084计算机学报

CHINESE JOURNAL OF COMPUTERS2009,32(5)21次

参考文献(62条)

1.Chellappa R;Wilson C;Sirohey S Human and machine recognition of faces:A survey[外文期刊] 1995(5)2.Zhao W;Chellappa R;Rosenfeld A;Phillips P J Face recognition:A literature survey 2003(04)3.Li S Z;Jain A K Handbook of Face Recognition 2005

4.Zhou S;Chellappa R Beyond a single still image:Face recognition from multiple still images andvideos 2005

5.Shakhnarovich G;Fisher J W;Darrell T Face recognition from long-term observations 2002

6.Liu X M;Chen T;Thornton S M Eigenspace updating for non-stationary process and its application toface recognition[外文期刊] 2003(09)

7.Liu X M;Chen T Video-based face recognition using adaptive hidden Markov models 20038.Lee K C;Ho J;Yang M H;Kriegman D Video-based face recognition using probabilistic appearancemanifolds 2003

9.Lee K C;Ho J;Yang M H;Kriegman D Visual tracking and recognition using probabilistic appearancemanifolds 2005(03)

10.Zhou S;Krueger V;Chellappa R Probabilistic recognition of human faces from video[外文期刊]2003(01)

11.Zhou S;Chellappa R;Moghaddam B Visual tracking and recognition using appearance-adaptive modelsin particle filters 2004(11)

12.Aggarwal G;Chowdhury A K R;Chellappa R A system identification approach for video-based facerecognition 2004

13.Arandjelovi(c) O;Cipolla R Face recognition from face motion manifolds using robust kernelresistor-average distance 2004

14.Arandjelovi(c) O;Shakhnarovich G;Fisher G;Cipolla R,Darrell T Face recognition with image setsusing manifold density divergence 2005

15.Arandjelovi(c) O;Cipolla R A pose-wise linear illumination manifold model for face recognitionusing video 2009(01)

16.Yamaguchi O;Fukui K;Maeda K Face recognition using temporal image sequence 1998

17.Fukui K;Yamaguchi O Face recognition using multi-viewpoint patterns for robot vision 200318.Nishiyama M;Yamaguchi O;Fukui K Face Recognition with the multiple constrained mutual subspacemethod 2005

19.Li J W;Wang Y H;Tan T N Video-based face recognition using a metric of average Euclidean distance 2004

基于视频的人脸识别研究进展

20.Li J W;Wang Y H;Tan T N Video-based face recognition using earth mover's distance 200521.Fan W;Wang Y H;Tan T N Video-based face recognition using Bayesian inference model 200522.Yah Y;Zhang Y J State-of-the-art on video-based face recognition 200823.Jia H X;Zhang Y J Human detection in static images 2008

24.Liu X M;Zhang Y J;Tan H C A new Hausdorff distance based approach for face localization 2005(1-9)25.Srikantaswamy R;Samuel R D S A novel face segmentation algorithm from a video sequence for real-time face recognition 2007

26.Wechsler H;Kakkad V;Huang J;Gutta S,Chen V Automatic video based person authentication using theRBF network 1997

27.Steffens J;Elagin E;Neven H PersonSpotter:Fast and robust system for human detection,tracking andrecognition 1998

28.Mckenna S J;Gong S Non-intrusive person authentication for access control by visual tracking andface recognition 1997

29.KittlerJ;Hatef M;Duin R P W;Matas J On combining classifiers[外文期刊] 1998(03)

30.Moghaddam B;Pentland A Probabilistic visual learning for object representation[外文期刊] 1997(07)31.Li B;Chellappa R Face verification through tracking facial features[外文期刊] 2001(12)

32.Li B;Chellappa R A generic approach to simultaneous tracking and verification in video 2002(05)33.Torres L;Vila J Automatic face recognition for video indexing applications[外文期刊] 2002(03)34.Edwards G J;Taylor C J;Taylor T F Improving identification per formation by integrating evidencefrom sequences 1999

35.Kim M Y;Kumar S;Pavlovic V;Rowley H Face tracking and recognition with visual constraints inreal-world videos 2008

36.McKenna S;Gong S;Raja Y Face recognition in dynamic scenes 1997

37.Park U;Jain A K;Ross A Face recognition in video:Adaptive fusion of multiple matchers 200738.Wolf L;Shashna A Kernel principal angles for classification machines with applications to imagesequence interpretation 2003

39.Fan W;Yeung D Y Locally linear models on face appearance manifolds with application to dual-subspace based classification 2006

40.Tenenbaum J B;Silva V D;Langford J C A global geometric framework for nonlinear dimenaionaiityreduction[外文期刊] 2000(5500)

41.Moghaddam B;Jebara T;Pentland A Bayesian face recognition[外文期刊] 2000(11)

42.Xu Y;Roy-Chowdhury A;Patel K Pose and illumination invarient face recognition in video 200743.Xu Y L;Roy-Chowdhury A;Patel K Integrating illumination,motion,and shape models for robust facerecognition in video 2008

44.Zhou S;Chellappa R From sample similarity to ensemble similarity:Probabilistic distance measuresin reproducing kernel Hilbert space[外文期刊] 2006(06)

45.Hadid A;Pietik(a)inen M From still image to video-based face recognition:An experimental analysis 2004

基于视频的人脸识别研究进展

46.Rowels S T;Saul L K Nonlinear dimensionality reduction by locally linear embedding[外文期刊]2000(5500)

47.Li Y;Gong S;Lidell H Modeling faces dynamically across views and over time 200148.Li Y;Gong S;Lidell H Video-based online face recognition using identity surfaces 2001

49.Li Y;Gong S;Lidell H Constructing facial identity surfaces in a nonlinear discriminating space2001

50.Yan Y;Zhang Y J Discriminant projection embedding for face and palmprint recognition[外文期刊]2008(16-18)

51.Yan S C;Xu D;Zhang B;Zhang H J Graph embedding and extensions:A general framework fordimensiormlity reduction[外文期刊] 2007(01)

52.Gross R;Shi J The CMU Motion of Body (MoBo) database[Technical Report CMU-RI-TR-01-18] 200153.Teferi D;Bigun J Damascening video databases for evaluation of face tracking and recognition-TheDXM2VTS database[外文期刊] 2007(15)

54.Zhang Y;Martinez A M A weighted probabilistic approach to face recognition from multiple imagesand video sequences[外文期刊] 2008(06)

55.Al-Azzeh M;Eleyan A;Demirel H PCA-based face recognition from video using super-resolution 200856.Goksel D Exploiting space-time statistics of videos for face hallucination 2007

57.Chowdhury A;Chellappa R Face reconstruction from monocular video using uncertainty analysis and ageneric model[外文期刊] 2003(01)

58.Choudhury A;Clarkson B;Jebara T;Penland A Multimodal person recognition using unconstrained audioand video 1999

59.Zhang Z Y;Liu Z C;Adler D;Cohen M F,Hanson E,Shan Y Robust and rapid generation of animated facesfrom video images:A model-based modeling approach[外文期刊] 2004(02)

60.Zhou X;Bhanu B Integrating face and gait for human recognition at a distance in video[外文期刊]2007(05)

61.Jing X Y;Yao Y F;Zhang D;Yang J Y,Li M Face and palmprint pixel level fusion and kernel DCV-RBFclassifier for small sample biometric recognition[外文期刊] 2007(11)

62.Yah Y;Zhang Y J Multimodal biometrics fusion using correlation filter bank 2008

本文读者也读过(4条)

1. 梁路宏.艾海舟.徐光档.张钹 人脸检测研究综述[期刊论文]-计算机学报2002,25(5)

2. 王跃明.潘纲.吴朝晖.Wang Yueming.Pan Gang.Wu Zhaohui 三维人脸识别研究综述[期刊论文]-计算机辅助设计与图形学学报2008,20(7)

3. 苏煜.山世光.陈熙霖.高文.SU Yu.SHAN Shi-Guang.CHEN Xi-Lin.GAO Wen 基于全局和局部特征集成的人脸识别[期刊论文]-软件学报2010,21(8)

4. 张旭.曹健.刘玉树 基于二维非参数化判别分析的人脸识别[期刊论文]-北京理工大学学报2009,29(9)

引证文献(21条)

1.贺小丽 人脸图像识别技术在远程移动学习平台的应用探索[期刊论文]-企业科技与发展 2013(19)

基于视频的人脸识别研究进展

2.薛宇城.戴未然.卢捍华.张潇磊 基于 EmguCV 的网络摄像智能搜索系统的设计[期刊论文]-常州工学院学报2013(3)

3.王娟.江艳霞.唐彩虹 融合颜色和轮廓的粒子滤波人脸跟踪[期刊论文]-光电工程 2012(10)4.李新春.安秋艳 基于改进最近邻法的人脸识别系统研究[期刊论文]-计算机应用与软件 2012(8)5.郭建华.赵怀勋.张龙霞 基于视频的人脸识别综述[期刊论文]-科技资讯 2010(32)

6.张练兴.罗烈 置信度判别嵌入式隐马尔可夫模型人脸识别[期刊论文]-计算机应用研究 2010(5)7.范进富.陈锻生 流形学习与非线性回归结合的头部姿态估计[期刊论文]-中国图象图形学报 2012(8)8.黄存东.刘仁金.杨思春 基于特征融合和流形增强的视频人脸识别[期刊论文]-计算机工程 2012(9)9.曹林.杜康宁 基于加权PCA的人眼定位算法[期刊论文]-北京信息科技大学学报（自然科学版） 2010(3)10.吕俊亚.韩忠军 基于增量学习SVM的人脸识别[期刊论文]-计算机工程与科学 2010(6)11.刘翠响.肖伶俐 基于视频的人脸检测综述[期刊论文]-电子设计工程 2011(14)

12.程艳艳 基于人脸识别的高校无阻碍门禁系统设计研究[期刊论文]-电脑开发与应用 2011(12)13.赵秀萍 生物特征识别技术发展综述[期刊论文]-刑事技术 2011(6)

14.李建中.雷立礼.黎灏.方学阳 基于几何特征的动态人脸识别[期刊论文]-科学技术与工程 2010(28)15.张丹 一种融合流形学习的视频人脸性别识别改进算法[期刊论文]-电讯技术 2012(6)

16.杨国亮.李鹏.周丹.张丽 基于EMBP情感神经网络的人脸识别算法研究[期刊论文]-工业控制计算机 2013(10)17.苏育挺.王静.冀中 基于仿射包和伪Zernike矩的视频人脸检索[期刊论文]-计算机工程与应用 2012(34)18.鲁珂.丁正明.赵继东.吴跃 一种基于相关反馈的视频人脸算法[期刊论文]-西安电子科技大学学报（自然科学版） 2012(3)

19.黄淼.张国平 基于多目标进化封装的特征选择在人脸识别中的应用[期刊论文]-科学技术与工程 2013(33)20.孙杰 支持课堂信息提取的音视频技术[期刊论文]-软件导刊·教育技术 2011(1)21.万绪江.刘晓东.李洋 基于数据库管理安全的研究[期刊论文]-气象与环境学报 2009(5)

本文链接：/Periodical_jsjxb200905003.aspx

本文来源：https://www.bwwdw.com/article/n1x1.html