基于人脸检测的新闻视频主持人帧识别技术研究.pdfVIP

内容制播 i豢· ContentProduction＆Broadcasting 基于人脸检测的新闻视频主持人 帧识别技术研究 ◎ 杨 哲 史 萍 中国传媒大学信息工程学院 和人脸特征形成一个多层次聚类来检测主持人帧。文献 [3]利 摘要 ：本文首先阐述 了新闻视频中主持人帧检测的重要 用视频和音频特征建立了一个模板帧群 ，对于只有一个主持 意义，然后重点介绍 了一种基于人脸检测的 自动的主持 人的镜头通过与所有的模板进行匹配来判断是否为主持人帧， 人帧识别算法。该方法首先利用人脸检测器过滤出具有 而对于有两个主持人的镜头则只与一个最佳模板进行匹配来 人脸的候选帧，然后利用补充的背景匹配算法从候选帧 判断是否为主持人帧。文献 [4]首先通过主持人帧的主色特征 中筛选 出主持人帧。实验结果表明，该方法适用于各种 如主色调、主色调标准差、主色调百分比及主色调百分 比标 不同种类的新闻节目视频，可以应用于新闻视频分析。 准差来提取主持人在的主色模板，然后通过计算模板与视频 帧的主色特征差值来检测主持人帧。文献 [5]将通过全局聚类 关键词 ：新闻视频 主持人帧 人脸检测 AdaBoost算法 找出的长镜头与主持人帧模板进行 8×8子块直方图匹配，以 平均相似度最大的子块为基准得到64个子块的相似度权值， 通过该权值反映的主持人帧的背景中各区域的动态变化程度 0 引言 和模板的匹配相似度来判断主持人帧。文献 [6]引入扩展人脸 随着多媒体技术和网络技术的飞速发展，人们在查看、 区域代替整个视频帧 ，采用基于肤色和部分人脸先验知识的 存储、检索资料时已不再满足于单一的文字形式，而是越来 模糊直方图方法对扩展人脸区域进行聚类，最终得到主持人 越多的采用文字、图像、视音频等多种媒质相结合的信息方式。 帧。文献 [7]通过计算背景部分区域的平均颜色值作为模板来 视频信息具有表达的语义众多且直观的优势，应用越加广泛。 对主持人帧进行扫描和匹配，通过计算视频帧对应子块与模 在众多多媒体数据中，新闻视频由于具有其 自身特殊的结构、 板帧间欧式直方图差来识别主持人帧。文献 [8]中提出了一种 管理和检索方式以及不可或缺的社会应用价值而使得新闻视 基于知识的二阶段模板匹配法用于新闻节 目主持人帧的检测。 频的处理成为目前广泛研究的热点。 与上述方法不同，本文提出了一种基于人脸检测的主持 新闻视频的一个很大特点是结构单一而固定，一般情况 人帧检测算法。该算法可以克服基于模板的算法普遍存在的 下，主持人帧镜头和新闻内容镜头依次交替出现。主持人帧 缺乏通用性以及基于聚类算法普遍存在的查全率不高和需要 镜头的出现往往可以作为新闻视频单元分割的依据 ，因此， 同一种新闻节 目的视频作为训练集的不足，能较广泛的应用 主持人帧的检测已引起众多学者的研究。 于不同的新闻视频中，因此该算法具有较大的发展前景。 1现有算