家用视频内容分析方法研究-模式识别与智能系统专业论文.docx

中国科学技术大学博士学位论文户拍摄意图进行挖掘的全面和可扩展的框架，包括视频结构分解、意图相关的特 中国科学技术大学博士学位论文 户拍摄意图进行挖掘的全面和可扩展的框架，包括视频结构分解、意图相关的特 征分析、基于奇异值分解的意图单元分割和基于学习的意图概念分类等部分。实 验在一个具有90段家用视频序列、由16位普通家庭用户在最近20年拍摄的视频 数据库上进行。客观和主观评价都验证了意图挖掘这一全新分析方法的有效性。 (31对于内容表征问题，提出了一个新的家用视频内容表征和浏览系统——视频相 册，改变了普通家庭用户传统的利用PC机、键盘和鼠标的视频浏览方式，支持 更为自然和有效的视频浏览和检索，从而在数字家用视频和模拟家庭相册之间建 立了一种无缝的通信方式。首先，视频相册通过基于优化的方法挑选出具有代表 性的缩略图集合，并将这些缩略图按照预定义的个性化形状模板进行变形，然后 采用基于关键帧或全拼图的方式对变形后的缩略图进行表征，并将其打印成真实 的相册形式。这样，用户可以像浏览普通家庭相册一样浏览视频相册。当用户想 观看打印出来的视频相册中特定照片对应的视频片断时，可以通过手机或其他拍 摄设备随意的拍下该照片，并通过无线网络将其传送到服务器。服务器中的视频 相册系统将通过自训练主动形状模型算法对拍摄的照片轮廓进行精确定位和重 建。最后，根据重建的照片内容特征对相应的视频片断进行检索，并将该片断在 用户终端进行回放。 (4)在视频相册系统中，分别对传统的全拼图和主动形状模型算法进行了改进。提出 一种新的基于运动特征的快速有效的全拼图算法，在提高全拼图视觉质量的同 时，能显著降低全拼图的计算时间；提出一种新的自训练主动形状模型，通过对 针孑L相机模型的角度变化进行仿真，自动产生训练样本集，从而解决了传统的主 动形状模型算法中由人工标注引入的误差影响，提高了主动形状模型对轮廓形状 的定位能力。 关键词：视频内容分析，家用视频，质量评估，用户拍摄意图，视频相册，视频全拼 图，自训练主动形状模型 英文摘要Abstract 英文摘要 Abstract With rapid adoption of consumer digital recorders as home appliances to capture people’S memorable experiences and document their daily lives，the quantity of home video data is increasing dramatically．However，home videos usually characterized by the lOW visual and audio quality．as well as non—edited content．In order to alleviate the average home users’effort to browse，retrieve and share personal videosI content analysis has become important research issue in home videos for turning the raw data into well—organized and easy—to—access database．Home video content analysis aims at not only providing personalized multimedia services for home users，but also enhancing the development of related issues in video content retrieval，such semantic modeling， machine learning and information retrieval．Therefore．the research on methods for home video content analysis has both important theoretical and applied values． This thesis investigates the key problems of home video content analysis at three different levels：quality assessment，content understanding and content representation． Quality assessment iS a fundamen