基于觉察上下文实时档案系统.pdfVIP

基于觉察上下文的实时档案系统 张翔1’2徐光诒1肖小玲3陶霖密1 (普适计算教育部重点实验室，清华大学计算机系，北京，100084) 2(长江大学地物学院，湖北荆州，434023) 3(武汉理工大学计算机科学与技术学院．湖北武汉，430063) 摘要：智能环境申的会议档案系统是典型的普适计算研究的一个热点，也为研充普适计算提 供了一个基本的实验环境。本文研究了一种基于觉察上下文的实时档案系统，在谊系统中提出 了一种基于觉察上下文的多层次事件检测的系统框架模型，在该模型指导下，对上下文动态地 建模，以及在上下文的指导下，进行不同层次事件的检测。相比较现有的会议档案系统，谈系 统具有觉察上下文机制，实时特征选择与提取以及多层次事件检测等特点。 关键词：普适计算；档案系统；觉察上下文；事，f牛-ez测 1．引言 普适计算是信息技术发展的必然，其本质能把各种计算和通信设备组织成一个协调系 统，使由计算和通信构成的信息空间与人们生活的物理空间相融合，从而构成“物理～信 息”对偶空间。在这个融合的空间中人们可以用相对不需要干预或分散注意力的方式，随 时、随地、透明地获得计算和信息服务。用户在物理空间中的各种活动和事件是一个具有 时间一空间特性的动态过程，这个过程发生以后只留下了它的结果，其过程及其事件发生 前的状态，在物理空间中难以保存。如果在信息空间中建立这个过程的对偶关系，就能把 这个过程保存为信息空间中的多模态时一空流的档案，并且可在物理空间中进行检索，这 将为用户提供非常方便的服务…。智能环境中的会议档案系统是典型的普适计算研究的一 个热点，同时也为研究普适计算提供了一个基本的实验环境。目前，已经存在着一些会议 和档案系统，例如Microsott开发的Distributed EnrichedConference Trackerf…，UMich开发的Media RoomHJ，欧盟正在研制开发 Meeting 的M4项目151等。这些系统的共同特点是在智能环境中记录会议中的视频，声音，笔迹等 信息，然后存储下来供以后查阅。对于这些已经存在的系统来说，它们通常都是在完全离 线的情况下处理记录到的信息，因此，其中的某些实时信息，例如麦克风阵列检测到声源 的方位就会丢失，并且在系统中也没有实时调整和反馈的机制。另一方面，这些系统对于 记录到的信息进行索引的方式通常是通过某些结构化的信息，例如对于声源方位的聚类等。 而这些信息通常只反映了较为底层的信息，而对于较为高层的语义信息没有充分的反映。 、湖北省自然科学基金(No2004ABA043)、中国博士后科学基叠资助 资助项目：国家自然科学基金(No (No 2005038310) 作者简介：张翔(1969--)．男，湖北蕲春人，博士．副教授．清华大学在站博士后．从事计算机视觉、模式识别、图像 edu cn。待光祜(1940一)t男，责任教授-博十生导师，主要研究领域为计 处理等研究，E-mail：xiang-zhang@mailtsinghua 算机视觉．人机交互技术和多媒体技术 1I多媒体系统 163 2．系统介绍 档案系统的基本目的是对于在一个特定环境中发生的～系列事件进行记录，并分析存 档，以供后来进一步地分析或查询。在实时会议档案系统中，人的活动是最重要的中心内 容，这个系统可以对在会议室中人物的活动进行记录，例如人脸，手势，动作，姿态识别 等，人物说话的声音，以及投影的演示文档和笔迹等。但单纯的对这些内容进行简单的记 录并不能满足实际应用的需要，还需要系统对记录下来的数据进行进一步的处理，自动地 进行分析，检测出重要的事件，并由此对会议记录进行存档和结构化的索引工作。这样得 到的会议记录可以供以后进行方便的浏览和检索。主要研究内容有：(1)建立一个“智能 化”的会议环境，构建基于多模态信息融合的系统集成平台；(2)分析和处理音频视频信 息流，对场景中目标的实时检测、跟踪与识别