2012CB316400 面向公共安全跨媒体计算理论与方法.DocVIP

项目名称： 面向公共安全的跨媒体计算理论与方法 庄越挺 浙江大学 2012.1-2016.8 依托部门： 教育部 浙江省科技厅  本项目凝炼出跨媒体数据统一表示和建模方法、跨媒体数据关联推理与深度挖掘、跨媒体数据综合搜索与内容合成三个科学问题。 关键科学问题之一：跨媒体数据统一表示和建模方法 跨媒体数据的自然属性和社会属性具有异构、多阶、高维等特点，随时间、空间动态变化。蕴含关联性语义的异构属性之间存在着内在一致、相互互补和动态演化等特性。基于相似度量学习和拓扑分析，发现这些异构特征属性之间所内嵌的本征结构，通过图、矩阵和张量等理论和方法建立跨媒体数据关联性语义结构一致性描述，对高层语义进行整体性表达，最终实现跨媒体数据自然属性、社会属性以及交互行为等上下文之间存在的复杂关系建模，是关键的科学问题。 关键科学问题之二：跨媒体数据关联推理和深度挖掘 蕴含着相同语义、主题和事件的文本、图像和视频等跨媒体数据在不同网络平台上瞬时涌现，然后迅速传播和演化，最终引发热点话题。发现跨媒体数据与现实生活个体和群体行为之间的相互影响规律，揭示特定事件为内容的跨媒体数据传播与演化机制，对跨媒体数据所蕴含话题、事件和模式进行语义理解，建立跨媒体推理模型，挖掘话题、事件和模式之间的隐性关联，进而对随用户交互及数据流式增加情况下新话题、事件和模式的产生和迁移进行预测预警，是关键的科学问题。 关键科学问题之三：跨媒体数据综合搜索和内容合成 跨媒体所蕴含的话题、事件和模式往往文本、图像、视频和空间位置等媒体数据从不同侧面进行整体性表现。为了充分利用海量跨媒体数据，需要理解用户以自然语言和跨媒体样例来表达的检索意图，研究考虑内容、质量和热度等属性的跨媒体排序方法和相关反馈机制，建立从一类媒体数据检索另外一类媒体数据的综合检索理论和方法。同时，析取跨媒体数据所蕴含的热点话题中决定性因素和重要阈值，选择重要性单词、文本、图像、视频、空间位置和评价等，提取热点话题的摘要及代表性语义单元，进一步通过类比和联想等手段，合成潜在性热点话题，对其进行多粒度和多视点回溯、仿真和预测，高效利用跨媒体数据。 主要研究内容 针对跨媒体数据统一表示和建模方法这一关键科学问题，本项目将结合跨媒体特有的自然属性和社会属性，研究跨媒体基元提取与描述方法，实现跨媒体一致性语义结构的统一表示和关联建模，刻画跨媒体数据所包含自然属性和社会属性之间的复杂关系。主要研究内容包括： 跨媒体基元提取与表达 跨媒体度量学习和关联建模 跨媒体关联性语义结构一致性描述 跨媒体数据增量整合与索引 针对跨媒体关联推理与深度挖掘这一关键科学问题，本项目将建立跨媒体推理模型，挖掘跨媒体数据中关联关系，对离线和在线数据以及群体网络行为数据进行分析，研究跨媒体数据相互作用、渗透和扩散的物理模型，以揭示跨媒体数据涌现、传播和演化机制，对热点话题进行语义理解、检测跟踪和预测预警。主要研究内容包括： 跨媒体数据涌现、传播和演化机制 跨媒体推理模型 网络群体智能交互与社会关注度分析 跨媒体关联结构挖掘与聚合机制 针对基于跨媒体数据综合搜索和内容合成这一关键科学问题，本项目将研究跨媒体综合搜索的理论和方法，对用户以自然语言和跨媒体样例来表达的检索意图进行理解，实现从一种类型媒体数据检索其他类型媒体数据的综合检索方法。同时对跨媒体数据所蕴含的热点话题中重要性数据进行析取，合成摘要和代表性单元等，对其发生、发展和演化过程进行多视点和多侧面呈现。 跨媒体数据综合检索与排序 热点话题重要性因子分析 跨媒体数据合成与多粒度呈现 面向公共安全的态势分析与预测预警示范平台  二、预期目标 总体目标 本项目总体目标是面向我国公共安全重大需求，开展跨媒体计算基础理论研究，在跨媒体数据等方面取得突破性进展，形成较完整的理论体系，为我国公共安全和应急处理提供方法和相应技术。 同时，为国家培养一批青年学术带头人和研究队伍，使我国在本领域的研究整体上处于国际先进水平，并在一些关键点达到国际领先水平，为我国公共安全领域预测预警快速发展奠定理论基础、提供技术支撑。 五年预期目标 （1）基础理论研究 研究跨媒体计算的基本理论和方法，预期取得如下突破：发现跨媒体数据与现实世界个体和群体行为之间的规律，用于指导跨媒体数据所蕴含语义的理解；揭示蕴含社会热点话题的跨媒体数据涌现、传播和演化的机制，建立跨媒体推理模型，辨识热点话题的起源和迁移；实现跨媒体综合检索，通过类别和联想等手段，对跨媒体内容进行合成。 （2）关键技术突破 在跨媒体计算关键算法上取得突破性进展，包括异构特征度量学习、跨媒体关联建模、跨媒体语义理解、公共安全事件检测、跟踪和演化、大规模跨媒体分布计算、跨媒体多粒