数据流系统降载的研究综述.docVIP

数据流系统降载的研究综述 　　收稿日期：2008-01-15；修回日期：2008-03-17 　　基金项目：国家“十一五”支撑计划资助项目（2006BAH02A00） 　　 　　作者简介：陈军(1973-),男,山东枣庄人,博士研究生,主要研究方向为数据流、数据挖掘(cy7477@)；周明天(1939-),男,教授,博导,主要研究方向为网络计算、信息安全；杨晓燕(1977-),女,讲师,博士研究生,主要研究方向为电子商务、供应链管理. 　　 　　(1.电子科技大学 计算机科学与工程学院，成都 610054; 2. 西安工程大学 管理学院，西安 710048) 　　摘 要：在介绍数据流及数据流系统的模型后，对降载时的系统约束、输出质量目标进行了正式阐述。提出数据流系统降载策略的分类方法,着重分析了目前一些较为重要的数据流系统降载策略，指出其特征和应用范围,最后总结了好的数据流降载策略应具有的特点以及未来研究的发展趋势。 　　关键词：数据流系统; 降载；数据流管理系统; 窗口 　　中图分类号：TP311.13 　　文献标志码：A 　　文章编号：1001-3695(2008)10-2898-05 　　Survey of load shedding in data stream system 　　CHEN Jun1, ZHOU Ming-tian1, YANG Xiao-yan2 　　(1.School of Computer Science Engineering, University of Electronic Science Technology of China, Chengdu 610054, China; 2.School of Management, Xi’an Polytechnic University, Xi’an 710048, China) 　　Abstract:After describing the models of data streams and data stream systems, this paper presented the system constraints of load shedding and the output goals. It presented the classification standards for load shedding in data stream systems. Then analyzed the key mechanisms of existing representative strategies, their characteristic and application area. Finally,summarizedthe important features that good load shedding strategies, and introduced the future strategies and trends. 　　Key words：data stream system; load shedding; data stream managemant system; window 　　 　　 　　近年来，在入侵窃密检测、电子商务应用、无线传感器网络、因特网流量检测和医疗生命信号监测等许多应用领域，一种新型数据模型――数据流引起人们的广泛关注。采用传统DBMS处理数据流并不可行[1],为此已开发许多数据流管理系统（data stream management system, DSMS）或原型系统，如STREAM[2]、TelegraphCQ[3]、Niagara[4]、Aurora[5]等。数据流源，如通信网络流量、金融市场的事务等，经常呈现突发性和波动性。当数据流输入率超过DSMS的处理能力时，DSMS不能处理所有的输入数据流，也不能与数据流到达率保持一致。此时采用降载技术[6]，即丢弃输入数据流的部分数据，可降低系统负荷，为应用提供及时的、最新的查询响应。由于降载时丢弃部分数据，降载结果和未执行降载的原始结果必然不同。有效的降载算法应能克服过载，同时最小化原始结果与降载结果之间的差。本文分析并总结了当前比较重要的数据流降载算法，指出了面临的挑战和将来的研究展望，为数据流降载算法的进一步研究提供参考。 　　1 数据流系统降载概述 　　在数据流应用中，数据流连续、实时到达、高度动态波动、没有边界、不可预测，也不受DSMS的控制。数据流的在线处理要求和潜在较高的输入率对DSMS施加了较大的资源需求，数据流突发时的数据模式和稳态时的数据模式也可能并不相同。即使采用并行技术，也不一定能