基干硬件预处理数据流并发连接查询优化算法.docVIP

基干硬件预处理数据流并发连接查询优化算法 　　摘要：目前在金融、移动数据、网络监控及物联网等领域中，经常会需要处理一些海量的、实时的、需要快速响应的数据流。为了对这些数据流进行有效的管理，提出了基于硬件预处理的数据流管理系统，并对相应的数据流并发连接算法进行了优化，以得到数据流预处理器所需的控制信息 关键词：数据流管理系统；连续查询；查询优化 中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2016）33-0025-02 数据流的特点是：数据具有实时性，需要即时响应；数据量大，而且无界；它还具有不可预知性，不可预期、无法控制数据流中元素的到达次序。以上这些特点都决定了，对数据流的查询只能近似实时。而且，目前大多数基于软件实现的数据流管理系统的处理速度都是有一定限制的。当数据流的流速达到一定的速度之后，就会出现瓶颈，利用软件就难以实现了。目前看来，比较可行的方法是来设计专门的硬件进行预处理来解决这个问题，即将数据流处理的某些操作利用硬件来实现 提高对数据流连接操作的处理效率，是解决数据流管理系统中，如何提高处理速度的关键问题。利用多条数据流并发执行连接理论上可以提高处理效率，但是如何处理连接顺序又在很大程度上影响了系统的速度。因此，如何优化数据流并发连接查询算法则成为了研究数据流管理系统的关键技术之一 1 基于硬件预处理的数据流管理系统