支持实时流计算应用的关键技术研究进展.pdfVIP

软件学报

ISSN

1000-9825,

CODEN

RUXUEWE-mail:

jos@

JournalofSoftware,2024,35(1):430−454

[doi:

10.13328/ki.jos.006917]

©中国科学院软件研究所版权所有.Tel:

+86-10

*

支持实时流计算应用的关键技术研究进展

1,21,2,31,21,21,2

徐志榛,

徐

辰,

丁光耀,

陈梓浩,

周傲英

1(华东师范大学

数据科学与工程学院,

上海

200062)

2(上海市大数据管理系统工程研究中心,

上海

200062)

3(广西可信软件重点实验室(桂林电子科技大学),

广西

桂林

541004)

通信作者:

徐辰,

E-mail:

cxu@

摘要:

信息系统在进行知识的挖掘和管理时,

需要处理各种形式的数据,

流数据便是其中之一.

流数据具有数

据规模大、产生速度快且蕴含的知识具有较强时效性等特点,

因而发展支持实时处理应用的流计算技术对于

信息系统的知识管理十分重要.

流计算系统可以追溯到29世纪90年代,

至今已经经历了长足的发展.

然而,

当

前多样化的知识管理需求和新一代的硬件架构为流计算系统带来了全新的挑战和机遇,

催生出了一系列流计

算领域的技术研究.

首先介绍流计算系统的基本需求以及发展脉络,

再按照编程接口、执行计划、资源调度和

故障容错4个层次分别分析流计算系统领域的相关技术;

最后,

展望流计算技术在未来可能的研究方向和发展

趋势.

关键词:

实时处理;

流计算;

数据处理系统

中图法分类号:

TP311

中文引用格式:

徐志榛,

徐辰,

丁光耀,

陈梓浩,

周傲英.

支持实时流计算应用的关键技术研究进展.

软件学报,

2024,

35(1):

430–454.

/1000-9825/6917.htm

英文引用格式:

Xu

ZZ,

Xu

C,

Ding

GY,

Chen

ZH,

Zhou

AY.

Research

Progress

on

Key

Technologies

Towards

Real-time

Stream

Processing

Applications.

Ruan

Jian

Xue

Bao/Journal

of

Software,

2024,

35(1):

430–454

(in

Chinese).

/1000-9825/

6917.htm

ResearchProgressonKeyTechnologiesTowardsReal-timeStreamProcessingApplications

1,21,2,31,21,21,2

XU

Zhi-Zhen,

XU

Chen,

DING

Guang-Yao,

CHEN

Zi-Hao,

ZHOU

Ao-Ying

1(School

of

Data

Science

and

Engineering,

East

China

Normal

University,

Shanghai

200062,

China)

2(Shanghai

Engineering

Research

Center

of

Big

Data

Management,

Shanghai

200062,

China)

3(Guangxi

Key

Laboratory

of

Trusted

Software

(Guilin

University

of

Electroni