基于流式计算框架的多线程数据处理方法、装置和介质.pdfVIP

  • 2
  • 0
  • 约1.66万字
  • 约 14页
  • 2023-05-26 发布于四川
  • 举报

基于流式计算框架的多线程数据处理方法、装置和介质.pdf

本申请涉及一种基于流式计算框架的多线程数据处理方法、装置和存储介质,通过基于预先设置的第一水位线触发目标窗口处理数据切片,得到第一处理结果;若未被处理的数据切片中存在事件时间戳小于目标窗口的结束时间戳的迟滞数据切片,则记录流式计算框架接收迟滞数据切片的系统时间戳;设置第二水位线,其中,第二水位线的延迟时间不小于迟滞数据切片的系统时间戳与目标窗口的结束时间戳之差;基于第二水位线重新触发目标窗口处理数据切片,得到第二处理结果,并根据第二处理结果校正第一处理结果,解决了基于流式计算框架的计算结果不准确

(19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 112286582 B (45)授权公告日 2021.03.16 (21)申请号 202011618342.1 (56)对比文件

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档