一种大数据技术处理海量GPS数据系统.pdfVIP

  • 0
  • 0
  • 约5.74千字
  • 约 6页
  • 2023-05-23 发布于四川
  • 举报

一种大数据技术处理海量GPS数据系统.pdf

本发明公开了一种大数据技术处理海量GPS数据系统,包括:数据采集层、数据预处理层,数据存储层,数据处理层,所述数据采集层包括日志文件信息采集模块,所述日志文件信息采集模块将采集的信息缓存进Kafk分布式缓存区,所述数据预处理层采用Storm从所述Kafk分布式缓存区接收数据,进行数据清洗、数据加工、数据汇总,然后对数据进行实时统计,所述数据存储层将所述数据预处理层处理后的数据,首先缓存到非结构化储存区Redis中,每隔一定得时间间隔,将数据批量转存到MongoDB中,随后所述数据处理层利用线性回

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 112163060 A (43)申请公布日 2021.01.01 (21)申请号 202010971958.0 (22)申请日 2020.09.16 (71)申请人 安徽龙运智能科技有限公司

文档评论(0)

1亿VIP精品文档

相关文档