共享汽车大数据基本设计说明书.docxVIP

共享汽车大数据项目基本设计说明书

XX科技股份有限公司编制

目录

TOC\o1-3\h\z\u共享汽车大数据项目 3

1. 总体架构设计 3

2. 网络拓扑 4

3. 数据处理流程 5

数据生产展示 5

数据采集展示 6

数据分析展示 7

数据可视化展示 7

1. 权限管理： 7

2. 共享汽车大数据分析： 9

项目安排 12

共享汽车大数据项目

总体架构设计

总体架构如下所示：

整体系统架构图

网络拓扑

数据处理流程

数据生产展示

图4获取数据并去掉敏感词

通过函数生成共享汽车大数据数据，需配置生成文件名和生成路径。

数据采集展示

图5flume采集

图6kafka集群待消费数据

图7HBASE存储数据1

图8HBASE存储数据2

通过flume将客户数据采集到kafka集群，然后使用Hbase消费kafka集群数据。

数据分析展示

图9Mysql分析数据

使用MapReduce将HBASE中的数据，经过清洗、分析之后存储到MySQL数据库中。

数据可视化展示

权限管理：

资源管理：对系统菜单进行管理，可资源进行添加、修改等操作。

图10资源管理界面截图

角色管理：是系统角色信息管理地方，在此可对系统的角色进行添加、删除、修改等操作，以及可以修改角色的查看权限。