CAD数据分析师智慧交通大数据平台及应用.pptx

第四届中国数据分析师行业峰会 CHINADATAANALYSTSUMMIT 北京中国大饭店2021.07 智慧交通大数据平台及应用 ADDYOURPOWERPOINTTITLEHERE演讲人：曹正凤

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT个人简介曹正凤统计学博士北京大数据协会理事经管之家〔原人大经济论坛〕大数据课程培训负责人首发集团智慧交通大数据中心筹备组负责人博士论文：随机森林算法优化研究出版专著：从零进阶！数据分析的统计根底EI核心论文：ParameterSettingsofGeneticAlgorithmBasedonMulti-FactorAnalysisofVariance主持全国统计科学研究工程：基于大数据平台的我国宏观经济走势预测研究

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT从零进阶！数据分析的统计学根底2021/7/17

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT目录 大数据团队概况及建设方案智慧交通大数据平台 智慧交通大数据应用 12 3

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT大数据部的组织架构 2021BigDataDepartment开发团队〔4〕平台团队〔4〕产品团队〔3〕数据团队〔4〕QA团队〔2〕

2021BigDataDepartment?博士学历2人?研究生学历8人

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT智慧交通大数据中心建设方案〔1+N战略〕

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT一期建设的内容

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT智慧交通大数据平台2智慧交通大数据平台建设的目的和意义 人人都能进行大数据分析

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT大数据学习门槛高 sparkmahout JAVA JDBC

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT开源大数据平台的开发难度高 例如，黑屏命令行操作维 护方式，增加了运维开发 人员的工作难度、操作量， 降低的工具的友好性。

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT开源大数据平台运维本钱高大数据集群数量众多的效劳器不便于整体的部署与管理。1.资源监控2.组件部署3.资源分配4.辅助工具…

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT智慧交通大数据平台 智慧交通大数据平台的功能特性2

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT 功能特性——各种异构数据的全方位聚集我们的产品

第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT功能特性--拖拽式、图形化大数据分析环境，降低门槛和使用难度

?功能特性——便于维护 自动部署 ?操作系统、LDP平台自动化 部署功能 ?添加、批量移除，触发 hadoop、hbase等效劳的一 系列处理 效劳器状态监控 ?CPU、内存、网络、磁盘运 行状态 ?超过阀值报警 第四届中国数据分析师行业峰会 CHINADATAANALYSTSUMMIT参数配置优化?图形化界面操作，配置过程 简单、易操作；?Hadoop根底组件〔Hadoop- core、Hive、HBase〕配置 参数1000+；任务监控?清晰的看到主机上运行了那 些任务，任务的运行状态， 是正常运行还是有故障?各个任务运行的内存、CPU 的使用情况

?LDP平台可以控制数据访问，并对已通过验证的用户提供数据访问特权。?LDP平台支持细粒度的Hadoop数据和元数据访问控制；在效劳器、数据库、表和视图范围提供 了不同特权级别的访问控制，包括查找、插入等；允许管理员使用视图限制对行或列的访问，支 持字段级别的访问控制；?LDP平台通过基于角色的授权简化了管理，可以将访问同一数据集的不同特权级别 授予多个组。?功能特性——平安可靠 平安授权 细粒度访问控制 基于角色的管理?LDP平台允许为委派给不同管理员的不同数据集设置权限。多租户管理机器