大数据相关职位的主要工作内容概览 .pdfVIP

大数据相关职位的主要工作内容概览

大数据开发工程师：

1、负责公司大数据平台的开发和维护，负责大数据平台持续集成相关工具平台的架构设计

与产品开发等；

2、主要从事网络日志的大数据分析工作，包括：网络日志的数据提取、数据融合及分析;

专注于实时计算、流式计算、数据可视化等技术的研发;

3、负责网络安全业务主题建模等工作。

数据科学家：

1、根据商业需要规划和实施数据分析项目；

2、致力于数据挖掘架构、模型标准、数据报告、数据分析方法；

3、与利益相关人合作在现有的数据系统中集成数据挖掘结果；

4、监督数据挖掘系统性能并实施优化和改进。

数据工程师：

1、设计、搭建、安装、测试和维护大规模数据管理系统；

2、改进数据基础设施、业务流程和数据标准；

3、在现有体系架构中集成新的数据管理技术和软件工具；

4、开发用户侧软件和数据分析应用程序。

数据分析师：

运用工具，提取、分析、呈现数据，实现数据的商业意义，需要业务理解和工具应用能

力，收集，处理和执行统计数据分析；

数据挖掘师/算法工程师：

数据建模、机器学习和算法实现，需要业务理解、熟悉算法和精通计算机编程

数据架构师：

创建数据管理系统进行整合，集中，保护和维护数据源；需求分析，平台选择，技术架

构设计，应用设计和开发，测试和部署；高级算法设计与优化；数据相关系统设计与优

化，有垂直行业经验最佳，需要平台级开发和架构设计能力

数据库管理员：确保数据库是提供给所有相关用户，正在正确执行，并且安全运行；

提高数据库工具和服务的有效性；确保所有的数据符合法律规定；确保信息得到保护和

备份；做定期报告；监控数据库性能；改善使用的技术；建立新的数据库；检测数据录

入程序；故障排除。

大数据工程师：

开发，建设，测试和维护架构（如数据库，以及较大规模的处理系统）；收集和处理大

规模的原始数据（包括脚本编写，网页获取，调用APIs，编写SQL查询等）；运用编

程语言实现数据平台和数据管道开发，需要计算机编程能力

数据产品经理：

平台线提供基础平台和通用的数据工具，包括数仓存储和计算平台，数据采集SDK，自

定义报表工具，邮件发送管理工具，数据监控平台，平台通用数据字典等等。而在业务

线上，则是提供更加贴近业务的分析框架和数据应用。