大数据开发工程师求职简历模板_001.pdf

基本信息

毕业院校：XXXX大学

：

姓名XXX

性别：X专业：数学与应用数学

工作经验：X年联英语水平：CET-6

系电话：XXXXXX获奖证书：全国数学建模竞赛二等奖

电子邮件：

工作性质:全职

目标地点：北京

目标职能：大数据开发工程师

目标薪资：面议

工作经历

单位名称：XXXXX科技有限公司职位名称：大数据开发工程师工作时间：2016.8-2019.2

专业技能

1.熟练掌握Java.Scala编程语言，拥有良好的编码习惯，理解面向对象编程和函数式编程思想

，

2.熟练掌握Hadoop技术HDFSMapReduceYARN的工作机制，有调优经验，能搭建Hadoop集群

xx

3.熟练掌握Hive数仓建设，熟练使用HQL进行企业级开发，有Hive调优经验

4.熟悉分布式应用程序协调服务Zookeeper,理解Zookeeper的Paxos选举机制

5.熟练使用Flume进行日志采集，会自定义Flume拦截器，了解Flume组成架构，

6.熟悉使用Kafka实现消费数据，理解高吞吐量机制，掌握Kafka高彳氐级API的编写

7.熟练使用SparkCorexSparkSQLxSparkStreaming编程，理解Spark内核，任务提交，执行流程,Shuffle机制、熟

悉SPark调优

8.熟练使用Sqoop在HDFS和Mysql数据库之间传递数据

9.能够使用EIasticSearch进行海量数据存储和检索

10.熟练使用Mysql,能够使用SQL对辘进行增删改查操作

11.熟练使用Git、MaVen等项目版本控制和自动化构建工具

12.熟练使用Hbase,熟练使用其JavaAPI进行程序开发，熟悉HbaSe的结构原理区和RoWkey设计

13.熟悉Azkaban,能够使用Azkaban进行任务调度

14.熟悉推荐系统，对机器学习有浓厚兴趣，了解常用算法

项目经验

项目名称：快看影视大全推荐系统

软件架构：Nginx+Flume+HDFS+Spark+Hive+Mysql+Sqoop+Azkaban+Hadoop

开发环境：IDEA+JDK1.8+Git+MAVEN+Scala

项目描述：

本电影推荐系统是为了提高用户体验，从APP海量的电影中推荐出用户感兴趣的电影。系统包含了离线推荐与

实时推荐体系，综合利用了协同过滤算法以及基于内容的推荐方法来提供混合推荐。提供了从前端应用、后台服务、

算法设计实现、平台部署等多方位的闭环的业务实现。

责任描述：

L参与项目推荐算法的确定和框架搭建

2、负责模型参数的评估和选取

3、负责离线统计推荐指标的分析

4、负责实时推荐的余弦相似度和对数增减因子的确定

技术要点：

L使用Flume完成日志数据的采集工作，解决Flume落盘HDFS产生大量小文件问题

2、基于SparkSQL,分析了离线统计推荐指标：历史热门推荐，近期热门推荐，优质电影推荐

3、用ALS算法求解模型，构建UserProducts矩阵，预测出电影评分

4、对模型的参数(QnI,iteratOnSJambda)进行评｛古，选取最合适的参数值

5、基于Azkaban实现对于离线统计服务和离线推荐服务的调度

6、获取电影特征矩阵，计算出余弦相似度，进一步求出电影相似度(只取相似度0∙65)

7、基于SprakStreaming+Kafka+Redis,结合余弦相似度和调整因子，计算推荐优先级

项目经验

项目名称：快看影视数仓业务分析系统

软件架构：Nginx+Flume+HDFS