泰迪科技就业班培训课程大纲.docxVIP

泰迪科技就业班培训课程大纲 方向一：Hadoop+Spark 大数据开发 Linux基础 数据库SQL基础 Java基础 1.Linux操作系统简介、安装及使用； 2.Linux档案权限与目录配置、档案与目录管理、用户账号管理； 3.文件操作、文本编辑、vim 程序编辑器； 4.Bash简介及功能介绍、Shell Script编程； 1.数据库概述、数据库系统、管理系统； 2.MySQL安装配置、基本操作、MySQL连接工具的使用； 3.数据库基础知识概述：数据库、表结构、字段及其数据类型、运算符； 4.SQL概述,数据库及表的创建基本操作； 5.增删改查语句,使用Java程序进行增删改查。 1.Java基础程序设计：数据类型、运算符、表达式、判断循环语言； 2.数组定义与使用、方法定义与重载； 3.面向对象（基础）； 4.面向对象（高级）； 5.异常概念与编程；包概念与导入；泛型概念与编程应用； 6.Java类集：Collection接口主要操作方法：List、Set、Map常用子类与使用，集合操作与遍历方法； 7.多线程编程及应用； 8.Java EE编程实战；JavaEE基础，HTML，JavaScript，Java Web，Tomcat，JSP Hadoop编程开发 Hive大数据分析 HBase数据快速读写 1.Hadoop简介、架构、原理； 2.集群配置及安装（JDK、SSH）； 2. Hadoop IDE开发环境配置（Eclipse配置）； 3. Hadoop MapReduce实战：单词计数； 4. Hadoop命令（hadoop fs , hadoop job, Hadoop jar）； 5.分布式文件系统HDFS Java API实战：创建目录，上传，下载，删除； 5. Hadoop基础编程（Mapper、Reducer、Driver）； 6. Hadoop高级编程（Combiner／Partitioner原理实战及自定义，FileInputFormat、FileOutputFormat）； 8. Hadoop高级编程（自定义键值对）； 9. Hadoop高级编程（开发环境直接运行MapReduce程序）； 10. Hadoop案例1：基于KNN的鸢尾花分类预测； 11. Hadoop案例2：基于Kmeans的客户价值分析。 1. Hive产生背景、概念，Hive架构、原理； 2. Hive安装、配置； 3.Hive与RDBMS区别，Hive应用场景； 4. Hive HQL命令，数据库，表创建；数据导入、导出，HQL查询； 5.Hive内置函数，自定义函数（UDF）； 6.Hive与Java交互； 7.基于Hive的航空公司客户价值分析项目案例。 1.HBase简介、架构原理； 2.HBase集群安装配置（Zookeeper简介、Zookeeper安装配置、配置文件解读）； 3.HBase架构与数据模型（组件原理功能、Rowkey设计、Schema设计）； 4.HBas命令行（hbase shell）表操作； 5.HBase开发环境配置； 6.Java API操作HBase删/建表、HBase增删改查； 7.HBase与Hadoop Mapreduce交互（HBase to HDFS， HDFS to HBase，HBase to HBase）； 9.基于HBase的冠字号查询系统（案例背景、架构、数据处理、建表、导入表数据实现）； 10.基于HBase的冠字号查询系统Java Web实现。 Spark大数据分析与编程 大数据实战案例 1.Spark 简介（Spark简介、应用场景）; 2.Spark安装配置（资源管理器YARN／Spark Standalone）； 3. Spark整合Hive及传统数据库； 3.原理与架构（组件功能、RDD原理）； 4.Spark编程基础（Scala及编程简介）； 5.Spark Transformation/Action编程； 6.Spark Intellij IDEA开发环境配置； 7.基于Spark ALS算法的电影推荐系统（案例背景、系统架构）； 8.基于Spark ALS算法的电影推荐系统（Spark Shell简单实现 Java Web远程调用Spark集群实现）； 一、基于Hadoop、Spark的法律网智能推荐 1.法律网案例背景，架构设计； 2.数据预处理：异常数据探索、数据剔除； 3.系统数据预处理实现； 4.推荐算法简介、评估与选型； 5.系统模型建立、预研、调优； 6.系统模型完整实现。 二、广电大数据用户营销 1、案例背景、架构设计、数据探索 2、数据探索分析及数据预处理 3、SVM预测用户是否挽留 4、用户画像实现 三、广告流量作弊识别