完整全套教学课件-基于新信息技术的Hadoop大数据技术.pptx

全套可编辑PPT课件

完整全套教学课件-基于新信息技术的Hadoop大数据技术

项目1Linux系统概述

项目2Hadoop技术概述

项目4Zookeeper分布式协调服务

项目5搭建HDFS分布式集群

项目6搭建YARN分布式集群

项目7Hadoop分布式计算框架(MapReduce)

项目8Hive的安装部署

项目10HBase集群安装配置

项目11Sqoop安装部署

项目12Flume的安装与使用

项目13Kafka分布式集群搭建

项目14Davinci安装部署;

ras123J8A73911d

linux系统概述

1.1.1linux操作系统的特点

Linux,全称GNU/Linux,是一种免费使用和自由传播的类

UNIX操作系统，其内核由林纳斯·本纳第克特托瓦兹于1991年10月5日首次发布，它主要受到Minix和Unix思想的启发，是一个基于POSIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的Unix工具软件、应用程序和网络协议。它支持32位和64位硬件。Linux继承了Unix以网络为核心的设计思想，是一个性能稳定的多用户网络操作系统。Linux有上百种不同的发行版，

如基于社区开发的debian、archlinux,和基于商业开发的RedHatEnterpriseLinux、SUSE、OracleLinux等。;

Linux操作系统的特点有：良好的用户界面、可移植性、全面支持网络协议、支持多任务及

多用户、免费及源代码开放、可靠的安全性。

0;

【3到2TJ8A7591

linux系统概述

1.1.3linux操作系统的应用场景

1、高端服务器领域。服务器市场占有率已经达到25%,很多公司都是用Liunx做操作系统的。

2、桌面应用领域。新版本的Liunx完全可以作为一种集办公应用、多媒体应用、网络应用等多方面功能为一体的图形界面操作系统。

3、嵌入式应用领域。目前能够支持嵌入式开发的操作系统有PalmOS、嵌入式Linux,Windows

CE。

b

g;

32T8A76911d

linux系统概述

1.1.4linux版本

linux版本版本分为两类：内核版本和发行版本o3x0d59

1.内核版本内核是系统的心脏，是运行程序和管理像磁盘和打印机等硬件设备的核心程序,它提供了一个在裸设备与应用程序间的抽象层。例如，程序本身不需要了解用户的主板芯片集或磁盘控制器的细节就能在高层次上读写磁盘。

内核的开发和规范一直是由Linus领导的开发小组控制着，版本也是惟一的。开发小组每隔一段时间公布新的版本或其修订版，从1991年10月Linus向世界公开发布的内核0.0.2版本(

0.0.1版本功能相当简陋所以没有公开发布)到目前最新的内核2.6.22版本，Linux的功能越来越强大。

1

ublholunahg;

发行版本

仅有内核而没有应用软件的操作系统是无法使用的，所以许多公司或社团将内核、源代码及相关的应用程序组织构成一个完整的操作系统，让一般的用户可以简便地安装和使用Linux,这就是所谓的发行版本(distribution),一般谈论的Linux系统便是针对这些发行版本的。目前估计各种发行版本有数十种，它们的发行版本号各不相同，使用的内核版本号也可能不一样，下面就为读者介绍目前比较著名的几个发行版本。

2271E2Y2_7;

3278A1591

linux系统概述

1.1.4linux版本

linux版本版本分为两类：内核版本和发行版本

发行版本

Linux几种常见的发行版，如商业版本redHat:十分稳定且好用，但是需要付费。centos:虽然不如redHat,但功能全面，且免费。Ubuntu:拥有图形化界面，方便操作，PC针对Ubuntu软件较多。

27272

b

1g;

Thanks;

Hadoop大数据技术

Hadoop技术概述;

Hadoop的前世今生;

[3J8A73911

双11电商数据大屏

双全珑汪欢节

240

*91,217,017,615

341,847,366无线成交占比：68%

间{00分35秒，2015天猫双11全球狂欢节交易额超过800亿!无线占比68;

山东高速大数据平台

￥00.069,498