Pig实战讲义.docx

Pig实战-- pig是hadoop项目的一个拓展项目1. Pig简介?pig是hadoop项目的一个拓展项目，?用以简化hadoop编程（简化的程度超乎想象啊），并且提供一个更高层次抽象的数据处理能力，同时能够保持hadoop的简单和可靠性。2. 安装pig2.1 下载pig：pig安装包2.2 解压下载完成的pig安装包：?xuqiang@ubuntu:~/hadoop/src/pig$ tar zxvf pig-0.8.1.tar.gz?2.3 设置环境变量?xuqiang@ubuntu:~$ vim .bashrc?export PATH=~/hadoop/src/pig/pig-0.8.1/bin/:$PATHexport PIG_HOME=~/hadoop/src/pig/pig-0.8.1/export HADOOP_CONF_DIR=~/hadoop/src/hadoop-0.21.0/confexport PIG_CLASSPATH=~/hadoop/src/hadoop-0.21.0/conf这里需要说明的是pig是能够运行在两种模式下：local模式和mapreduce模式，变量HADOOP_CONF_DIR主要是为了在mapreduce模式下使用。?为了使新设置的环境变量生效，使用如下命令：xuqiang@ubuntu:~$ source .bash_pro