storm配置文档.docxVIP

Twitter Storm配置开发环境1.实验环境。集群：本次安装主要使用了4台安装了centos6.4 的服务器。22node1（预备作为master节点）23node2（slave节点）25node3（slave节点）26node4（slave节点）同时在每个机器上建立相同的用户和节点在每个机器上均建立liufeng用户,并将用户加入root组（2.安装zookeeper（1）在当前目录下建立目录Zookeeper目录，将zookeeper压缩文件放到此目录中，并且解压。（2）配置zookeeper环境1我们为了使对zookeeper的配置只在当前liufeng用户下生效（不影响root和其他用户），我们在当前目录下的.bash_profile文件中添加zookeeper的环境变量。在.bash_profile文件末尾加入如下内容：export ZOOKEEPER_HOME=/home/liufeng/Zookeeper/zookeeper-3.3.6export PATH=$PATH:$ZOOKEEPER/bin2执行source .bash_profile使配置生效。3进入到zookeeper的conf目录执行如下命令：cp zoo_sample.cfg zoo.cfg(原因暂时没明白）（3）在当前目录下建立如下目录./tmp/zookeeper./zoolog/zookeeper至此，单机zookeeper的配置完成。（4）配置zookeeper集群进入到zookeeper的conf目录中，修改zoo.cfg文件1将zoo.cfg中的dataDir替换成我们自己定义的目录。dataDir=/home/liufeng/tmp/zookeeper2设置server，zookeeper会读取/etc/hosts中的内容，所以我们将如下内容添加到zoo.cfg文件的末尾。server.1=node1:2888:3888server.2=node2:2888:3888server.3=node3:2888:3888server.4=node4:2888:3888（5）复制zookeeper到其他节点。scp -r zookeeper-3.3.6 node4:/home/liufeng/Zookeeper/scp -r zookeeper-3.3.6 node3:/home/liufeng/Zookeeper/scp -r zookeeper-3.3.6 node2:/home/liufeng/Zookeeper/（6）在配置的dataDir目录下面创建一个myid文件编辑myid文件，根据zookeeper中conf目录下zoo.cfg文件中server.后的数字来配置。如server.1=node1:2888:3888,则只需在myid中写入1即可。（7）在集群的每个节点分别启动zookeeper的执行程序（坑爹）。在安装目录/bin/下执行./zkServer.sh start(start 是一个可选命令，同样可以改成stop（停止进程），status（查看状态）等）然后执行./zkServer.sh status 命令检查启动情况和选举leader和从节点情况。关于：在检查node2的情况是发现了如下的错误Error contacting service. It is probably not running.在网上找了很多方法，没弄清楚后来怎么解决的自己解决了（汗）。如果出现了这个错误，就先检查下防火墙是否关闭（个人建议）。2.安装相关的依赖软件（1）安装Python1从官方下载python的源代码到本地配置编译。2将下载的Python-2.7.6.tgz解压，进入后执行./configure命令检查配置环境（在执行此命令的话，如果报有错的话，检查信息，看是否是缺少相关度额依赖文件，用yum下载安装即可）3执行make命令进行编译4执行make install 命令进行安装5执行Python命令进入到Python编程环境中（2）安装zeromq1下载zeromq源文件包2检查编译环境./configure3 进行编译make4安装make installsudoldconfig（由于编译安装过程类似python的过程，因此就简写）在configure的时候遇到这个问题：configure: error: Unable to find a working C++ compiler则执行如下命令：sudo yum install gcc-c++（3）安装jzmq1首先安装git1 首先安装依赖yum?install?-y curl curl-develzlib-developenssl-develperlperl-deve