Hadoop的HA(ZooKeeper)安装与部署

发布时间:2022-07-01 发布网站:脚本宝典
脚本宝典收集整理的这篇文章主要介绍了Hadoop的HA(ZooKeeper)安装与部署脚本宝典觉得挺不错的,现在分享给大家,也给大家做个参考。

非HA的步骤:

https://www.cnblogs.COM/live41/p/15467263.htML

 

一、部署设定

1.服务器

c1   192.168.100.105    zk、namenode、zkfc、datanode、nodemanagerc2   192.168.100.110    zk、namenode、zkfc、datanode、nodemanager、resourcemanager、journalnodec3   192.168.100.115    zk、datanode、nodemanager、resourcemanager、journalnodec4   192.168.100.120    zk、datanode、nodemanager、resourcemanager、journalnode

 

2.目录

hadoop namenode目录   /home/hadoop/hDFs/namehadoop datanode目录     /home/hadoop/hdfs/datahadoop临时目录           /home/hadoop/tmpzookeePEr数据目录     /home/zookeeper/data/zookeeper日志目录     /home/zookeeper/LOGs/

 

二、系统配置

跟下面文章的第二点一样

https://www.cnblogs.com/live41/p/15467263.html

 

三、下载及配置环境变量

1.下载及解压

https://downloads.apache.org/hadoop/common/

http://zookeeper.apache.org/releases.html

解压到/home/目录

 

 

2.配置环境变量

vim ~/.bashrc

在末尾加入以下内容:

export HADOOP_HOME=/home/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:/home/zookeeper/bin

export HADOOP_COMMON_HOME=/home/hadoop
export HADOOP_HDFS_HOME=/home/hadoop
export HADOOP_MAPred_HOME=/home/hadoop
export HADOOP_CONF_DIR=/home/hadoop/etc/hadoop

export HDFS_DATANODE_USER=root
export HDFS_NAMENODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root

export YARN_HOME=/home/hadoop
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root

 

三、安装和配置ZooKeeper

1.创建data和logs目录

mkdir -pv /home/zookeeper/{data,logs} 

 

2.编辑zoo.CFg

cd /home/zookeeper/conf
cp zoo_sample.cfg zoo.cfg
vim zoo.cfg

修改属性或添加内容:

tickTime=2000
inITLimit=10
syncLimit=5
clientPort=2181

dataDir=/home/zookeeper/data/
dataLogDir=/home/zookeeper/logs

server.1=c1:2888:3888
server.2=c2:2888:3888
server.3=c3:2888:3888
server.4=c4:2888:3888

 

脚本宝典总结

以上是脚本宝典为你收集整理的Hadoop的HA(ZooKeeper)安装与部署全部内容,希望文章能够帮你解决Hadoop的HA(ZooKeeper)安装与部署所遇到的问题。

如果觉得脚本宝典网站内容还不错,欢迎将脚本宝典推荐好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。