Hadoop-HA集群部署
集群的服务器规划:
配置免密登陆:(这里示范的是第一台服务器,其余的操作一样),免密登陆是为了执行脚本统一操作,启动,如(hdfs集群:1上启动2.5.6.7)(yarn,3上启动4567)
免密登陆测试:从01服务器登陆05服务器:
ZOOKEEPER的配置自己去看前面的文章,装到(5.6.7)三台服务器上去
在6.7两台服务器上修改myid为2和3.这样你的 3台zk就都配置好了
启动zk,并且查看状态是否正常:
安装配置hadoop集群
1.如上图:两台hdfs的nameservice我将他们和在一起命名——ns1
2.指定hadoop的目录
3.指定zookeeper的集群地址
以上就已经将namenode的配置配好了
以下是日志的配置JournalNode,和zkfc的自动切换
配置mapreduce的框架为yarn
配置yarn的高可用
将1上的hadoop包拷贝到2.3.4.5.6.7
启动
测试yarn地址是