当前位置: 首页 > article >正文

Hadoop-HA集群部署

集群的服务器规划:

配置免密登陆:(这里示范的是第一台服务器,其余的操作一样),免密登陆是为了执行脚本统一操作,启动,如(hdfs集群:1上启动2.5.6.7)(yarn,3上启动4567)

免密登陆测试:从01服务器登陆05服务器:

ZOOKEEPER的配置自己去看前面的文章,装到(5.6.7)三台服务器上去

在6.7两台服务器上修改myid为2和3.这样你的 3台zk就都配置好了

启动zk,并且查看状态是否正常:

安装配置hadoop集群

1.如上图:两台hdfs的nameservice我将他们和在一起命名——ns1

2.指定hadoop的目录

3.指定zookeeper的集群地址

以上就已经将namenode的配置配好了

以下是日志的配置JournalNode,和zkfc的自动切换

配置mapreduce的框架为yarn

配置yarn的高可用

将1上的hadoop包拷贝到2.3.4.5.6.7

启动

测试yarn地址是 


http://www.kler.cn/a/555695.html

相关文章:

  • go 模块管理
  • 蓝桥杯 Java B 组之岛屿数量、二叉树路径和(区分DFS与回溯)
  • 【Linux网络编程】IP协议格式,解包步骤
  • List的基本功能(1)
  • 以ChatGPT为例解析大模型背后的技术
  • 数学建模:解锁智能计算的密码!
  • JVM 深入理解与性能优化
  • Qt常用控件之标签QLabel
  • 跨中心模型自适应牙齿分割|文献速递-医学影像人工智能进展
  • QT实战-基于QWidget实现的异形tip窗口
  • 前端vue的一些常见项目启动命令
  • R语言NIMBLE、Stan和INLA贝叶斯平滑及条件空间模型死亡率数据分析:提升疾病风险估计准确性...
  • 鸿蒙5.0实战案例:基于measure实现的文本测量
  • VSCode集成deepseek使用介绍(Visual Studio Code)
  • 2022年下半年试题一:论基于构件的软件开发方法及其应用
  • AI工作流+专业知识库+系统API的全流程任务自动化
  • 网络安全-js安全知识点与XSS常用payloads
  • HTML项目一键打包工具:HTML2EXE 最新版
  • AI学习指南DeepSeek篇(6)-DeepSeek论文介绍
  • 第37章 合作之路与占坑成功