当前位置： 首页 > article >正文

单节点hadoop搭建

article 2024/9/21 9:38:43

下载Hadoop-bin.*.tar.gz

解压文件，配置HADOOP_HOME

编辑文件etc/hadoop/hadoop-env.sh配置JAVA_HOME
配置etc/hadoop/core-site.xml文件

<configuration>
        <property>
                <name>fs.defaultFS</name>
                <value>hdfs://dachengnode1:9000</value>
        </property>
        <property> 
                //指定tmp目录的位置 tmp目录提前创建好
                <name>hadoop.tmp.dir</name>
                <value>/opt/behave/hadoop-2.8.5/tmp</value>
        </property>
</configuration>

添加配置etc/hadoop/hdfs-site.xml文件

<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>

添加配置etc/hadoop/mapred-site.xml

<property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
</property>

添加配置etc/hadoop/yarn-site.xml

<property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>

格式化hdfs

bin/hdfs namenode -format

启动hads

 $ sbin/start-dfs.sh

启动yarn

$ sbin/start-yarn.sh

http://www.kler.cn/news/162985.html

相关文章：

  • C# WPF上位机开发（简易图像处理软件）
  • blender 数字键盘上的快捷键
  • 使用poi-tl填充word模板，并转化为pdf输出
  • 从根上理解elasticsearch(lucene)查询原理(1)-lucece查询逻辑介绍
  • Python与ArcGIS系列（十六）重复节点检测
  • 【Java用法】Hutool树结构工具-TreeUtil快速构建树形结构的两种方式 + 数据排序
  • Navicat 技术指引 | 连接 GaussDB 分布式
  • RocketMQ-RocketMQ高性能核心原理（流程图）
  • Docker的安装与简单操作命令
  • CSS——标准流、浮动、Flex布局
  • GO设计模式——7、适配器模式（结构型）
  • SAP UI5 walkthrough step7 JSON Model
  • 伦茨科技宣布ST17H6x芯片已通过Apple Find My「查找」认证
  • HTML5 Audio/Video 标签、属性、方法、事件汇总（详细）
  • 目标检测器技术演进简史
  • 3D点云：平面模型上提取凸（凹）多边形方法
  • jenkins中“Jenkins Plot Plugin”的使用方法，比较两个excel的数据差异
  • LeetCode124.二叉树中最大路径和
  • 微信小程序 - 格式化操作 moment.js格式化常用使用方法总结大全
  • 代理IP怎么使用？Mac苹果系统设置http代理IP教程
  • react-photo-view 的介绍、安装、使用。
  • HarmonyOS鸿蒙操作系统架构开发
  • Gitleaks - 一款高效的Github仓库敏感信息泄露查询工具
  • 小程序自动更新功能
  • RHEL网络服务器
  • 云计算ACP认证考试题库0-100
  • harmonyOS开发技巧（二）——沉浸式以及状态栏高
  • 前端知识笔记（三十七）———Django与Ajax
  • 2023年12月8日：UI登陆界面
  • 用C语言实现队列的顺序结构