当前位置：首页 > article >正文

单节点hadoop搭建

article 2024/11/13 14:44:53

下载Hadoop-bin.*.tar.gz

解压文件，配置HADOOP_HOME

编辑文件etc/hadoop/hadoop-env.sh配置JAVA_HOME
配置etc/hadoop/core-site.xml文件

<configuration>
        <property>
                <name>fs.defaultFS</name>
                <value>hdfs://dachengnode1:9000</value>
        </property>
        <property> 
                //指定tmp目录的位置 tmp目录提前创建好
                <name>hadoop.tmp.dir</name>
                <value>/opt/behave/hadoop-2.8.5/tmp</value>
        </property>
</configuration>

添加配置etc/hadoop/hdfs-site.xml文件

<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>

添加配置etc/hadoop/mapred-site.xml

<property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
</property>

添加配置etc/hadoop/yarn-site.xml

<property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>

格式化hdfs

bin/hdfs namenode -format

启动hads

 $ sbin/start-dfs.sh

启动yarn

$ sbin/start-yarn.sh

查看全文

http://www.kler.cn/a/162985.html

重构代码之内联临时变量

AtomicInteger 和 AtomicIntegerFieldUpdater的区别

【AI大模型】ELMo模型介绍：深度理解语言模型的嵌入艺术

LeetCode【0036】有效的数独

P8680 [蓝桥杯 2019 省 B] 特别数的和

【Android、IOS、Flutter、鸿蒙、ReactNative 】约束布局

C# WPF上位机开发（简易图像处理软件）

blender 数字键盘上的快捷键

使用poi-tl填充word模板，并转化为pdf输出

从根上理解elasticsearch(lucene)查询原理(1)-lucece查询逻辑介绍

Python与ArcGIS系列（十六）重复节点检测

【Java用法】Hutool树结构工具-TreeUtil快速构建树形结构的两种方式 + 数据排序

Navicat 技术指引 | 连接 GaussDB 分布式

RocketMQ-RocketMQ高性能核心原理（流程图）

Docker的安装与简单操作命令

CSS——标准流、浮动、Flex布局

GO设计模式——7、适配器模式（结构型）

SAP UI5 walkthrough step7 JSON Model

伦茨科技宣布ST17H6x芯片已通过Apple Find My「查找」认证

HTML5 Audio/Video 标签、属性、方法、事件汇总（详细）

目标检测器技术演进简史

3D点云：平面模型上提取凸（凹）多边形方法

jenkins中“Jenkins Plot Plugin”的使用方法，比较两个excel的数据差异

LeetCode124.二叉树中最大路径和

微信小程序 - 格式化操作 moment.js格式化常用使用方法总结大全

代理IP怎么使用？Mac苹果系统设置http代理IP教程

下载Hadoop-bin.*.tar.gz

相关文章：