hadoop伪分布式之配置yarn并运行MR程序(WordCount)
发布日期:2021-05-09 08:30:43 浏览次数:20 分类:博客文章

本文共 1339 字,大约阅读时间需要 4 分钟。

1���������������

���1������yarn-env.sh���������JAVA_HOME

export JAVA_HOME=/opt/module/jdk1.8.0_11

���2������yarn-site.xml���������

yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.resourcemanager.hostname
hadoop01

���3���������mapred-env.sh

export JAVA_HOME=/opt/module/jdk1.8.0_11

���4������mapred-site.xml.template������������mapred-site.xml

mv mapred-site.xml.template mapred-site.xml

������������

mapreduce.framework.name
yarn

������������������

������NameNode���DataNode������������������jps���������������������������������������������hadoop-2.9.2������������

sbin/hadoop-daemon.sh start namenode

sbin/hadoop-daemon.sh start datanode

���1��� ������ResourceManager

sbin/yarn-daemon.sh start resourcemanager

���2���������NodeManager

sbin/yarn-daemon.sh start nodemanager

systemctl status firewalld.service���������������������

systemctl stop firewalld.service ������������������������

���3��� ������������

���4���������WordCount

���������������������

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.9.2.jar wordcount /user/gong/input /user/gong/output

������������������������

 

���������������

���50070���������

���������������sh yarn application -kill jobId 

上一篇:【python-leetcode637-树的宽度遍历】二叉树的层平均值
下一篇:【python-leetcode103-树的宽度遍历】二叉树的锯齿形层次遍历

发表评论

最新留言

留言是一种美德,欢迎回访!
[***.207.175.100]2025年04月30日 03时44分18秒