hadoop local、伪分布模式-白红宇的个人博客

hadoop local、伪分布模式

发布日期：2021-11-09 11:16:27 浏览次数：58 分类：技术文章

本文共 878 字，大约阅读时间需要 2 分钟。

local模式：

把安装包解压到 /usr/local 下

[hadoop@master local]$ sudo tar -zxvf hadoop-2.7.3.tar.gz

创建一个软连接

[hadoop@master local]$ sudo ln -s hadoop-2.7.3 hadoop

增加环境变量

[hadoop@master local]$ vi ~/.bash_profile

增加

export JAVA_HOME=/usr/

export HADOOP_HOME=/usr/local/hadoop

export PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH

生效

[hadoop@master local]$ source ~/.bash_profile

改变程序宿主

[hadoop@master local]$ sudo chown -R hadoop:hadoop hadoop-2.7.3

使用一个hadoop命令，效果等同于 ls /

[hadoop@master hadoop]$ hadoop fs -ls /

使用mapreduce 运行一个程序（统计一个文件中的单词数）

[hadoop@master out]$ mkdir input

[hadoop@master out]$ vi input/test.txt

[hadoop@master out]$ hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar wordcount ./input ./out

……

[hadoop@master out]$ cd out/

[hadoop@master out]$ cat part-r-00000

21e 1

23 1

2f 1

adg 1

asdfs 1

by4hrthf 1

gdxzg 1

伪分布模式：

转载地址：https://blog.csdn.net/zonghua521/article/details/78198165 如侵犯您的版权，请留言回复原文章的地址，我们会给您删除此文章，给您带来不便请您谅解！

上一篇：Cacti 邮件报警

下一篇：非对称加密秘钥登录

关于作者

喝酒易醉，品茶养心，人生如梦，品茶悟道，何以解忧？唯有杜康！

-- 愿君每日到此一游！