Hadoop集群搭建(七)~完全分布运行模式

我使用的是完全分布运行模式。上一篇安装了JDK，本篇记录Hadoop的安装，版本2.7.2

（一）配置文件

1，先将hadoop安装包解压到module目录下

2，配置hadoop-env.sh。vi /opt/module/hadoop-2.7.2/etc/hadoop/hadoop-env.sh，添加java_home

3，配置：core-site.xml

4，配置：hdfs-site.xml。

5，配置yarn-env.sh。

6，配置yarn-site.xml。

7，配置mapred-env.sh。

8，配置mapred-site.xml

9，配置slaves

（二）分发到集群

1，把master上的安装目录，分发到slave1和slave2节点中

2，将master的profile文件，分发到slave1和slave2节点中。记得要source一下profile才能生效

（三）启动集群

1，集群是第一次启动，需要格式化NameNode

2，启动HDFS

3，启动yarn。注意resourmansger在哪个节点就在哪启动yarn

（四）测试集群

1，在HDFS上创建目录

2，上传数据到HDFS

3，运行wordcount案例

4，查看结果

下一篇，Hive安装