1.准备工作 1)通过克隆或者其他方式获得可互相通信的多台节点(本文为3台虚拟机:hadoop101.hadoop102.hadoop103) 2)配置节点的静态IP.hostname.hosts,参考:CentOS7设置hostname.hosts(永久更改).静态IP地址 [root@hadoop101 jdk1..0_121]# vi /etc/hosts 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.loc…

1.每台机器都需要执行,生成自己的密钥 # ssh-keygen -t rsa 过程中遇到选项,全部enter #cd ~/.ssh # cat id_rsa.pub > authorized_keys # chmod 600 authorized_keys 分别在node2,node3上的~/目录下建立.ssh目录,建好后的.ssh目录默认是隐藏的 mkdir .ssh node1上执行复制命令: #scp ~/.ssh/authorized_keys root@node2.sunny.cn:…

在启动Hadoop时候报了这样一个错误: Starting namenodes on [hadoop] hadoop: (Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). 问题原因:在于没有设置SSH免密登录的问题. 网上有很多种方法解决,改sshd_config,改ssh_config等等,改了半天发现都不对. 因为把配置文件改的乱七八糟,于是重装了ssh,重装过程如下(如果没有改动的话请忽略这部分!):…

一.以3个几点为例,分别为master.slave01.slave02 1.分别生成自己节点密钥对 master: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsaslave01: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsaslave02: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 2.分别将slave01.slave02上的公…

一.准备工作 1) 用客户端工具(ssh client或者putty)连接到linux服务器.在root用户下输入命令 vi /etc/hosts,用vi编辑hosts文件,如下: #127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 #:: localhost localhost.localdomain localhost6 localhost6.localdomain6 192.168.1.…

免密码ssh设置 现在确认能否不输入口令就用ssh登录localhost: $ ssh localhost 如果不输入口令就无法用ssh登陆localhost,执行下面的命令: . 并修改hosts映射: 添加:(配置三台机器hosts,保证可以互相访问) $ vi /etc/hosts 127.0.0.1 localhost.localdomain localhost 192.168.126.10 master.localdomain master 192.168.126.20 slave1.…

转自:http://blog.csdn.net/aichaoguy/article/details/11693269#!/bin/bash #check whether package 'expect' is installed. if rpm -q expect then echo "Good">/dev/null else echo "You Must install package \'expect\'"; exit 0 fi #开始产生exp文件 ca…

首先编写脚本生成集群服务器列表: hostsList.sh #!/bin/bash preIp="11.11.225." pwd="dyj2017" for i in `seq 2 80`; do echo -e $preIp$i $pwd >> hostsLists.txt done hostsLists.txt 11.11.225.2 dyj2017 11.11.225.3 dyj2017 11.11.225.4 dyj2017 .... 11.11…

今天给大家总结一下hadoop集群之间免登陆的步骤 node1 ssh node4 1.在node1中生成密钥 [root@node1 ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 2.追加到本地文件夹 [root@node1 ~]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 3.传输到需要免登陆的机器node4 [root@node1 ~]# scp ./id_dsa.pub root@node…

1. 安装ntp时间同步工具 yum -y install ntp ntpdate #安装ntpdate时间同步工具 ntpdate cn.pool.ntp.org #设置时间同步 hwclock --systohc #将系统时间写入硬件时间 timedatectl #查看系统时间 一般来讲,经过这几部之后,应该就OK了.关于时间服务的网址,可以到http://www.ntp.org.cn/pool.php查阅. 有些时候,在执行ntpdate cn.pool.ntp.org的时候会出现下面的错…