Hadoop教程

ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop

本文主要是介绍ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

一、配置免密登录

1.1Hadoop上进行操作

配置master免密登录到slave。

ssh-keygen -t rsa

过程中输入3次enter,直至如图;

然后,目录切换到/home/w/.ssh下,ls看下下属的文件:

继续输入,复制公钥文件:

cat id_rsa.pub >> authorized_keys

修改authorized_keys文件的权限:

chmod 600 ~/.ssh/authorized_keys

将authorized_keys文件复制到slave节点的根目录下:

scp ~/.ssh/authorized_keys w@hadoop1:~/

过程中输入yes完成复制。

1.2Hadoop2、Hadoop3上进行操作

生成密钥:

ssh-keygen -t rsa

从master的authorized_keys文件复制到本机,用于中转。

将从master复制到slave的authorized_keys文件移动到hadoop2中的.ssh文件夹中:

mv ~/authorized_keys ~/.ssh/

修改hadoop2中的authorized_keys文件的权限

chmod 600 ~/.ssh/authorized_keys

进到.ssh文件夹,输入ls -l查看权限:

同样的步骤在hadoop3上重复。

1.3测试免密登录

在hadoop1上输入:

ssh hadoop2

然后输入yes后,前侧显示hadoop2即为配置成功。

 输入exit即可退出hadoop2。

 

二、配置Hadoop

上一篇文章提到jdk安装,当时Hadoop安装包已经上载到虚拟机上。

 

这篇关于ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!