一起来搭建Hadoop集群吧

一.克隆集群所需虚拟机

跟搭建ELK集群操作是一样的,这里不做赘述。详情请查看这篇文章:
https://blog.****.net/Zhuuu_ZZ/article/details/108364690

二.添加互信

在添加互信之前先在vi /etc/hosts添加ip 主机名
一起来搭建Hadoop集群吧
完成之后添加互信
一起来搭建Hadoop集群吧
注意:添加互信第三步执行时也需要给本虚拟机执行即ssh-copy-id -i .ssh/id_rsa.pub -p22 [email protected]本虚拟机hostname

三.修改配置文件

在/opt/hadooptest1/etc/hadoop/下

1.vi hdfs-site.xml

修改hdfs-site.xml:
一起来搭建Hadoop集群吧

2.vi mapred-site.xml

一起来搭建Hadoop集群吧

3.vi ./slaves

一起来搭建Hadoop集群吧

4.到此集群配置完成,可以多开配置,也可以配置到一台机器后发送到集群内的其他机器里

一起来搭建Hadoop集群吧

三.启动hadoop集群

对于集群来说,所有机器都是一体的,所以启动hdfs时只需要在主机上格式化hadoop namenode -format,再start-all.sh即可。
成功展示页面:
主节点:
一起来搭建Hadoop集群吧
副节点1:
一起来搭建Hadoop集群吧
副节点2:
一起来搭建Hadoop集群吧