一起来搭建Hadoop集群吧
搭建Hadoop集群
一.克隆集群所需虚拟机
跟搭建ELK集群操作是一样的,这里不做赘述。详情请查看这篇文章:
https://blog.****.net/Zhuuu_ZZ/article/details/108364690
二.添加互信
在添加互信之前先在vi /etc/hosts添加ip 主机名
完成之后添加互信
注意:添加互信第三步执行时也需要给本虚拟机执行即ssh-copy-id -i .ssh/id_rsa.pub -p22 [email protected]本虚拟机hostname
三.修改配置文件
在/opt/hadooptest1/etc/hadoop/下
1.vi hdfs-site.xml
修改hdfs-site.xml:
2.vi mapred-site.xml
3.vi ./slaves
4.到此集群配置完成,可以多开配置,也可以配置到一台机器后发送到集群内的其他机器里
三.启动hadoop集群
对于集群来说,所有机器都是一体的,所以启动hdfs时只需要在主机上格式化hadoop namenode -format,再start-all.sh即可。
成功展示页面:
主节点:
副节点1:
副节点2: