三台电脑搭建Hadoop集群

在寝室搭建Hadoop集群,三个室友都没有Linux,有两个装好了双系统,一个引导有问题放弃了。因为已经搭建完,这里记录一些坑点。
三台电脑搭建Hadoop集群

三个主机通过交换机相连,分别设置独立IP,无需设置网关。
先分别都能ping通,再互相都可SSH免密码登录。
配置集群配置(各个结点的配置文件需相同),这里我的主机是master,其他俩主机为slave。

注意这里主节点及其他各个节点用户名需相同。我们这里都新建了hadoop-neu用户。
注意写/etc/hosts/etc/hostname文件。

集群启动:

三台电脑搭建Hadoop集群

三台电脑搭建Hadoop集群

处理任务:

主节点

三台电脑搭建Hadoop集群

slaves

三台电脑搭建Hadoop集群

三台电脑搭建Hadoop集群