大数据实验二——HDFS

实验步骤:

1、Windows里安装JDK+Eclipse+Maven

2、Eclipse配置Maven:

①修改settings.xml

在安装所在文件夹\apache-maven-3.6.0下面,新建\repository文件夹,作为Maven本地仓库。在文件settings.xml里添加 <localRepository>E:\eclipse\apache-maven-3.6.0\repository</localRepository>。

②配置Maven的installation和User Settings

【Preferences】→【Maven】→【Installations】配置Maven安装路径,【User Settings】配置settings.xml的路径。

③添加pom.xml依赖

依赖(Maven Repository: hadoop)所在网址:https://mvnrepository.com/tags/hadoop ,找到对应版本的三个依赖(如下),拷贝至pom.xml的<project>与</project>之间,保存之后自动生成Maven Dependencies。

3、在Eclipse里新建Maven Project,新建包,新建class,编程并运行4个Java程序

①在Eclipse里新建Maven Project

大数据实验二——HDFS

②输入com.bla,项目名称HDFSTest。

大数据实验二——HDFS

③自动生成Maven项目,新建包hdfs.files,包里新建class:4个java文件

大数据实验二——HDFS

4、使用hdfs的shell命令查看运行结果:

大数据实验二——HDFS

大数据实验二——HDFS

大数据实验二——HDFS

5、使用web console查看运行结果

大数据实验二——HDFS