大数据实验二——HDFS
实验步骤:
1、Windows里安装JDK+Eclipse+Maven
2、Eclipse配置Maven:
①修改settings.xml
在安装所在文件夹\apache-maven-3.6.0下面,新建\repository文件夹,作为Maven本地仓库。在文件settings.xml里添加 <localRepository>E:\eclipse\apache-maven-3.6.0\repository</localRepository>。
②配置Maven的installation和User Settings
【Preferences】→【Maven】→【Installations】配置Maven安装路径,【User Settings】配置settings.xml的路径。
③添加pom.xml依赖
依赖(Maven Repository: hadoop)所在网址:https://mvnrepository.com/tags/hadoop ,找到对应版本的三个依赖(如下),拷贝至pom.xml的<project>与</project>之间,保存之后自动生成Maven Dependencies。
3、在Eclipse里新建Maven Project,新建包,新建class,编程并运行4个Java程序
①在Eclipse里新建Maven Project
②输入com.bla,项目名称HDFSTest。
③自动生成Maven项目,新建包hdfs.files,包里新建class:4个java文件
4、使用hdfs的shell命令查看运行结果:
5、使用web console查看运行结果