实验三 编程调试WordCount程序
一、实验目的: MapReduce架包、调试WordCount程序
二、实验过程与方法:
1、在HDFS的基础上运行以下四个程序
2、对HDFSFilefExist.java程序进行打包。
①、先将HDFSFilefExist.java程序从hdfs.files包中分离出来,它会自动形成另一个包default.package。
②、对分离出来的default.package包再次进行打包
(1)选中default.package右击,选择导出→Java→JAR file,然后点击下一步
(2)选择存放的路径,最后点击Finish,打包完成。
3、传输、解压
(1)打开SecureCRT,点击SecureCRT 【File】→【Connect SFTP Session】开启sftp操作,运行命令对其进行传输
(2)解压
4、运行wordcount程序
执行命令cd /home/why/hadoop-2.7.3/share/hadoop/mapreduce 转入wordcount所在路径对其进行运行hadoop jar mp.jar HDFSFileIfExist
5、运行完成后出现“文件已存在”,则表示成功