运行hdfs的wordcount程序时出现的错误

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://mp.csdn.net/mdeditor#

INFO mapreduce.Job: map 0% reduce 0% 19/10/17 15:49:28 INFO mapreduce.Job: Job job_1571298343749_0002 failed with state FAILED due to: Application application_1571298343749_0002 failed 2 times due to AM Container for appattempt_1571298343749_0002_000002 exited with exitCode: -103
运行hdfs的wordcount程序时出现的错误
这个错误报的是配置容器内存限制时,虚拟内存与物理内存的比值不够大,yarn.scheeduler.maximum属性设置为其默认值8192,比值设定为2.1。此时报这个错误解决办法是增大比值,最开始我是增大到2.5,但是还是小了,不得已到了5,但是根据自己电脑来定自己需要多大的比值就行。

修改文件内容如下:
运行hdfs的wordcount程序时出现的错误

运行hdfs的wordcount程序时出现的错误
插一句,在hdfs分布式系统建立了输入文档,但千万不要建立输出文档,而且每一次不成功之后都会在系统界面记录下来,所以每一次也要不一样,除非你每一次不成功将其删除。

PS:第一次写见谅哈哈