Hadoop输出参数信息介绍

本篇内容主要讲解“Hadoop输出参数信息介绍”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“Hadoop输出参数信息介绍”吧!

Counters:19

FileOutputFormatCounters

BytesWritten=19         //reduce输出到hdfs的字节数

FileSystemCounters

FILE_BYTES_READ=481

HDFS_BYTES_READ=38

FILE_BYTES_WRITTEN=81316

HDFS_BYTES_WRITTEN=19

FileInputFormatCounters

BytesRead=19     //map从hdfs读取的字节数

Map-ReduceFramework

Mapoutputmaterializedbytes=49

Mapinputrecords=2   //map读入的记录行数

Reduceshufflebytes=0

SpilledRecords=8

Mapoutputbytes=35

Totalcommittedheapusage(bytes)=266469376

SPLIT_RAW_BYTES=105

Combineinputrecords=0

Reduceinputrecords=4         //reduce从map端接收的记录行数

Reduceinputgroups=3         //reduce函数接收的key数量,即归并后的k2数量

Combineoutputrecords=0

Reduceoutputrecords=3     //reduce输出的记录行数

Mapoutputrecords=4         //map输出的记录行数

                                                  

到此，相信大家对“Hadoop输出参数信息介绍”有了更深的了解，不妨来实际操作一番吧！这里是亿速云网站，更多相关内容可以进入相关频道进行查询，关注我们，继续学习！