使用Pig对手机上网日志进行分析

在成功安装Pig的基础上,本文将使用Pig对手机上网日志进行分析,具体步骤如下:

写在前面

手机上网日志文件phone_log.txt,文件内容 及 字段说明部分截图如下

需求分析

显示每个手机号的上网流量情况。

使用Pig对手机上网日志进行分析

依次完成以下步骤:

1、将Linux本地文件phone_log.txt上传到HDFS

使用Pig对手机上网日志进行分析

使用Pig对手机上网日志进行分析

执行命令dump C; 查看经过以上步骤处理后的结果

使用Pig对手机上网日志进行分析

使用Pig对手机上网日志进行分析

查看经过以上步骤处理后的结果

使用Pig对手机上网日志进行分析

OK,齐活!


转载于:https://my.oschina.net/stevie/blog/692042