使用Pig对手机上网日志进行分析

Posted cynchanpin

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用Pig对手机上网日志进行分析相关的知识,希望对你有一定的参考价值。

在安装成功Pig的基础上。本文将使用Pig对手机上网日志进行分析,详细过程例如以下:

写在前面

手机上网日志文件phone_log.txt。文件内容 及 字段说明部分截图例如以下

需求分析

显示每一个手机号的上网流量情况。

技术分享

依次完毕下面步骤:

1、将Linux本地文件phone_log.txt上传到HDFS

技术分享

技术分享

运行命令dump C; 查看经过以上步骤处理后的结果

技术分享

技术分享

查看经过以上步骤处理后的结果

技术分享

OK。齐活!












以上是关于使用Pig对手机上网日志进行分析的主要内容,如果未能解决你的问题,请参考以下文章

PIG 加载 CSV - 地图类型错误

苹果手机分析数据,重启原因谁能看懂!谢谢

MapReduce实现手机上网日志分析(分区)

Squid透明代理+ACL访问控制+日志分析

苹果手机crash日志怎么用symbolicatecrash分析

如何查看Syslog日志