互联网大数据日志收集离线实时分析实战案例

Posted ZeroTeam_麒麟

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了互联网大数据日志收集离线实时分析实战案例相关的知识,希望对你有一定的参考价值。

本文通过这个项目可以学到那些东西:

Flume 配置与使用
Kafka 配置与使用
Kafka与Flume整合
KafkaJava API调用
Hadoop 搭建配置
Mapreduce 离线分析/数据清洗
Storm  实时分析
Sqoop 迁移数据
Hbase 配置与使用

以上是关于互联网大数据日志收集离线实时分析实战案例的主要内容,如果未能解决你的问题,请参考以下文章

收集分析线上日志数据实战——ELK

收集分析线上日志数据实战——ELK

电商大数据项目-推荐系统实战之实时分析以及离线分析

大数据采集清洗处理:使用MapReduce进行离线数据分析完整案例

大数据采集清洗处理:使用MapReduce进行离线数据分析完整案例

使用Flume+Kafka+SparkStreaming进行实时日志分析