第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战

Posted Frank201608

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战相关的知识,希望对你有一定的参考价值。

Flume

Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。

kafka
http://kafka.apache.org/

flume
http://flume.apache.org/FlumeUserGuide.html

zookeeper
http://zookeeper.apache.org/

以上是关于第53课: Spark大型项目广告点击项目技术骨架实现之Spark+Kafka+Flume实战的主要内容,如果未能解决你的问题,请参考以下文章

[Spark/Scala] 180414|大数据实战培训 Spark大型项目实战:电商用户行为分析大数据平台 大数据视频教程

spark项目实战(一~~九)

基于spark和flink的电商数据分析项目

第54课: 作业讲解与广告点击实现代码

第55课: 在线广告点击流处理代码的分析和实现

第14课:Spark 分布式模型训练及调优(实战)