初步认识kafka
Posted 大数据和人工智能躺过的坑
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了初步认识kafka相关的知识,希望对你有一定的参考价值。
Kafka是用于日志处理的分布式消息队列,Kafka使用scala语言开发的。
各个开源分布式处理系统Cloudera、Apache Storm、Spark都支持与Kafka集成。其日志处理的一个场景:Kafka采集日志以后,经过spark分布式计算,将日志数据导入到HBase中。Kafka采集的日志主要包括用户行为及系统运行日志等。在大数据领域中,Spark、Akka、Kafka都是用Scala语言开发的,因此凸显了scala语言的巨大价值。
以上是关于初步认识kafka的主要内容,如果未能解决你的问题,请参考以下文章