一起聊聊Kafka Connect
Posted BitTiger
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了一起聊聊Kafka Connect相关的知识,希望对你有一定的参考价值。
1Kafka Connect简介
Kafka Connect可以更方便的创建和管理Data Pipelines。它为Kafka和其它系统创建规模可扩展的、可靠的流数据提供了一个简单的工具。Kafka Connect借助Connectors使得将海量数据从Kafka导入和导出的任务变得简单快捷。Kafka Connect可以将整个的数据库注入到Kafka的Topic中,或者将服务器的系统监控指标注入到Kafka,然后像正常的Kafka流处理机制一样进行数据流处理。Kafka Connnect有两个核心概念:Source和Sink。 Source负责导入数据到Kafka,Sink负责从Kafka导出数据,它们都被称为Connector。
Kafka背后的公司Confluent鼓励社区创建更多的开源的Connector,将Kafka生态圈壮大起来,促进Kafka Connnect的应用。
2讲座详情
【主题】:
一起聊聊Kafka Connect
【大纲】:
1. 为什么要开发Kafka Connect
2. Kafka Connect的设计思想
3. Kafka Connect是如何做到Delivery guarantee, Higly scalble和Fault Tolerant的
4. Kafka Connect的动态任务分配是如何实现的
5. 如何设计实现一个实现Exactly Once Delivery Guarantee的Kafka Connector
6. Kafka Connect如何和Stream Processing Framework集成
【分享时间】:
美西时间5月11日(周三)晚7点30
美东时间5月11日(周三)晚10点30
北京时间5月12日(周四)早10点30
【在线分享】:
采用的是先进的Webinar视讯会议系统,用户在自己的电脑上使用我们提供的会议链接登入成功后,可以清晰的看到演讲嘉宾的屏幕内容,也可以听到演讲嘉宾的声音,还可以提问发言。
【活动主办方】:
-太阁实验室
- 神州专车北美实验室
Liquan Pei:
毕业于马萨诸塞大学阿默斯特分校。现就职于硅谷大数据创业公司Confluent,任软件工程师。
太阁实验室
WeChat ID: bit_tiger
长按二维码,关注我哟~
以上是关于一起聊聊Kafka Connect的主要内容,如果未能解决你的问题,请参考以下文章