一起聊聊Kafka Connect

Posted BitTiger

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了一起聊聊Kafka Connect相关的知识,希望对你有一定的参考价值。

点击标题下「码农的自我修养」快速调戏我们

1Kafka Connect简介

Kafka Connect可以更方便的创建和管理Data Pipelines。它为Kafka和其它系统创建规模可扩展的、可靠的流数据提供了一个简单的工具。Kafka Connect借助Connectors使得将海量数据从Kafka导入和导出的任务变得简单快捷。Kafka Connect可以将整个的数据库注入到Kafka的Topic中,或者将服务器的系统监控指标注入到Kafka,然后像正常的Kafka流处理机制一样进行数据流处理。Kafka Connnect有两个核心概念:Source和Sink。 Source负责导入数据到Kafka,Sink负责从Kafka导出数据,它们都被称为Connector。 

一起聊聊Kafka ConnectKafka背后的公司Confluent鼓励社区创建更多的开源的Connector,将Kafka生态圈壮大起来,促进Kafka Connnect的应用。


2讲座详情


主题】: 

一起聊聊Kafka Connect


大纲】: 

1. 为什么要开发Kafka Connect

2. Kafka Connect的设计思想

3. Kafka Connect是如何做到Delivery guarantee, Higly scalble和Fault Tolerant的

4. Kafka Connect的动态任务分配是如何实现的

5. 如何设计实现一个实现Exactly Once Delivery Guarantee的Kafka Connector

6. Kafka Connect如何和Stream Processing Framework集成


分享时间】:

美西时间5月11日(周三)晚7点30

美东时间5月11日(周三)晚10点30

北京时间5月12日(周四)早10点30


在线分享】: 

      采用的是先进的Webinar视讯会议系统,用户在自己的电脑上使用我们提供的会议链接登入成功后,可以清晰的看到演讲嘉宾的屏幕内容,也可以听到演讲嘉宾的声音,还可以提问发言。


活动主办方】:  

       -太阁实验室

      - 神州专车北美实验室



主讲嘉宾


一起聊聊Kafka Connect 

Liquan Pei:

毕业于马萨诸塞大学阿默斯特分校。现就职于硅谷大数据创业公司Confluent,任软件工程师。


报名流程


太阁实验室

有趣,有用,有效;
刷项目,做实战,捅破技术那层纸
论码农的自我修养

WeChat ID: bit_tiger

长按二维码,关注我哟~





以上是关于一起聊聊Kafka Connect的主要内容,如果未能解决你的问题,请参考以下文章

聊聊kafka结构,kafka基础了解

聊聊 Kafka:Kafka 消息重复的场景以及最佳实践

聊聊 Kafka:Kafka 消息重复的场景以及最佳实践

聊聊 Kafka: Kafka 为啥这么快?

聊聊 Kafka: Kafka 为啥这么快?

聊聊 Kafka Consumer 那点事