4mysql-->kafka-->mysql

Posted vandh

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了4mysql-->kafka-->mysql相关的知识,希望对你有一定的参考价值。

本文实现mysql数据通过kafka消息队列,异步传输到mysql库表的全过程代码实现,包括kafka环境搭建,代码运行效果展示。全部使用Flink cdc最新版本实现,虽然代码精简,但确属全网最全,最完整的案例,没有之一。

一、kafka环境搭建

docker直接拉取kafka和zookeeper的镜像

docker pull wurstmeister/kafka

docker pull wurstmeister/zookeeper

首先需要启动zookeeper,如果不先启动,启动kafka没有地方注册消息。

docker run -it --name zookeeper -p 12181:2181 -d wurstmeister/zookeeper:latest

再启动kafka。

docker run -it --name kafka \\

-p 19092:9092 -d -e KAFKA_BROKER_ID=0 \\

-e KAFKA_ZOOKEEPER_CONNECT=localhost:12181 \\

-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.3.252:19092 \\

-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \\

wurstmeister/kafka:latest

以上是关于4mysql-->kafka-->mysql的主要内容,如果未能解决你的问题,请参考以下文章

4MySQL数据管理

4MySql的存储过程

4MYSQL----IN查询

4MySQL进程连接交互变量

4MySQL查询语句01

wamp环境单独安装(windows下apache2.4mysql5.5php5.5的版本)