MySQL-To-JSON 的 Kafka 生产者 Maxwell | 软件推介

Posted 2021-04-30 OSC开源社区

授权协议:Apache-2.0

开发语言:Java Ruby SHELL

操作系统:跨平台

Maxwell 是一个读取 mysql binlogs 并将修改行字段的更新写入 Kafka, Kinesis, RabbitMQ, Google Cloud Pub/Sub 或 Redis (Pub/Sub or LPUSH) 以作为 JSON 的应用程序。

Maxwell 拥有可对底层进行操作的操作栏(operational bar)，可生成一致、易于获取的更新流，你可以轻松“固定”流处理系统的一些优点，而无需通过整个代码库来添加（不可靠）检测点。 

• 常见用例包括 ETL、缓存构建/到期、指标收集、搜索索引和服务间通信。

• 可在表的初始加载过程中执行 SELECT * from table (bootstrapping)

• 支持在 master promotion 上的自动位置恢复

• 为 Kakfa 提供灵活的分区方案 —— 按数据库、表、主键或字段进行
  

Maxwell 通过充当完整的 mysql 副本来完成所有这些操作，包括用于 create/alter/drop 语句的 SQL 解析器。

示例

• https://gitee.com/mirrors/Maxwell
  

开源中国征稿开始啦！

开源中国 www.oschina.net 是目前备受关注、具有强大影响力的开源技术社区，拥有超过 200 万的开源技术精英。我们传播开源的理念，推广开源项目，为 IT 开发者提供一个发现、使用、并交流开源技术的平台。

现在我们开始对外征稿啦！如果你有优秀的技术文章想要分享，热点的行业资讯需要报道等等，欢迎联系开源中国进行投稿。投稿详情及联系方式请参见：

推荐阅读

更多详情请查看阅读原文↓↓↓↓↓