DataX 与 Sqoop 对比

Posted 闭关苦炼内功

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了DataX 与 Sqoop 对比相关的知识,希望对你有一定的参考价值。

功能DataXSqoop
运行模式单进程多线程MR
分布式 支持,可以通过调度系统规避支持
流控有流控功能需要定制
统计信息已有一些统计,上报需定制没有,分布式的数据收集不方便
数据校验在core部分有校验功能没有,分布式的数据收集不方便
监控需要定制需要定制

以上是关于DataX 与 Sqoop 对比的主要内容,如果未能解决你的问题,请参考以下文章

数据处理 大数据数据抽取 ETL 工具 DataX KettleSqoop

数据处理 大数据数据抽取 ETL 工具 DataX KettleSqoop

数据处理 大数据数据抽取 ETL 工具 DataX KettleSqoop

DataX Vs Sqoop

datax和canal对比

如何实现交易数据到大数据平台的实时同步