使用 talend 或 sqoop 将数据从 hbase 导入 hdfs

Posted 2023-04-18

【中文标题】使用 talend 或 sqoop 将数据从 hbase 导入 hdfs

【英文标题】：import data from hbase to hdfs using talend or sqoop

【发布时间】：2017-01-16 12:05:55

【问题描述】：

是否可以使用 Talend 或 sqoop 将数据从 hbase 导出到 hdfs？如果它不是直接可用的，那么实现这种用例的最佳实践是哪种解决方法

【参考方案1】：

是的，你可以使用 talend。

在 talend 的大数据版本中，您有 hdfs 组件和 hbase 组件。 你需要把 tHbaseinput -> tmap -> tHDFSOutput.

【参考方案2】：

是的，有可能！

使用@Théo 回答的 Talend，但不使用 Sqoop，因为它的 Sql to Hadoop 不是 Inter-Hadoop 解决方案，可能有解决方法使用 Sqoop 来实现，但这不是理想的用例。

但实际上，HBase 将其数据存储在 HDFS 中。如果您想将它们导出为文件或使用 Hive 查询它们，您可以创建一个读取 HBase 数据的 Hive 表，请参阅this。