如何将 s3 数据从一个 EMR 集群读取到另一个 EMR 集群？

Posted 2023-03-22

【中文标题】如何将 s3 数据从一个 EMR 集群读取到另一个 EMR 集群？

【英文标题】：How to read s3 data from one EMR cluster to another EMR cluster?

【发布时间】：2019-04-04 07:07:17

【问题描述】：

我有两个 EMR 集群，一个 EMR 集群在 S3 存储桶中有 CSV 文件。 现在，我有另一个 EMR 集群，必须从 EMR(s3) 存储桶中读取数据。

请找到截图。

如何从另一个 EMR s3 存储桶中读取数据？输入源是用于读取 csv 文件的 S3 存储桶。在同一个 EMR 中，我可以从 s3 存储桶中读取数据。

请帮助我。

非常感谢您提前提供的帮助。

【参考方案1】：

S3 是一个独立的亚马逊网络服务，S3 不绑定到任何 EMR 特定集群，您可以以相同的方式从任意数量的消费者（在本例中为 EMR）访问单个 S3 存储桶，只需确保 AWS IAM 策略/权限是正确的。