使用 AWS Glue Scala 查询 Athena（添加分区）

Posted 2023-02-19

【中文标题】使用 AWS Glue Scala 查询 Athena（添加分区）

【英文标题】：Query Athena (Add Partition) using using AWS Glue Scala

【发布时间】：2019-04-08 08:22:21

【问题描述】：

是否有可能使用 Scala 从 Glue 脚本查询数据以 ALTER TABLE ADD PARTITION 在 Athena 的现有表中？

以及从 aws.athena.connections (OR) 扩展的可能库

使用 spark 查询要从（Glue 数据目录）添加的 Athena 表？

【参考方案1】：

您可以通过make a call to Athena 查询ALTER TABLE ADD PARTITION 或add partition via Glue API。但是，Glue 应该已经为您提供了 AWS 开发工具包，因此您可以使用适当的 Athena 或 Glue 客户端类。

如果您的作业在自定义 VPC 中运行，请确保可以访问 AWS 服务。