使用 Python 在 AWS Glue 中打开和读取文件

Posted 2023-02-18

【中文标题】使用 Python 在 AWS Glue 中打开和读取文件

【英文标题】：File open and read in AWS Glue with Python

【发布时间】：2022-01-17 18:34:00

【问题描述】：

我在下面有一个简单的 python 代码。这是用桌面编写的，现在我想将其重新创建为 aws 胶水或 lambda，我必须从 s3 目录中读取 testfile.csv 并将其放入 txt 中，如下所示。如何在 aws 胶水/lambda 环境中重新创建这种打开和读取。任何意见表示赞赏。

filepath = testfile.csv
txt = open(filepath).read()

【参考方案1】：

我已经找到了解决方案。第一行将文件存储为字节对象，第二行将其转换为字符串并存储到 txt。

object = s3client.get_object(Bucket='mybucket',Key='testfile.csv')
txt = (object['Body'].read().decode('utf-8'))