python取aws s3文件

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python取aws s3文件相关的知识,希望对你有一定的参考价值。

import boto3
import io
import pandas as pd

# Set below parameters
bucket = ‘<bucket name>‘
key = ‘data/training/iris.csv‘
endpointName = ‘decision-trees‘

# Pull our data from S3
s3 = boto3.client(‘s3‘)
f = s3.get_object(Bucket=bucket, Key=key)

# Make a dataframe
shape = pd.read_csv(io.BytesIO(f[‘Body‘].read()), header=None)

以上是关于python取aws s3文件的主要内容,如果未能解决你的问题,请参考以下文章

我如何使用 aws lambda 将文件写入 s3 (python)?

Flink`textInputFormat`不处理来自aws S3`Source`文件系统的GZ压缩文件

AWS Lambda (Python) 无法在 S3 中解压缩和存储文件

如何使用 python 将流上传到 AWS s3

使用 python 从 AWS S3 到 PostgreSQL Amazon RDS 的 CSV 文件

Fluentd 日志处理-S3拉取日志处理