如何在 Huggingface 中从 CSV 加载自定义数据集

Posted 2023-03-29

技术标签:

【中文标题】如何在 Huggingface 中从 CSV 加载自定义数据集【英文标题】：How to load custom dataset from CSV in Huggingfaces 【发布时间】：2021-11-07 06:59:57 【问题描述】：

我想使用 huggingfaces-transformers 从 csv 加载自定义数据集

【问题讨论】：

【参考方案1】：

来自https://huggingface.co/docs/datasets/loading_datasets.html#loading-from-local-files

dataset = load_dataset('csv', data_files='train': "train_set.csv",'test': "test_set.csv")

【讨论】：

以上是关于如何在 Huggingface 中从 CSV 加载自定义数据集的主要内容，如果未能解决你的问题，请参考以下文章