大查询：出乎意料。请在加载 53GB CSV/1.4GB gZIP 时重试

Posted 2023-03-24

【中文标题】大查询：出乎意料。请在加载 53GB CSV/1.4GB gZIP 时重试

【英文标题】：Bigquery : Unexpected. Please try again when loading a 53GB CSV/ 1.4GB gZIP

【发布时间】：2013-03-30 16:53:59

【问题描述】：

我试图将 1.4Gb gZIP 数据加载到我的 BigQuery 表中，但出现意外错误。请始终重试

job_7f1aa8d29ae641459c82243530eb1c65

我正在尝试加载结构行 ID、订单优先级、折扣、单价、运费、客户 ID、客户名称、发货方式、产品类别、产品子类别、产品基础利润、地区、州或省,城市,邮政编码,订单日期,发货日期,利润,新订购数量,销售额,订单编号

错误并不清楚发生了什么问题。

还有其他人遇到过这个错误吗？

谢谢。

【问题讨论】：

你能说得更具体点吗？例如，描述 CSV 的结构、定义的架构、数据示例等。

您应该使用这些信息更新您的问题，而不是放在评论中。

【参考方案1】：

您的工作似乎超时了 - 一个 53 GB 的 CSV 文件需要在一个线程中处理很多。最佳做法是将数据拆分为多个块，或上传可并行处理的未压缩数据。

我正在稍微提高允许的时间，当发生这种情况时，我们将努力改进错误消息。