BigQuery - 在 UI 上复制表格 - 不复制所有表格

Posted

技术标签:

【中文标题】BigQuery - 在 UI 上复制表格 - 不复制所有表格【英文标题】:BigQuery - Copy table on UI - Does not copy all tables 【发布时间】:2021-03-12 10:00:51 【问题描述】:

我正在使用 BigQuery 控制台中的“复制表”功能将数据从美国数据中心移动到欧盟数据中心。它适用于具有

源数据集包括 1634 个表 复制表完成后,包括1439个表

我知道每天 1000 份的限制,复制 BQ 数据传输任务也正确地为第二天安排自己,以继续处理超过 1000 份限制的表格。任务完成没有错误,但仍然没有复制许多表。

当我在不检查“覆盖目标表”的情况下重新运行复制例程时,它会再次遍历表,正确显示它正在跳过现有表,但由于某种原因没有看到应该复制的缺失表。摘要显示“传输运行已成功完成”。并在日志中显示“在我们区域的源数据集 projectID.datasetID 中标识了 0 个要复制的表。跳过了 1490 个已经存在的表。”

但还有 195 个非空表要复制。

我错过了什么?

【问题讨论】:

【参考方案1】:

我不知道为什么,但我只是试图重新运行任务,现在所有丢失的表都被复制了......奇怪......

【讨论】:

以上是关于BigQuery - 在 UI 上复制表格 - 不复制所有表格的主要内容,如果未能解决你的问题,请参考以下文章

BigQuery 表的扁平数据并将扁平数据复制到新的 BigQuery 表

如何进行 bigquery 传输:数据集投影

删除 BigQuery 列的一种可能方法

在 Google BigQuery UI 中识别奇怪查询的来源

使用 Java 从 BigQuery 到 BigQuery 表的表复制中的 JSON 解析错误

使用来自 Google BigQuery 的数据更新电子表格不起作用