Cloud Dataflow 中的“辅助输入”是不是支持从 BigQuery 视图中读取？

Posted 2023-03-25

【中文标题】Cloud Dataflow 中的“辅助输入”是不是支持从 BigQuery 视图中读取？

【英文标题】：Do 'side inputs' in Cloud Dataflow support reading from BigQuery views?Cloud Dataflow 中的“辅助输入”是否支持从 BigQuery 视图中读取？

【发布时间】：2015-03-20 22:32:56

【问题描述】：

尝试将侧输入指向 BigQuery 视图，而不是直接指向 BigQuery 表。它不会产生错误，而只是返回 0 行。 View 在 BigQuery 中运行良好。

例如，给定一个视图引用了一个只有 1 行的表“types_test”：

在 BigQuery 中，它可以正常工作：

但是在 Dataflow 中使用视图作为侧输入返回 0 行：

INFO: Reading from BigQuery table <removed>:CPT_7414_PLAYGROUND.view_test
Mar 20, 2015 11:10:08 PM com.google.cloud.dataflow.sdk.io.BigQueryIO evaluateReadHelper
INFO: Number of records read from BigQuery: 0

侧输入是否支持 BigQuery 中的视图，或者您是否需要执行其他操作才能将视图用于侧输入？

【参考方案1】：

在常见问题解答中发现，当前不支持该视图。

http://goo.gl/ZVNTnp