使用管道将分页添加到 dataflowjob 中的 Bigquery 查询

Posted

技术标签:

【中文标题】使用管道将分页添加到 dataflowjob 中的 Bigquery 查询【英文标题】:Adding Pagination to Bigquery query in dataflowjob using pipeline 【发布时间】:2016-08-22 20:00:39 【问题描述】:

我正在使用以下代码在数据流中执行 Bigquery 查询

p.apply(BigQueryIO.Read.fromQuery(getQuery()))

其中“p”是一个管道对象。

当我执行返回大量行的查询时,我的数据流作业出现错误“查询执行期间超出资源。”

有没有一种方法可以将分页添加到我的查询中?

提前致谢。

【问题讨论】:

【参考方案1】:

我更改了查询以删除 order by 子句,最后它对我有用

【讨论】:

以上是关于使用管道将分页添加到 dataflowjob 中的 Bigquery 查询的主要内容,如果未能解决你的问题,请参考以下文章

将分页添加到第 3 方模块 (OT-MiniNewsModule)

将分页添加到 asp 转发器功能 ASP.Net

有没有办法将分页器控件附加到扩展库中的 dynamicViewPanel?

HTML DOM 使用循环将分页的 XML 文件合并为单个文件

如何将分页应用于 json-server 中的子对象?

将分页的 jQuery DataTables 表的所有数据发送到服务器端,而不仅仅是当前页面