使用管道将分页添加到 dataflowjob 中的 Bigquery 查询
Posted
技术标签:
【中文标题】使用管道将分页添加到 dataflowjob 中的 Bigquery 查询【英文标题】:Adding Pagination to Bigquery query in dataflowjob using pipeline 【发布时间】:2016-08-22 20:00:39 【问题描述】:我正在使用以下代码在数据流中执行 Bigquery 查询
p.apply(BigQueryIO.Read.fromQuery(getQuery()))
其中“p”是一个管道对象。
当我执行返回大量行的查询时,我的数据流作业出现错误“查询执行期间超出资源。”
有没有一种方法可以将分页添加到我的查询中?
提前致谢。
【问题讨论】:
【参考方案1】:我更改了查询以删除 order by 子句,最后它对我有用
【讨论】:
以上是关于使用管道将分页添加到 dataflowjob 中的 Bigquery 查询的主要内容,如果未能解决你的问题,请参考以下文章
将分页添加到第 3 方模块 (OT-MiniNewsModule)
有没有办法将分页器控件附加到扩展库中的 dynamicViewPanel?