无法从datalab查询表

Posted

技术标签:

【中文标题】无法从datalab查询表【英文标题】:Cannot query table from datalab 【发布时间】:2019-03-04 18:31:23 【问题描述】:

我有一个数据集,其中包含在 Big Query 中设置的表,我可以使用 BQ UI 进行很好的查询,但是在尝试从 datalab 运行标准查询时出现错误。

我可以得到运行时返回的表模式

%%bq tables describe --name "my-project.my_dataset.my_table"

我还可以访问元数据

table1=bq.Table("my-project.my_dataset.my_table")
table1.metadata.rows

Result: 637043

但是当我运行时

%%bq query --name testQuery 
SELECT * FROM `my-project.my_dataset.my_table`

我收到错误提示

RequestException: HTTP request failed: Not found: Job my-project:job__SSPF9nCudKqIFZT8N4yvp_SUDb5

我尝试使用各种不同的方式发送相同的查询以及采样,但没有任何乐趣。

有没有人遇到过类似的问题?

【问题讨论】:

【参考方案1】:

遇到了同样的问题,在这里找到了解决方案:

https://cloud.google.com/bigquery/docs/visualize-jupyter

尝试安装这个库:

pip install google-cloud-bigquery[pandas]

调用魔法笔记本命令:

%load_ext google.cloud.bigquery

然后以这种方式运行查询:

%%bigquery
SELECT
    source_year AS year,
    COUNT(is_male) AS birth_count
FROM `bigquery-public-data.samples.natality`
GROUP BY year
ORDER BY year DESC
LIMIT 15

【讨论】:

以上是关于无法从datalab查询表的主要内容,如果未能解决你的问题,请参考以下文章

无法从 DataLab 连接到 Bigquery API

使用 Google Datalab,如何在 Google BigQuery 中使用 UDF 从复杂查询创建表?

我无法在 datalab 中查阅 bigquery 表?

如何在 Datalab 的 api 中使用 Bigquery 中的子查询?

如何通过 Datalab 查询 BigQuery 视图?

Google Cloud Datalab 中的 BigQuery - 获取查询文本?