查询移植到 Impala

Posted 2023-03-22

【中文标题】查询移植到 Impala

【英文标题】：Query Porting to Impala

【发布时间】：2021-02-21 18:55:55

【问题描述】：

我正在尝试从 Query 中了解必须由 Impala 改编的小 sn-p。

Select
.
.

from $ENV_PREFIXprivate_datalap_storage_customer_v1 cus
lateral view explode(adresses) address as addr
where year = substr($REF_DATE, 1, 4)
and month = substr($REF_DATE, 5, 2)

有人可以帮忙了解from 和Where 发生了什么吗？

另外，如果有人能解释为什么我在 Impala 上运行查询时出现以下错误，我将不胜感激

ParseException line 35:20 cannot identify input near ',' ''1'' ',' in 功能说明

【参考方案1】：

substr() 以字符形式接收字符串、起始位置和长度以从起始位置提取。 substr('2021-02-20', 1, 4) 应该提取 2021。

很可能，变量没有解析，你得到substr(, 1, 4)而不是例如substr('2021-02-20', 1, 4)。在Impala中，variables是这种形式$var:var_name，检查你是如何传递它的，它是如何得到的使用select '$var:var_name'解决

另外我不知道你是如何在 Hive 中传递变量但字符串文字应该被引用，如果变量本身不包含引号，这个 substr($REF_DATE, 1, 4) 被解析为 substr(2021-02-20, 1, 4)，这是错误的，所以仔细检查你需要将$REF_DATE 放在引号中，否则它已经包含引号。