spark sql怎么去获取hive 表一定日期范围内的数据

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了spark sql怎么去获取hive 表一定日期范围内的数据相关的知识,希望对你有一定的参考价值。

我现在需要去hive表当中读取数据,读取数据时是以日期为条件获取一个时间段内的数据,在hive当中操作是可以获取的但是在spark SQL当中获取不到。hive表操作语句是OK的,hive语句如下:
SELECT id,merchant_no,sku_id,stock_no,change_count,stock_count_snapshoot,create_time,order_id,stock_type,start_time FROM stock_data WHERE merchant_no='a69683' and cast(start_time as date) between '2017-09-01' and '2017-09-10';

参考技术A select orderid,fenjian,timee
from
(
select orderid,fenjian,timee,row_number(orderid,fenjian) rn
from (
select orderid,fenjian,timee from tableName
distribute by orderid,fenjian sort by orderid,fenjian,timee asc
) t1
) t2
where t2.rn=1追问

您好,能够详述一下吗

以上是关于spark sql怎么去获取hive 表一定日期范围内的数据的主要内容,如果未能解决你的问题,请参考以下文章

Spark SQL 未返回 HDP 上 HIVE 事务表的记录

怎么通过clouder manager去查看 hive语句

hive sql的语法帮助在哪

源码级解读如何解决Spark-sql读取hive分区表执行效率低问题

Hive SQL 表中去重复

在 Spark SQL 中找不到 Hive 表 - Cloudera VM 中的 spark.sql.AnalysisException