046 SparlSQL中的函数

Posted 2020-12-26 曹军

一：SparkSQL中的函数

1.说明

　　

 

2.展示所有的函数

　　qlContext.sql("show functions").show(300)

　　

 

3.functions类

　　所有内置支持的函数。

　　主要用于DSL语言。

　　

 

二：窗口分析函数

1.说明

　　hive中常用的一种分析函数。

 

2.在Spark中使用beeline

　　sbin/start-thriftserver.sh

　　

 

3.求每个部门的平均sal值

　　select deptno,avg(sal) from emp group by deptno;

4.求每个部门的平均sal值，并且返回值是部门id、人员id、人员名称、人员sal值、平均sal值
　　select empno,ename,sal,deptno, avg(sal) OVER (PARTITION BY deptno) from emp