SparkSession
Posted 努力,奋斗
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了SparkSession相关的知识,希望对你有一定的参考价值。
在2.0版本之前,使用Spark必须先创建SparkConf和SparkContext
catalog:目录
Spark2.0中引入了SparkSession的概念,SparkConf、SparkContext 和 SQLContext 都已经被封装在 SparkSession 当中,并且可以通过 builder 的方式创建;可以通过 SparkSession 创建并操作 Dataset 和 DataFrame
SparkSession The entry point to programming Spark with the Dataset and DataFrame API.
scala> import org.apache.spark.sql.SparkSession
SparkSession SparkSessionExtensions
以上是关于SparkSession的主要内容,如果未能解决你的问题,请参考以下文章