sparkspark sql

Posted 人生,唯有锻炼与读书不能辜负

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了sparkspark sql相关的知识,希望对你有一定的参考价值。

一、DataFrames

     类似于关系型数据库的一张表,如果没有列名就等于RDD,如果有列名,就类似DataFrames

     DataFrames可以从各种各样的构建,例如:结构化数据文件(JSON文件,xml文件),Hive中的表,外部数据库或现有RDD。

 

   2、RDD与DataFrames的对比

      

以上是关于sparkspark sql的主要内容,如果未能解决你的问题,请参考以下文章

Hive进阶-- Hive SQLSpark SQL和 Hive on Spark SQL

SparkSpark 及 Scala 语法简要介绍

SparkSpark Core 基本原理

SparkSpark Streaming

SparkSpark ShuffleSpark SQL 及 Spark MLlib

SparkSpark之Transformation和Action