Spark学习

Posted 2021-03-16 lq13035130506

 

 

Spark SQL：数据库

Spark Streaming：流计算框架

GraphX:图计算框架

 

 

 使用语言开发：

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 SCALA语言学习(与Java完全兼容)

编程范式：

1，命令式语言：C，C++，Java...基于冯.诺依曼体系结构

2，函数式语言：充分利用多核CPU多线程并发能力 基于λ演算，并发性能非常好

 

 

 (并发度降低)

 

 每个值都是一个对象

安装Scala：（版本对应）http://dblab.xmu.edu.cn/blog/929-2/

 

 运行Scala程序：

进入scala，:load scala程序文件（当没有定义对象时）

 

 

当定义对象时：