Spark学习(一)

Spark学习(一)

Spark SQL:数据库

Spark Streaming:流计算框架

GraphX:图计算框架

Spark学习(一)

 使用语言开发:

Spark学习(一)

 Spark学习(一)

 Spark学习(一)

 Spark学习(一)

 Spark学习(一)

 SCALA语言学习(与Java完全兼容)

编程范式:

1,命令式语言:C,C++,Java...基于冯.诺依曼体系结构

2,函数式语言:充分利用多核CPU多线程并发能力 基于λ演算,并发性能非常好

 Spark学习(一)

 (并发度降低)

Spark学习(一)

 每个值都是一个对象

安装Scala:(版本对应)http://dblab.xmu.edu.cn/blog/929-2/

Spark学习(一)

 运行Scala程序:

进入scala,:load scala程序文件(当没有定义对象时)

Spark学习(一)

 Spark学习(一)

当定义对象时:

 Spark学习(一)

相关推荐