2020寒假生活学习日记
Posted jccjcc
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2020寒假生活学习日记相关的知识,希望对你有一定的参考价值。
使用 Spark Shell 编写代码
启动Spark Shell:
加载txt文件:
简单的RDD操作:
//获取RDD文件textFile的第一行内容
textFile.first()
//获取RDD文件textFile所有项的计数
textFile.count()
//抽取含有“Spark”的行,返回一个新的RDD
val lineWithSpark = textFile.filter(line => line.contains("Spark"))
//统计新的RDD的行数
lineWithSpark.count()
以上是关于2020寒假生活学习日记的主要内容,如果未能解决你的问题,请参考以下文章