spark RDD(弹性分布式数据集)可以更新吗?

Posted

技术标签:

【中文标题】spark RDD(弹性分布式数据集)可以更新吗?【英文标题】:spark RDD (Resilient Distributed Dataset) can be updated? 【发布时间】:2013-08-01 12:51:35 【问题描述】:

RDD可以更新吗? --- 即假设我们从“a.txt”文件创建了一个 RDD。 “a.txt”已更新。是否可以在不读取整个文件 a.txt 的情况下更新 RDD?

【问题讨论】:

【参考方案1】:

RDD 根据定义是不可变的,因此您希望能够在“a.txt”文件更改时更改 RDD。

【讨论】:

以上是关于spark RDD(弹性分布式数据集)可以更新吗?的主要内容,如果未能解决你的问题,请参考以下文章

Spark弹性分布式数据集RDD概述

Spark弹性分布式数据集RDD

Spark 核心数据结构:弹性分布式数据集 RDD

spark系列-2Spark 核心数据结构:弹性分布式数据集 RDD

Spark复习-RDD

Spark弹性分布式数据集(Resilient Distributed Dataset)