《大数据离线分析技术》课件——项目5:RDD核心概念与操作.pptxVIP

  • 1
  • 0
  • 约6.31千字
  • 约 93页
  • 2026-08-08 发布于福建
  • 举报

《大数据离线分析技术》课件——项目5:RDD核心概念与操作.pptx

;什么是RDD;什么是RDD;

RDD(ResilientDistributedDataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象。代码中是一个抽象类,它代表一个弹性的、不可变、可分区、里面的元素可并行计算的集合。;RDD中的弹性是指:

存储的弹性:内存与磁盘的自动切换。

容错的弹性:数据丢失可以自动恢复。

计算的弹性:计算出错重试机制。

分片的弹性:可根据需要重新分片。;RDD中的不可变是指创建一个RDD如果更改,并不是真正意义上的更改,只是又创建了一个新的RDD。

RDD中可分区是指能进行分区。

RDD中并行计

文档评论(0)

1亿VIP精品文档

相关文档