Spark大数据技术基础与应用（Scala+Python版）课件 第3章 Spark的RDD编程.pptx

Spark的RDD编程第3章

目录01.RDD基础概念与特性02.RDD的创建与操作03.RDD的持久化04RDD的编程实例05实验与练习06课程思政案例目

录

Spark的RDD编程RDD（弹性分布式数据集）是Spark中的基本数据处理模型，具有分布式数据集的容错性和并行操作的能力。RDD通过读取Hadoop文件系统中的一个文件进行创建，也可以由一个RDD经过转换得到。用户也可以将RDD缓存至内存，也可以持久化到外存。从而高效的处理RDD，提高计算效率。主要介绍了如何使用ApacheSpark中的RDD进行数据处理和编程，包括RDD的原理、RDD的基本操作、转换、行动操作、以及综合实例