- 11
- 0
- 约6.86万字
- 约 65页
- 2023-05-17 发布于河南
- 举报
尚硅谷大数据技术之SparkCore
—————————————————————————————
更多Java –大数据 –前端 –python人工智能资料下载,可百度访问:尚硅谷官网
尚硅谷大数据技术之SparkCore
(作者:尚硅谷研究院)
版本:V5.0
第1章 RDD概述
1.1 什么是RDD
RDD(Resilient Distributed Dataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象。
代码中是一个抽象类,它代表一个弹性的、不可变、可分区、里面的元素可并行计算的集合。
RDD类比工厂生产。
·1.2 RDD五大特性
第2章 RDD编程
2.1 RDD的创建
在Spark中创建RDD的创建方式可以分为三种:从集合中创建RDD、从外部存储创建RDD、从其他RDD创建。
2.1.1 IDEA环境准备
1)创建一个maven工程,工程名称叫SparkCore
2)创建包名:com.atguigu.createrdd
3)在pom文件中添加spark-core的依赖
dependencies
dependency
groupIdorg.apache.spark/groupId
artifactIdspark-core_2.12/artifactId
您可能关注的文档
最近下载
- 05SG522 钢与混凝土组合楼(屋)盖结构构造.pdf VIP
- 2026年上半年经营计划分析报告.pptx VIP
- 电力公司反违章工作规定(标准版).pdf VIP
- 《微通道铝扁管或平行流铝扁管》.pdf VIP
- GB国家标准规范-消防(2026年4月止).xlsx VIP
- 2025-大唐光伏发电工程标杆造价指标.docx VIP
- 第二章 铁路接触网.doc VIP
- 中国华能集团光伏项目造价指标-第六版-2025年4月.pdf VIP
- (2026版)晋中教师职称试题及答案.docx VIP
- 家庭农场与农民专业合作社管理实务(第二版)课件 2.2家庭农场的登记流程(以山东省济宁市为例).pptx
原创力文档

文档评论(0)