一品网
  • 首页

RDD的血缘关系


窄依赖:窄依赖表示每一个父(上游)RDD 的 Partition 最多被子(下游)RDD 的一个 Partition 使用

宽依赖:宽依赖表示同一个父(上游)RDD 的 Partition 被多个子(下游)RDD 的 Partition 依赖,会引起 Shuffle

spark

相关


spark 数据流输出

Spark 安装部署与快速上手

Spark面试题(八)——Spark的Shuffle配置调优

spark参数调优

spark jvm参数优化(fullgc)

hadoop系列整理---PySpark

【Spark】Day02:Spark-Core:RDD、编程、数据读取保存、累加器、广播变量、top10

Flume+Kafka+SparkStreaming打造实时流处理框架

Spark SQL知识点与实战

【Spark学习笔记】广播变量和累加器

【Spark学习笔记】01-Spark简介

spark中agg函数的使用

标签

一品网 冀ICP备14022925号-6