最近学习了spark 相关的内容，写个笔记记录一下自己目前对于spark的理解，方便以后查阅。在本文的写作过程中，主要参考了1.宽依赖与窄依赖的区别;2.spark中几个概念...
发简信
IP属地：四川
-
spark 和 pyspark的理解 -
Spark宽依赖与窄依赖
Spark中RDD的高效与DAG（有向无环图）有很大的关系，在DAG调度中需要对计算的过程划分Stage，划分的依据就是RDD之间的依赖关系。RDD之间的依赖关系分为两种，宽...
-
-
苟全性命于乱世，不求闻达于诸侯<br>
-
一剪闲云一溪月，一程山水一年华。一世浮生一刹那，一树菩提一烟霞。品静好人生，盼现世安稳。
-
-
一个欲望饱满的大学生
-
