蒋破荒

背景 公司最近在利用hive构建数仓，听同事们说在构建一个超宽的维度表时运行时长超6000s，这个时长肯定是不能接受的，不过倒是引起了我的兴趣，让同事把sql发过来看看。 现...

SunnyMore

RDD依赖关系与stage划分 Spark中RDD的高效与DAG图有着莫大的关系，在DAG调度中需要对计算过程划分stage，而划分依据就是RDD之间的依赖关系。 1. 窄...