Future模式是多线程开发中非常常见的一种设计模式。它的核心思想是异步调用。 对于多线程来说，线程A需要等待线程B的结果，它没必要一直等待B，可以先拿到一个未来的Futur...
IP属地：广东
-
spark源码阅读之shuffle模块②
在spark源码阅读之shuffle模块①中，介绍了spark版本shuffle的演化史，提到了主要的两个shuffle策略：HashBasedShuffle和SortedB...
-
Spark Tungsten-sort Based Shuffle 分析Tungsten-sort 算不得一个全新的shuffle 方案，它在特定场景下基于类似现有的Sort Based Shuffle处理流程，对内存/CPU/Cache使用做了...
-
Spark性能优化指南——高级篇原文：https://tech.meituan.com/spark-tuning-pro.html Spark性能优化指南——高级篇 前言 继基础篇讲解了每个Spark开发人...
-
HBase场景 | 都是HBase上的SQL引擎，Kylin和Phoenix有什么不同？
大数据时代，数据的价值越来越被重视，企业从海量大数据中挖掘所需要的信息，用来驱动业务决策以获得更大的商业价值。与此同时，出现了越来越多的大数据技术帮助企业进行大数据分析，例如...
-
19 Spark Streaming中空RDD的处理
在Spark Streaming中，job不断的产生，有时候会产生一些空RDD，而基于这些空RDD生成的job大多数情况下是没必要提交到集群执行的。执行没有结果的job，就是...
