日前，ApacheHive2.1极速登场！携着内存计算，其性能提高了约26倍。Hive计算性能得到如此大的提升，是得益于什么呢？Hive能够影响目前SQL On Hadoop...
发简信
IP属地：北京
-
解密：Apache Hive 2.1性能提升26倍！
-
十分钟理解Java中的弱引用
本篇文章尝试从What、Why、How这三个角度来探索Java中的弱引用，帮助大家理解Java中弱引用的定义、基本使用场景和使用方法。由于个人水平有限，叙述中难免存在不准确或...
-
Spark map-side-join 关联优化
将多份数据进行关联是数据处理过程中非常普遍的用法，不过在分布式计算系统中，这个问题往往会变的非常麻烦，因为框架提供的 join 操作一般会将所有数据根据 key 发送到所有的...
-
利用 Spark DataSource API 实现Rest数据源
Spark DataSource API 的提出使得各个数据源按规范实现适配，那么就可以高效的利用Spark 的计算能力。典型如Parquet,CarbonData,Post...
-
如何基于Yarn开发你的分布式程序
前一段时间自己开发了一套基于Yarn的容器调度系统，这篇文章就是分享其中的一些经验。 前言 这篇文章不会具体教你如何使用Yarn的API,但是会教你我实践过后的一些经验。接下...
