Apache Spark Contributor<br>monkey boy_tech <br>专注于技术的dotaer
发简信
IP属地：北京
-
-
【k8s系列1】spark on k8s 与 spark on k8s operator的对比
对于目前基于k8s的的spark应用，主要采用两种方式运行 spark原生支持的 spark on k8s[http://spark.apache.org/docs/3.0....
-
All things are difficult before they are easy.
-
Spark宽依赖和窄依赖深度剖析RDD依赖关系与stage划分 Spark中RDD的高效与DAG图有着莫大的关系，在DAG调度中需要对计算过程划分stage，而划分依据就是RDD之间的依赖关系。 1. 窄...
-
一个永远在路上的架构师，具备前沿架构视野，了解大数据起步手法，擅长后端路段的平稳驾驶，熟悉代码的保养和维修
-
-
-
running spark on k8s
-
Spark--Spark Shuffle发展史及调优方法资料整理，图片来源自互联网，如有侵权请联系删除--李小李 1-Spark Shuffle发展史 1.1 Shuffle概述 在Spark的源码中，负责shuffle过程的执行...
-
hadoop shuffle 过程MapReduce简介 在Hadoop MapReduce中，框架会确保reduce收到的输入数据是根据key排序过的。数据从Mapper输出到Reducer接收，是一个很...
-
ImpalaImpala概述 Impala是什么 Impala是一款针对HDFS和HBASE中的PB级别数据进行交互式实时查询工具。最大的特点就是速度快 Impala优势 Impala的...
-
-
-
Presto是Facebook开源的大数据查询引擎，它最大的特点是可以对各种异构的数据源进行查询，这个专栏主要专注在Presto源代码的阅读、解析。欢迎投稿
-
-
对象存储系统之一 openstack swift 详解本文借鉴了swift官方资料，以及网络公开可查的技术文档或者图片，非绝对原创，向开源领域的贡献者和传播者致敬。 openstack swift 架构简单介绍 Swift简介 ...
-
对象存储系统之二 ceph详解本文借鉴了ceph官方资料，以及网络公开可查的技术文档或者图片，非绝对原创，向开源领域的贡献者和传播者致敬。 架构简单介绍 Ceph介绍 Ceph是一个分布式存储系统，提供对...
-
-
来自农村的我，好想在城里买套房文/怀左同学 01 大四的时候，我跟着老潘工作过一段时间，他当时在做生意，而我，帮他看管其中的一处。 他比我大八九岁，聊城人，之前在北京工作了几年，面带风尘，用他的话来讲：“...
-
我就是江湖，如何退出？微信：fydl282，网络写手，旅居大连，作品有官场类《正道》、悬疑类《龙脉觅踪》、仙侠类《太极》、同人类《倩女幽魂之幻界》、香艳类《叛道》、玄幻类《双鱼玉佩》、穿越类《青虫簪》。
