发简信
IP属地：上海
-
Hadoop 源码学习笔记(8)--Yarn 简介
Hadoop 1.x 时使用 JobTracker 对 MapReduce 任务进行任务调度，但这样导致一个结果，部署了 JobTracker ...
-
Hadoop 源码学习笔记(7)--Yarn 与 Hdfs 的源码系统设计差异看过了 Hdfs 和 Yarn 的源码，发现两者的系统设计完全不同，根本不像是同一个 Project 的 Module，觉得很有必要对这两个 M...
-
Hadoop 源码学习笔记(6)--Hdfs 的备份，高可用和横向扩展源码走读到这个阶段，其实整个 Hdfs 的交互流程都已经完全走读完了，虽然肯定有一些细节的地方没有进行走读，但是不会影响对整个 Hdfs 的架构...
-
Hadoop 源码学习笔记(5)--Hdfs 之 BlockManager 解析之前的章节说过 FSDirectory 中记录了所有的文件节点信息，而具体的文件内容则被分布式的存储在各个 DataNode 上。尽管通过 FS...
-
Hadoop 源码学习笔记(4)--Hdfs 数据读写流程分析Hdfs 的数据模型 在对读写流程进行分析之前，我们需要先对 Hdfs 的数据模型有一个简单的认知。 如上图所示，在 NameNode 中有一个...
-
Hadoop 源码学习笔记(3)--Hdfs的RPC通信框架前言 单个 Hdfs 集群中可能存在成百上千个 DataNode ，但默认情况下 NameNode 只有一个 , 各个节点不断的进行内部通信，如...
-
Hadoop源码学习笔记(2)--Hdfs的启动流程分析Hdfs 的基础架构 如上图所示。 默认情况下，Hdfs 由一个 Namenode 和多个 DataNode 组成。 hdfs作为一个分布式文件...
-
Hadoop 源码学习笔记(1)--前言和目录前言 说到分布式软件，就一定绕不过Hadoop。 Hadoop 是 Google 著名的 MapReduce 和 GFS 论文的开源实现，它为我...
-
ZooKeeper源码学习笔记(4)--集群选主算法FastLeaderElection ZooKeeper 中一共有三个实现了Election接口的选举类，分别是 LeaderElection ...