Hadoop--没入门就放弃 - 文集

51篇文章 · 66685字 · 2人关注

【HDFS】BlockSender发送数据源码详解
本文包含如下内容：1、BlockSend在发送数据之前读数据文件和meta文件生成的Packet的结构。2、BlockSender的核心方法：s...

付费 156 0 0
【HDFS】从BlockPoolSlice#createRbwFile到BlockReceiver()
BlockPoolSlice#createRbwFile的过程 FsDatasetImpl#createRbw的源码详解需要构造BlockRe...

付费 161 0 0

【HDFS】FsDatasetImpl系列文章
【HDFS】FsDatasetImpl#recoverClose方法[https://blog.csdn.net/yexiguafu/artic...

220 0 0
【HDFS】一个RPC的生命周期，从服务端接收到响应的各个阶段的统计指标
注：本文参考的hadoop版本是：3.3.2 RPC生命周期在ProcessingDetails.Timing枚举类里： TODO：画一幅图，...

178 0 0
【HDFS】一文搞懂WebHDFS
本文包含的主要内容如下：① WebHDFS的原理② ExternalCall以及WebHdfs请求如何与RPC共用CallQueue③ Exte...

付费 674 0 0
【HDFS】Hadoop RPC是如何知道请求头和数据长度的？
org.apache.hadoop.ipc.Server.Connection#readAndProcess: 下面这段代码读取出RPC Hea...

付费 467 0 0
【HDFS】EC decode过程源码阅读
通过本文可以获得如下知识： StripeReader#readStripe源码逻辑。 readDataForDecoding、readParit...

0.1 付费 427 0 1

【HDFS】EC写流程（整体流程一览）
一、写在前面 EC的写流程有一部分流程跟普通副本写流程是复用的。例如：DataStreamer线程的run方法。StripedDataStrea...

0.1 付费 821 0 1
【HDFS】自动踢除pipeline中的慢节点
写在前面：之前发过一篇文章，【HDFS】HDFS-16348：将慢节点标记为badnode进而从pipeline中踢除并进行pipeline恢复...

付费 348 0 0