produce客户端 produce服务端 consumer客户端 consumer服务端
发简信
IP属地：上海
-
-
hdfs写之namenode端addBlock实现<五>
一、流程图 二、NameNodeRpcServer的addBlock实现 1、客户端会通过addBlock方法通过rpc调用namenode方法 addBlock 调用get...
-
hdfs写之DataXceiver线程<四>
一、流程图 二、DataXceiver接收请求处理数据 1、DataXceiver线程的run方法 DataXceiver继承了Receiver类，调用readOp方法读取客...
-
hdfs写之DataStreamer守护线程<三>一、流程图 client和namenode之前的rpc协议都是ClientProtocol。 locateFollowingBlock主要是通过rpc向namenode分配新...
-
hdfs写之写数据<二>一、写数据流程图 该流程主要是客户端开始写数据，然后把数据切分多个chunk，多个chunk组成一个packet，发送到queue中，等待datanode写数据。 二、客户端...
-
原创-大数据平台权限设计分享-HDFS目录权限权限目标 可通过界面，添加修改分配用户对HDFS目录拥有的权限，HDFS目录权限分为read,write,excute三种权限类型。 用户权限列表管理image.png 添加...
-
hdfs写之打开文件流<一>一、客户端创建写文件的流程图 namenode主要创建客户端RPC请求的准写的文件，namenode会把文件名保存到namespace中，然后返回给客户端HdfsFileSt...
-
hdfs读之总结<四>一、hdfs读取流程图 假设block副本个数3个 客户端发起请求到namenode节点，要求namenode告诉客户端读取的block位置在哪些datanode上，第一次读...
-
hdfs读之socket通讯解析<三>
一、通讯流程图 二、Sender客户端解析 1、RemoteBlockReader2.newBlockReader()解析 根据block信息向datanode发送请求读取b...
-
hdfs读之read读取解析<二>一、读取block数据方法流转 传输数据是通过scoket建立的，Sender和Receiver，这两个方法都继承了父类DataTransferProtocol。 二、读取方...
-
-
hdfs读之block读取解析<一>一、hdfs读取流程 先获取文件流FSDataInputStream fsIn = FileSystem.open("path") 然后读取文件内容fsIn.read(buf...
-
欢迎来到@产品专题，本专题汇集了30多万的小伙伴，每天有100篇优质文章的投稿，更有优质的产品社群。 @产品专题主要收录的是：产品、设计、技术、运营、体验、文档、工具、经验总结、项目总结等类型的优质文章。 专题投稿须知 1、所投稿的文章必须是原创作品，具有一定的可读性。 2、① App、软件推荐／评测类建议转投工具癖 ② 营销、文案类建议转投广告圈 ③ 职场成长类建议转投上班这点事儿 3、文章內不得有任何推广信息。包括但不限于公众号、微博、微信、豆瓣、QQ个人资料；不必要的外链；文章图片有微信水印、或者网站水印有推广嫌疑的。 4、本专题拒绝任何形式的全文转载内容。 专题投稿指南： https://www.jianshu.com/p/8bb3bcd951ce 专题主编：文俊粥 https://www.jianshu.com/u/0df55b412537 可添加主编微信：vk201205（文俊，备注：简书产品加群）
-
如果你是程序员，或者有一颗喜欢写程序的心，喜欢分享技术干货、项目经验、程序员日常囧事等等，欢迎投稿《程序员》专题。 专题主编：小彤花园 http://www.jianshu.com/users/4a4eb4feee62/ 【程序员】专题拒稿指北：http://www.jianshu.com/p/7c8b33b5f63b 投稿须知： 1.收录相关技术文章，但不限于技术，也可以是项目经验类的文章和程序员日常。 2.文章內不得有任何推广信息。包括但不限于公众号、微博、微信，更不得在通过投稿后再修改文章加入推广信息。你可以将这些推广以及个人信息放在个人主页介绍里。 3.字数极少，段落混乱，大段代码没有放到代码框的文章不收录 4.不相关的内容不收录，请确认文章内容和本专题相关 目前针对优质作者及爱好者，开设了官方程序员微信群，希望加入请发简信给主编小彤花园索取个人微信，主编会将你加入到【程序员】微信群，分享内容，收获知识。添加微信时备注昵称。
