首页 > 其他 > 详细

HDFS读写分析

时间:2020-01-06 14:42:41      阅读:62      评论:0      收藏:0      [点我收藏+]

写流程:

技术分享图片

 

正常:

1.HDFS客户端调用分布式文件系统的create方法远程过程调用namenode的create方法

namenode内完成几项判断

返回客户端

2.调用FSDataOutputStream的write方法 同时该流告诉Namenode addblock

返回列表 然后开始写

3.chunk  package  data queue  

ack queue

4.检验

 

异常分析:网络中断

namenode 

1.关闭pipline

2.新的id,version

3.心跳机制 给命令

4.删除老的数据

5.构建新的pipline

HDFS读写分析

原文:https://www.cnblogs.com/terrycode/p/12155964.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!