首页 > 其他 > 详细

Hadoop之 hdfs 系统

时间:2015-08-02 21:22:48      阅读:268      评论:0      收藏:0      [点我收藏+]

一、NameNode维护着2张表:

1.文件系统的目录结构,以及元数据信息

2.文件与数据块列表的对应关系

存放在fsimage中,在运行的时候加载到内存中的。

操作日志写到edits中

?

二、DataNode

使用block形式存储。在hadoop2中,默认的大小是128MB。

使用副本形式保存数据的安全,默认的数量是3个。

?

使用shell访问hdfs

bin/hdfs dfs –xxx

?

三、RPC(remote procedure call)

远程过程调用要有一个服务端(对外暴露方法供调用者使用),要有一个客户端(主动调用方法)。

Hadoop之 hdfs 系统

原文:http://www.cnblogs.com/chaoren399/p/4696631.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!