• “两学一做”在山西——黄河新闻网 2019-07-13
  • 内地生报读香港高校本科人数持续下跌 2019-07-13
  • 【学习时刻】人民大学王义桅:金砖合作的“自信”与“自觉” 2019-07-12
  • 女子请“私家侦探”被骗3万 警方循线捣毁诈骗团伙 2019-07-11
  • 【学习时刻】北交大马院院长韩振峰:高校思想政治工作必须牢牢把握三大根本问题 2019-07-11
  • 全国“非遗”保护工作先进名单公布 2019-07-01
  • 紫光阁中共中央国家机关工作委员会 2019-06-25
  • 杭州控烟令修改草案拟允许室内设吸烟区,控烟专家:跌破眼镜 2019-06-25
  • 挪用近30万报纸征订款赌博 河南一报社聘用制干部获刑 2019-06-23
  • 2016年,有1145家上市公司大小非减持了3600亿元,还有210名上市公司高管减持了1400亿元。IPO已成了造就成千上万个十亿、百亿富豪的捷径, 2019-06-21
  • 专家“把脉”中国电影市场:提升品质方能逆袭 2019-06-21
  • “善款资助副局长儿子留学”真相须尽快落地 2019-06-19
  • 21岁女护士失联2天后确认遇害 嫌疑人为其前男友 2019-06-19
  • 中国地质公园名录旅行地中国国家地理网 2019-06-13
  • 玄关运用有四大原则 用的好才能财旺挡煞聚财 ——凤凰网房产 2019-06-10
  • HDFS--大数据应用的基石

    广东十一选5一定牛 www.aavbg.com  ,,。201852.5*10^18,90%。5G,。,。,,。

        ,,。、,。,,,、、、。。

     

        HDFS,,,,访。

        HDFS,、。HDFSGBTB,。访,HDFS。

     

        HDFSJava,,使master/slave,HDFSNameNodeDataNodes。NameNode,(namespace)访。DataNode,。HDFS,。HDFS,DataNode。DataNode,NameNode、。

     

     

    NameNode

    1. 

        ,、、。NameNode。

    2. 

        ,HDFS,。NameNode,DataNode(Blockreport),DataNode。

    3. 

        HDFS,,HDFS。HDFS(rack-aware)、。

        ,HDFS3,DataNodeid,,。,,。

    4. 

        NameNode,DataNode,,。(),NameNode退。

    5. (MetaData)

        。NameNode,HDFS;。

        a. ,、、、、、。

        b. ,、、Data Node 。

        c. HDFSData Node,Data Node。

        NameNode使EditLog,使FsImage(、)。NameNodeEditlogFsImage,EditlogFsImage,FsImage,Editlog,(checkpoint)。(BlockMap),4G。

        DataNode,,NameNode。

    6. 

        HDFSTCP/IP,TCPNameNode,ClientProtocolNameNode,DataNode使DataNodeProtocolNameNode。ClientProtocolDataNodeProtocol(RPC:Remote Procedure Protocol),NameNodeRPC,DataNodeRPC。

    7. 

        ,NameNode,DataNode(network partitions)。NameNodeZooKeeper,,NameNodeNameNode。DataNode,,NameNode,DataNode,。

    8. 

        DataNode,DataNode。

    9. 

        HDFS,DataNode,。

     

    SecondaryNameNode(SNN)

        SNNNameNode,,NameNode。NameNodeEditlogFsImage,,NameNode,NameNode使, 。

        SNN,CPUNameNode,线。SNNNameNode,NameNode,。

        SNN

    1. fs.checkpoint.period,3600s;

    2. fs.checkpoint.size,64MB。

     

        HDFS,?RPC--HDFS。

    posted @ 2019-04-20 10:11 北辰Root 阅读(...) 评论(...) 编辑 收藏
  • “两学一做”在山西——黄河新闻网 2019-07-13
  • 内地生报读香港高校本科人数持续下跌 2019-07-13
  • 【学习时刻】人民大学王义桅:金砖合作的“自信”与“自觉” 2019-07-12
  • 女子请“私家侦探”被骗3万 警方循线捣毁诈骗团伙 2019-07-11
  • 【学习时刻】北交大马院院长韩振峰:高校思想政治工作必须牢牢把握三大根本问题 2019-07-11
  • 全国“非遗”保护工作先进名单公布 2019-07-01
  • 紫光阁中共中央国家机关工作委员会 2019-06-25
  • 杭州控烟令修改草案拟允许室内设吸烟区,控烟专家:跌破眼镜 2019-06-25
  • 挪用近30万报纸征订款赌博 河南一报社聘用制干部获刑 2019-06-23
  • 2016年,有1145家上市公司大小非减持了3600亿元,还有210名上市公司高管减持了1400亿元。IPO已成了造就成千上万个十亿、百亿富豪的捷径, 2019-06-21
  • 专家“把脉”中国电影市场:提升品质方能逆袭 2019-06-21
  • “善款资助副局长儿子留学”真相须尽快落地 2019-06-19
  • 21岁女护士失联2天后确认遇害 嫌疑人为其前男友 2019-06-19
  • 中国地质公园名录旅行地中国国家地理网 2019-06-13
  • 玄关运用有四大原则 用的好才能财旺挡煞聚财 ——凤凰网房产 2019-06-10
  • 彩票6加1怎么玩 海南飞鱼开奖历史记录 河南快赢481投注技巧 天津十一选五开奖查询 北京单场比分直播视频 新快3基本走势一定牛 青海快三走势图今天 上海时时彩平台哪个好 五子棋开局6步必胜下法 新疆福彩中奖数目 北京快三奖号 合买方案怎么写 中国福利彩票18选7玩法 2019019期双色球红球绝杀号 两码中特