a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 學院 > 編程設計 > 正文

hadoop入門之namenode工作特點介紹

2020-07-14 13:29:57
字體:
來源:轉載
供稿:網友

namenode始終在內存中保存metedata(整個文件系統的目錄結構,每個目錄有哪些文件,每個文件有哪些分塊及每個分塊保存在哪個DataNode上),用于處理“讀請求”(不需要修改內容)
到有“寫請求”到來時,namenode會首先對metedata修改的內容寫editlog到磁盤(每一次改變都會同步到磁盤。),成功返回后,才會修改內存,并且向客戶端返回。客戶端在寫數據到每個datanode中。namenode在將metadata寫到editlog的時候會同步到磁盤。

Hadoop會維護一個fsimage文件,也就是namenode中metedata的鏡像,但是fsimage不會隨時與namenode內存中的metedata保持一致(因為非常大),而是每隔一段時間通過合并editlog來更新內容。Secondary namenode就是用來更新fsimage的 

secondary namenode的工作流程

1.Secondary通知primary切換editlog(目的合并editlog)
2.Secondary從primary獲得fsimage和editlog(通過http)
3.Secondary將fsimage載入內存,然后開始合并editlog
4.Secondary將新的fsimage發回給primary
5.Primary用新的fsimage替換舊的fsimage

什么時候checkpiont?
fs.checkpoint.period 指定兩次checkpoint的最大時間間隔,默認3600秒。
fs.checkpoint.size 規定edits文件的最大值,一旦超過這個值則強制checkpoint,不管是否到達最大時間間隔。默認大小是64M。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 在线免费观看激情视频 | 最近韩国日本免费高清观看 | 国产欧美久久一区二区三区 | 在线欧美成人 | 在线欧美成人 | 激情久久久久 | 成年人在线观看 | 亚洲视频在线一区 | 欧美精品一区二区三区蜜桃视频 | 香蕉视频一级片 | 蜜桃免费视频 | 久久国产精品成人免费观看的软件 | 亚洲成人日韩 | 国产精品视频一区在线观看 | 色噜噜在线 | 羞羞视频免费在线观看 | 精品国产91久久 | 日韩精品影院 | 免费观看成人性生生活片 | 黄色毛片在线播放 | 黑人巨大精品欧美一区二区免费 | 日本亲与子乱xxx | 亚洲精品99久久久久中文字幕 | 日本电影黄色 | 国产小视频在线免费观看 | 91中文字幕在线观看 | 久久久天堂 | 亚洲不卡视频在线 | 亚欧洲精品视频在线观看 | 99成人| 国产精品一区二区三区四区 | 国产伦精品一区二区三区照片91 | 精品九九九| 成人午夜毛片 | 青青草免费在线 | 婷婷成人免费视频 | 日韩精品在线观看一区 | 一区二区三区在线播放 | 日韩a∨ | 日韩久久久久久久久久 | 成人免费视频网站在线观看 |