a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁(yè) > 網(wǎng)管 > 服務(wù)器 > 正文

Hadoop datanode重新加載失敗無(wú)法啟動(dòng)解決

2020-05-27 13:33:34
字體:
來(lái)源:轉(zhuǎn)載
供稿:網(wǎng)友

   筆者使用的是基于虛擬機(jī)的Hadoop分布式安裝,由于關(guān)閉datanode和namenode的順序不恰當(dāng),所以經(jīng)常會(huì)出現(xiàn)datanode加載失敗的情況。

  本人的解決方法適用于首次已經(jīng)成功啟動(dòng)整個(gè)集群,但是由于不正常的操作造成第二次無(wú)法正常啟動(dòng)。首次的啟動(dòng)失敗可能原因有很多:可能是由于配置文件錯(cuò)誤寫(xiě)入造成的,或是由于ssh無(wú)密碼登陸配置錯(cuò)誤造成。

  而第二次的錯(cuò)誤原因與首次啟動(dòng)的有一些區(qū)別,排錯(cuò)重點(diǎn)應(yīng)該集中在程序在運(yùn)行中的一些動(dòng)態(tài)加載而生成的文件上,筆者要討論的是第二種情況:

  大多原因就是因?yàn)閔adoop的datanode的VERSION文件中的namespaceID與namenode中的VERSION文件中的namespaceID二者出現(xiàn)不一致的情況。而namespaceID的生成筆者推斷應(yīng)該是在執(zhí)行:hdfs namenode -format 這個(gè)命令的時(shí)候生成的。

  解決步驟如下:

  1,首先停掉namenode上相關(guān)的進(jìn)程:切換到hadoop的/sbin目錄下:

  sh stop-dfs.sh

  sh stop-yarn.sh

  2,切換到hadoop的相應(yīng)/current目錄下將current下的所有文件清除。

  3,將datanode與namenode的/current 下VERSION等相應(yīng)文件文件清除后,回到namenode上,執(zhí)行hsfs namenode -format命令,接著切換到namenode的hadoop的/sbin目錄下:

  執(zhí)行sh start-dfs.sh

  sh start-yarn.sh

  (舊版本的mapre 被新版本的yarn所替代,命令上多少有些不同)

  既可以看到相應(yīng)的節(jié)點(diǎn)成功加載。

  相應(yīng)的思想就是,當(dāng)出錯(cuò)時(shí),清除掉一切干擾思路的文件,然后整理思緒,重新開(kāi)始,這樣要遠(yuǎn)比在原地徘徊要好。

  (由于我們?cè)谂渲梦募兄该鞯奈募A只有 hdfs tmp log,所以其余的文件也好文件夾也好都是動(dòng)態(tài)執(zhí)行腳本生成創(chuàng)建的,刪除之后只要hadoop整個(gè)系統(tǒng)可以工作就會(huì)生成,即便錯(cuò)刪,VM的 snapshot 也會(huì)拯救這個(gè)世界。)

發(fā)表評(píng)論 共有條評(píng)論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 中文字幕在线免费观看 | 狠狠狠 | 国产成人精品久久二区二区 | 亚洲精品在线网址 | 中文字幕日韩在线 | 国产中文字幕免费在线观看 | 国产成人精品亚洲日本在线观看 | 久久亚洲欧美日韩精品专区 | av手机在线播放 | 精品一区二区三区日本 | 噜噜噜天天躁狠狠躁夜夜精品 | 黄色免费看片 | 91小视频| 国产成年人小视频 | 黄色在线观看网址 | 91偷拍精品一区二区三区 | 亚洲精品中文字幕 | 操久久 | 国产亚洲精品综合一区91555 | 精品欧美视频 | 欧美 日韩 国产 一区 | 亚洲一区在线日韩在线深爱 | 奇米影 | 午夜免费剧场 | 亚洲va一区二区 | 国产成人免费视频 | 日韩成人一级片 | 国产精品美女久久久久久久久久久 | 久久久高清视频 | 日韩视频免费 | 午夜影院免费版 | 国产精品日本一区二区不卡视频 | 日韩中文视频 | 污污视频网站 | 在线视频亚洲 | 亚洲一区二区三区四区五区午夜 | 青草视频在线播放 | 欧美精品一二三区 | 久久99精品久久久久久久青青日本 | 韩国精品一区二区 | 国产剧情一区二区 |