a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 應用 > 軟件技巧 > 正文

hadoop入門之統計單詞在文件中出現的個數示例

2024-07-16 17:45:47
字體:
來源:轉載
供稿:網友

Linux環境:CentOs6.4  

Hadoop版本:hadoop-0.20.2

內容:統計hadoop/bin下的所有文件中單詞出現的個數。

所用到的命令有:


復制代碼代碼如下:
//創建input文件夾
./hadoop fs -mkdir input
//將所有的需要統計單詞個數的文件放在input文件夾下
./hadoop fs -put *.sh /input/
//運行wordcount將結果輸出到output文件夾下
./hadoop jar hadoop-examples-0.20.2.jar wordcount /input /output
//驗證某個單詞的個數
grep xxx *.sh
grep xxx *.sh|wc

第一步:確定HDFS、MapReduce、jobTracker等是否正常啟動。查看http://www.5lwq4hdr.cn/softjc/137245.html

第二步:在Hadoop文件系統根目錄中創建input文件夾。

執行命令:

打開網頁查看input文件夾是否創建成功:

上圖表明已經成功。

第三步:將bin目錄下的所有文件放到hadoop文件系統的input目錄下。

執行命令:

通過瀏覽器查看input文件夾下是否已經存在所存放的文件。

 

第四步:執行wordcount命令統計單詞個數。

  回到Hadoop文件夾下,找到統計個數的jar包。如圖,在hadoop-0.20.2目錄下有一個hadoop-0.20.2-examples.jar。

 

運行命令執行此jar,統計個數。并將輸出結果放在output目錄下。命令如下:

運行成功。

第五步:驗證結果是否正確。通過命令統計某一單詞的個數,與MapReduce統計的個數進行對比。

通過命令查看文件中language單詞的個數為12個,如圖。

 

查看MapReduce運行結果,如圖:

運行結果相同。

 

附:從過頁面查看運行狀態

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 精品成人佐山爱一区二区 | 国产日韩欧美在线 | 日韩欧美一二三区 | 欧美在线综合视频 | 国产精品视频久久久久久 | 欧美日韩免费一区二区三区 | 2019天天干夜夜操 | 欧美一级在线视频 | 国产精品视频一区二区三区 | 日韩精品一级 | 亚洲一区在线日韩在线深爱 | 午夜黄色影院 | 色噜噜精品 | 久久最新| 亚洲国产精品久久久男人的天堂 | 色综合天天天天做夜夜夜夜做 | 久久99精品久久久久久琪琪 | 亚洲 欧美 激情 另类 校园 | 国产精品一区久久久久 | 久久久久久久99精品免费观看 | 一级毛片在线播放 | 国产精品久久一区二区三区 | 久在线 | 国产美女高潮一区二区三区 | 伊人夜夜躁av伊人久久 | 日韩欧美在线免费观看 | 日本毛片视频 | 国产成人在线一区二区 | 国产真实精品久久二三区 | 玖玖在线 | www.久久| 无套内谢孕妇毛片免费看红桃影视 | 二区在线视频 | 黄色三级网| 波多野结衣 一区二区 | 亚洲欧美另类久久久精品2019 | 欧美激情在线观看 | 蜜桃视频成人m3u8 | 日韩欧美国产精品 | 欧美成人区 | 国产精品毛片一区二区三区 |