a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 學院 > 操作系統 > 正文

hbase 一次大規模數據寫入清除測試

2024-06-28 16:04:06
字體:
來源:轉載
供稿:網友

 測試過程

10:58 開始打入數據,磁盤使用率44% 11:38 由于內存8G不夠,在打入數據的時候,導致falcon監控異常退出,對于本次測試效果不好,開始制作鏡像,并運行新的instance 13:07 開始測試,43.394% 18:11 設置TTL,未做大合并 18 12 hbase disk storage usage 從 2539 到1571 共有968MB數據 18 15 machine disk storage usage 從 12483 到 10924 共有 1559MB數據

 全部監控曲線

這里寫圖片描述

總結

跑CDH最好是16GB內存,cpu至少兩核心吧。hbase在存儲數據的時候,先是寫入到WAL,然后flush到磁盤里面,這個可以設置,我當前設置的64MBhbase數據由WALs目錄開始,64MBflush到磁盤,然后本身在某種機制下移動到oldWALs(保留時間很短,分分鐘就被系統清理掉了)。hbase的archive,目前沒有多少研究,基本上數據也會分分鐘消滅掉hbase設置ttl,即使沒有在手動major_compact的情況下,依舊會清理掉數據。下圖是我設置ttl的過程。

這里寫圖片描述

今天測試持續8個小時,花費大概10元

這里寫圖片描述

后記

哎呀,搞了三天了,總算有點果子吃了,哈哈。


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 一区二区久久久 | 久久aⅴ国产欧美74aaa | 在线中文字幕视频 | 久在线视频 | 精品一区二区在线播放 | 久久久久久免费 | 婷婷激情五月 | 亚洲国产成人久久一区二区三区 | 国产欧美精品一区二区色综合朱莉 | av在线播放一区二区 | 午夜影院免费 | 精品久久久久久久久久久久久久 | 日韩国产欧美在线观看 | 亚洲女人天堂成人av在线 | 欧美一区二区 | 国产精品久久一区 | 欧美乱妇高清无乱码 | 91亚洲国产精品 | 日本激情网 | 日本一区二区三区四区不卡视频 | 美女黄网站视频免费 | 久久精品一区二区三区不卡牛牛 | 秋霞影院午夜丰满少妇在线视频 | 色啪网| 亚洲精品一区久久久久久 | 免费毛片一区二区三区久久久 | 色综合免费 | 嫩草午夜少妇在线影视 | 欧美日韩一区二区中文字幕 | 日韩高清中文字幕 | 国产成人精品久久二区二区91 | 杏导航aⅴ福利网站 | 国产99久久精品 | 日韩视频在线免费观看 | 中文字幕国产一区 | 妞干网免费视频 | 久久男人天堂 | 伊人电影综合 | 欧美日韩视频在线 | 中文字幕日本视频 | 高清一区二区三区 |