实战IT培训机构_黄色激情网站_IT培训班选大学生IT技术培训中心_黄色激情视频网站_中公优就业

400-650-7353
您所在的位置:首頁 > IT干貨資料 > 大數(shù)據(jù) > 【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介

【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介

  • 發(fā)布: 大數(shù)據(jù)培訓(xùn)
  • 來源:大數(shù)據(jù)干貨資料
  • 2021-03-18 19:46:59
  • 閱讀()
  • 分享
  • 手機(jī)端入口

1.Client

用戶通過Client(客戶端)訪問HBase。同時,為了提高對HBase的訪問速度和效率,客戶端還維護(hù)了一份緩存。

2.Zookeeper

Zookeeper主要起的作用是協(xié)同服務(wù),這具體包括以下幾個方面:

(1)HBase通過Zookeeper實(shí)現(xiàn)HMaster的高可用。同一時刻,Zoopkeeper保證集群中只有一個HMaster;如果HMaster出現(xiàn)異常,Zoopkeeper會通過選舉產(chǎn)生新的HMaster。

(2)Zoopkeeper監(jiān)控RegionServer的狀態(tài),如果RegionServer有異常或有新節(jié)點(diǎn)加入,Zookeeper會以回調(diào)方式通知HMaster。

(3)Zoopkeeper存儲HBase元數(shù)據(jù)的統(tǒng)一入口地址。HBase真正的元數(shù)據(jù)存放在自己的meta表中,meta表的位置信息存儲在Zookeeper中。

3.HMaster

HMaster是HBase集群的主節(jié)點(diǎn),它的職責(zé)主要包括: RegionServer狀態(tài)的監(jiān)控、RegionServer的故障轉(zhuǎn)移、元數(shù)據(jù)信息的更新、Region的分配、Region的故障轉(zhuǎn)移和集群的負(fù)載均衡等。

4. HRegionServer

HRegionServer是HBase集群的從節(jié)點(diǎn),負(fù)責(zé)用戶的讀寫請求。它的職責(zé)主要包括:管理主節(jié)點(diǎn)分配給它的Region、處理讀寫請求、與底層HDFS的交互、拆分變大的Region

以及StoreFile的合并。

5.Region

Region是HBase表的分片。HBase根據(jù)RowKey的不同的把表切分成不同的Region。一個Region由一個RegionServer管理,同一個RegionServer中可以管理多個不同的Region。

6.Store

HBase表中的一個列族對應(yīng)一個Store。Store中包含MemStore和StoreFile。

7.MemStore

MemStore就是內(nèi)存存儲,用于緩存保存剛寫入HBase的數(shù)據(jù)或從HBase中讀取的數(shù)據(jù)。MemStore很小,一般幾兆到幾十兆。

8. StoreFile

HBase寫入數(shù)據(jù)時,當(dāng)MemStore存儲滿后,會溢寫磁盤到StoreFile中。

9.HFile

HFile是實(shí)際的存儲文件。StoreFile是以HFile的形式存儲在HDFS的。

10. HDFS

HDFS提供真正的底層數(shù)據(jù)存儲服務(wù),具體功能如下:

l 提供表數(shù)據(jù)和元數(shù)據(jù)的底層分布式存儲服務(wù)

l 數(shù)據(jù)多副本,保證的HBase的高可靠和高可用

11.Write-Ahead logs

HBase讀寫數(shù)據(jù)時,數(shù)據(jù)會先在內(nèi)存中保留一段時間,然后再寫進(jìn)磁盤。節(jié)點(diǎn)故障等因素有可能導(dǎo)致內(nèi)存中的數(shù)據(jù)丟失。為了解決這個問題,HBase會先將數(shù)據(jù)寫在Write-Ahead logfile日志文件中,然后再寫入內(nèi)存。這樣,在系統(tǒng)出現(xiàn)故障時,數(shù)據(jù)就可以通過這個日志文件進(jìn)行重建

文章“【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介”已幫助

>>本文地址:http://www.jecan.cn/zhuanye/2021/67988.html

THE END  

聲明:本站稿件版權(quán)均屬中公教育優(yōu)就業(yè)所有,未經(jīng)許可不得擅自轉(zhuǎn)載。

1 您的年齡

2 您的學(xué)歷

3 您更想做哪個方向的工作?

獲取測試結(jié)果
  • 大前端大前端
  • 大數(shù)據(jù)大數(shù)據(jù)
  • 互聯(lián)網(wǎng)營銷互聯(lián)網(wǎng)營銷
  • JavaJava
  • Linux云計(jì)算Linux
  • Python+人工智能Python
  • 嵌入式物聯(lián)網(wǎng)嵌入式
  • 全域電商運(yùn)營全域電商運(yùn)營
  • 軟件測試軟件測試
  • 室內(nèi)設(shè)計(jì)室內(nèi)設(shè)計(jì)
  • 平面設(shè)計(jì)平面設(shè)計(jì)
  • 電商設(shè)計(jì)電商設(shè)計(jì)
  • 網(wǎng)頁設(shè)計(jì)網(wǎng)頁設(shè)計(jì)
  • 全鏈路UI/UE設(shè)計(jì)UI設(shè)計(jì)
  • VR/AR游戲開發(fā)VR/AR
  • 網(wǎng)絡(luò)安全網(wǎng)絡(luò)安全
  • 新媒體與短視頻運(yùn)營新媒體
  • 直播帶貨直播帶貨
  • 智能機(jī)器人軟件開發(fā)智能機(jī)器人
 

快速通道fast track

近期開班時間TIME

主站蜘蛛池模板: 拖鞋定制厂家-品牌拖鞋代加工厂-振扬实业中国高端拖鞋大型制造商 | 苏州西朗门业-欧盟CE|莱茵UL双认证的快速卷帘门品牌厂家 | 论文查重_免费论文查重_知网学术不端论文查重检测系统入口_论文查重软件 | 济南办公室装修-厂房装修-商铺装修-工装公司-山东鲁工装饰设计 | CTAB,表面活性剂1631溴型(十六烷基三甲基溴化铵)-上海升纬化工原料有限公司 | 游泳池设备安装工程_恒温泳池设备_儿童游泳池设备厂家_游泳池水处理设备-东莞市君达泳池设备有限公司 | 冷却塔减速机器_冷却塔皮带箱维修厂家_凉水塔风机电机更换-广东康明冷却塔厂家 | 物联网卡_物联网卡购买平台_移动物联网卡办理_移动联通电信流量卡通信模组采购平台? | 多功能真空滤油机_润滑油全自动滤油机_高效真空滤油机价格-重庆润华通驰 | 新型游乐设备,360大摆锤游乐设备「诚信厂家」-山东方鑫游乐设备 新能源汽车电池软连接,铜铝复合膜柔性连接,电力母排-容发智能科技(无锡)有限公司 | PU树脂_水性聚氨酯树脂_聚氨酯固化剂_聚氨酯树脂厂家_宝景化工 | 清洁设备_洗地机/扫地机厂家_全自动洗地机_橙犀清洁设备官网 | 耐高温硅酸铝板-硅酸铝棉保温施工|亿欧建设工程 | 美国HASKEL增压泵-伊莱科elettrotec流量开关-上海方未机械设备有限公司 | 除尘布袋_液体过滤袋_针刺毡滤料-杭州辉龙过滤技术有限公司 | 沙盘模型公司_沙盘模型制作公司_建筑模型公司_工业机械模型制作厂家 | 冷却塔减速机器_冷却塔皮带箱维修厂家_凉水塔风机电机更换-广东康明冷却塔厂家 | 河北中仪伟创试验仪器有限公司是专业生产沥青,土工,水泥,混凝土等试验仪器的厂家,咨询电话:13373070969 | 不锈钢水管-不锈钢燃气管-卫生级不锈钢管件-不锈钢食品级水管-广东双兴新材料集团有限公司 | 冷凝水循环试验箱-冷凝水试验箱-可编程高低温试验箱厂家-上海巨为(www.juweigroup.com) | 成都竞价托管_抖音代运营_网站建设_成都SEM外包-成都智网创联网络科技有限公司 | 合肥角钢_合肥槽钢_安徽镀锌管厂家-昆瑟商贸有限公司 | 闪蒸干燥机-喷雾干燥机-带式干燥机-桨叶干燥机-[常州佳一干燥设备] | 脱硫搅拌器厂家-淄博友胜不锈钢搅拌器厂家 | R507制冷剂,R22/R152a制冷剂厂家-浙江瀚凯制冷科技有限公司 | 法兰螺母 - 不锈钢螺母制造厂家 - 万千紧固件--螺母街 | 宁夏档案密集柜,智能密集柜,电动手摇密集柜-盛隆柜业宁夏档案密集柜厂家 | 帽子厂家_帽子工厂_帽子定做_义乌帽厂_帽厂_制帽厂 | 食品机械专用传感器-落料放大器-低价接近开关-菲德自控技术(天津)有限公司 | 酵素生产厂家_酵素OEM_酵素加盟_酵素ODM_酵素原料厂家_厦门益力康 | 恒温恒湿箱(药品/保健品/食品/半导体/细菌)-兰贝石(北京)科技有限公司 | 实验室装修_实验室设计_实验室规划设计- 上海广建净化工程公司 | 断桥铝破碎机_铝合金破碎机_废铁金属破碎机-河南鑫世昌机械制造有限公司 | 橡胶弹簧|复合弹簧|橡胶球|振动筛配件-新乡市永鑫橡胶厂 | 石英陶瓷,石英坩埚,二氧化硅陶瓷-淄博百特高新材料有限公司 | 北京自然绿环境科技发展有限公司专业生产【洗车机_加油站洗车机-全自动洗车机】 | 幂简集成 - 品种超全的API接口平台, 一站搜索、试用、集成国内外API接口 | 云杂志网-学术期刊-首页 | 杭州实验室尾气处理_实验台_实验室家具_杭州秋叶实验设备有限公司 | 成都软件开发_OA|ERP|CRM|管理系统定制开发_成都码邻蜀科技 | 成都热收缩包装机_袖口式膜包机_高速塑封机价格_全自动封切机器_大型套膜机厂家 |