实战IT培训机构_黄色激情网站_IT培训班选大学生IT技术培训中心_黄色激情视频网站_中公优就业

400-650-7353
您所在的位置:首頁 > IT干貨資料 > 大數(shù)據(jù) > 【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介

【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介

  • 發(fā)布: 大數(shù)據(jù)培訓(xùn)
  • 來源:大數(shù)據(jù)干貨資料
  • 2021-03-18 19:46:59
  • 閱讀()
  • 分享
  • 手機(jī)端入口

1.Client

用戶通過Client(客戶端)訪問HBase。同時,為了提高對HBase的訪問速度和效率,客戶端還維護(hù)了一份緩存。

2.Zookeeper

Zookeeper主要起的作用是協(xié)同服務(wù),這具體包括以下幾個方面:

(1)HBase通過Zookeeper實(shí)現(xiàn)HMaster的高可用。同一時刻,Zoopkeeper保證集群中只有一個HMaster;如果HMaster出現(xiàn)異常,Zoopkeeper會通過選舉產(chǎn)生新的HMaster。

(2)Zoopkeeper監(jiān)控RegionServer的狀態(tài),如果RegionServer有異常或有新節(jié)點(diǎn)加入,Zookeeper會以回調(diào)方式通知HMaster。

(3)Zoopkeeper存儲HBase元數(shù)據(jù)的統(tǒng)一入口地址。HBase真正的元數(shù)據(jù)存放在自己的meta表中,meta表的位置信息存儲在Zookeeper中。

3.HMaster

HMaster是HBase集群的主節(jié)點(diǎn),它的職責(zé)主要包括: RegionServer狀態(tài)的監(jiān)控、RegionServer的故障轉(zhuǎn)移、元數(shù)據(jù)信息的更新、Region的分配、Region的故障轉(zhuǎn)移和集群的負(fù)載均衡等。

4. HRegionServer

HRegionServer是HBase集群的從節(jié)點(diǎn),負(fù)責(zé)用戶的讀寫請求。它的職責(zé)主要包括:管理主節(jié)點(diǎn)分配給它的Region、處理讀寫請求、與底層HDFS的交互、拆分變大的Region

以及StoreFile的合并。

5.Region

Region是HBase表的分片。HBase根據(jù)RowKey的不同的把表切分成不同的Region。一個Region由一個RegionServer管理,同一個RegionServer中可以管理多個不同的Region。

6.Store

HBase表中的一個列族對應(yīng)一個Store。Store中包含MemStore和StoreFile。

7.MemStore

MemStore就是內(nèi)存存儲,用于緩存保存剛寫入HBase的數(shù)據(jù)或從HBase中讀取的數(shù)據(jù)。MemStore很小,一般幾兆到幾十兆。

8. StoreFile

HBase寫入數(shù)據(jù)時,當(dāng)MemStore存儲滿后,會溢寫磁盤到StoreFile中。

9.HFile

HFile是實(shí)際的存儲文件。StoreFile是以HFile的形式存儲在HDFS的。

10. HDFS

HDFS提供真正的底層數(shù)據(jù)存儲服務(wù),具體功能如下:

l 提供表數(shù)據(jù)和元數(shù)據(jù)的底層分布式存儲服務(wù)

l 數(shù)據(jù)多副本,保證的HBase的高可靠和高可用

11.Write-Ahead logs

HBase讀寫數(shù)據(jù)時,數(shù)據(jù)會先在內(nèi)存中保留一段時間,然后再寫進(jìn)磁盤。節(jié)點(diǎn)故障等因素有可能導(dǎo)致內(nèi)存中的數(shù)據(jù)丟失。為了解決這個問題,HBase會先將數(shù)據(jù)寫在Write-Ahead logfile日志文件中,然后再寫入內(nèi)存。這樣,在系統(tǒng)出現(xiàn)故障時,數(shù)據(jù)就可以通過這個日志文件進(jìn)行重建

文章“【大數(shù)據(jù)基礎(chǔ)知識】HBase組件簡介”已幫助

>>本文地址:http://www.jecan.cn/zhuanye/2021/67988.html

THE END  

聲明:本站稿件版權(quán)均屬中公教育優(yōu)就業(yè)所有,未經(jīng)許可不得擅自轉(zhuǎn)載。

1 您的年齡

2 您的學(xué)歷

3 您更想做哪個方向的工作?

獲取測試結(jié)果
  • 大前端大前端
  • 大數(shù)據(jù)大數(shù)據(jù)
  • 互聯(lián)網(wǎng)營銷互聯(lián)網(wǎng)營銷
  • JavaJava
  • Linux云計(jì)算Linux
  • Python+人工智能Python
  • 嵌入式物聯(lián)網(wǎng)嵌入式
  • 全域電商運(yùn)營全域電商運(yùn)營
  • 軟件測試軟件測試
  • 室內(nèi)設(shè)計(jì)室內(nèi)設(shè)計(jì)
  • 平面設(shè)計(jì)平面設(shè)計(jì)
  • 電商設(shè)計(jì)電商設(shè)計(jì)
  • 網(wǎng)頁設(shè)計(jì)網(wǎng)頁設(shè)計(jì)
  • 全鏈路UI/UE設(shè)計(jì)UI設(shè)計(jì)
  • VR/AR游戲開發(fā)VR/AR
  • 網(wǎng)絡(luò)安全網(wǎng)絡(luò)安全
  • 新媒體與短視頻運(yùn)營新媒體
  • 直播帶貨直播帶貨
  • 智能機(jī)器人軟件開發(fā)智能機(jī)器人
 

快速通道fast track

近期開班時間TIME

主站蜘蛛池模板: 鼓风干燥箱_真空烘箱_高温干燥箱_恒温培养箱-上海笃特科学仪器 | 济南律师,济南法律咨询,山东法律顾问-山东沃德律师事务所 | 移动厕所租赁|移动卫生间|上海移动厕所租赁-家瑞租赁 | 交变/复合盐雾试验箱-高低温冲击试验箱_安奈设备产品供应杭州/江苏南京/安徽马鞍山合肥等全国各地 | 工控机-图像采集卡-PoE网卡-人工智能-工业主板-深圳朗锐智科 | 微波消解仪器_智能微波消解仪报价_高压微波消解仪厂家_那艾 | 斗式提升机,斗式提升机厂家-淄博宏建机械有限公司 | 黑田精工电磁阀-CAMMOZI气缸-ROSS电磁-上海茂硕机械设备有限公司 | 北京律师事务所_房屋拆迁律师_24小时免费法律咨询_云合专业律师网 | 山东钢衬塑罐_管道_反应釜厂家-淄博富邦滚塑防腐设备科技有限公司 | 医用酒精_84消毒液_碘伏消毒液等医用消毒液-漓峰消毒官网 | 艾默生变频器,艾默生ct,变频器,ct驱动器,广州艾默生变频器,供水专用变频器,风机变频器,电梯变频器,艾默生变频器代理-广州市盟雄贸易有限公司官方网站-艾默生变频器应用解决方案服务商 | 健康管理师报考条件,考试时间,报名入口—首页 | 百度关键词优化_网站优化_SEO价格 - 云无限好排名 | 避光流动池-带盖荧光比色皿-生化流动比色皿-宜兴市晶科光学仪器 东莞爱加真空科技有限公司-进口真空镀膜机|真空镀膜设备|Polycold维修厂家 | 压砖机、液压制砖机、静压砖机、环保砖机生产厂家—杜甫机械 | 济南宣传册设计-画册设计_济南莫都品牌设计公司 | 自动螺旋上料机厂家价格-斗式提升机定制-螺杆绞龙输送机-杰凯上料机 | 预制直埋蒸汽保温管-直埋管道-聚氨酯发泡保温管厂家 - 唐山市吉祥保温工贸有限公司 | 小程序开发公司_APP开发多少钱_软件开发定制_微信小程序制作_客户销售管理软件-济南小溪畅流网络科技有限公司 | 桥架-槽式电缆桥架-镀锌桥架-托盘式桥架 - 上海亮族电缆桥架制造有限公司 | 氮化镓芯片-碳化硅二极管 - 华燊泰半导体 | 防爆型气象站_农业气象站_校园气象站_农业四情监测系统「山东万象环境科技有限公司」 | 珠光砂保温板-一体化保温板-有釉面发泡陶瓷保温板-杭州一体化建筑材料 | 滚筒线,链板线,总装线,流水线-上海体能机电有限公司 | 耐腐蚀泵,耐腐蚀真空泵,玻璃钢真空泵-淄博华舜耐腐蚀真空泵有限公司 | 杭州货架订做_组合货架公司_货位式货架_贯通式_重型仓储_工厂货架_货架销售厂家_杭州永诚货架有限公司 | 储气罐,真空罐,缓冲罐,隔膜气压罐厂家批发价格,空压机储气罐规格型号-上海申容压力容器集团有限公司 | X光检测仪_食品金属异物检测机_X射线检测设备_微现检测 | 连续密炼机_双转子连续密炼机_连续式密炼机-南京永睿机械制造有限公司 | 排烟防火阀-消防排烟风机-正压送风口-厂家-价格-哪家好-德州鑫港旺通风设备有限公司 | 日本细胞免疫疗法_肿瘤免疫治疗_NK细胞疗法 - 免疫密码 | 建筑资质代办-建筑企业资质代办机构-建筑资质代办公司 | 科威信洗净科技,碳氢清洗机,超声波清洗机,真空碳氢清洗机 | 【法利莱住人集装箱厂家】—活动集装箱房,集装箱租赁_大品牌,更放心 | 特种阀门-调节阀门-高温熔盐阀-镍合金截止阀-钛阀门-高温阀门-高性能蝶阀-蒙乃尔合金阀门-福建捷斯特阀门制造有限公司 | sus630/303cu不锈钢棒,440C/430F/17-4ph不锈钢研磨棒-江苏德镍金属科技有限公司 | 凝胶成像仪,化学发光凝胶成像系统,凝胶成像分析系统-上海培清科技有限公司 | 制氮设备-变压吸附制氮设备-制氧设备-杭州聚贤气体设备制造有限公司 | 专业生产动态配料系统_饲料配料系统_化肥配料系统等配料系统-郑州鑫晟重工机械有限公司 | 江苏皓越真空设备有限公司|