IT培訓(xùn)網(wǎng)
IT在線學(xué)習(xí)
1.Client
用戶通過Client(客戶端)訪問HBase。同時(shí),為了提高對(duì)HBase的訪問速度和效率,客戶端還維護(hù)了一份緩存。
2.Zookeeper
Zookeeper主要起的作用是協(xié)同服務(wù),這具體包括以下幾個(gè)方面:
(1)HBase通過Zookeeper實(shí)現(xiàn)HMaster的高可用。同一時(shí)刻,Zoopkeeper保證集群中只有一個(gè)HMaster;如果HMaster出現(xiàn)異常,Zoopkeeper會(huì)通過選舉產(chǎn)生新的HMaster。
(2)Zoopkeeper監(jiān)控RegionServer的狀態(tài),如果RegionServer有異常或有新節(jié)點(diǎn)加入,Zookeeper會(huì)以回調(diào)方式通知HMaster。
(3)Zoopkeeper存儲(chǔ)HBase元數(shù)據(jù)的統(tǒng)一入口地址。HBase真正的元數(shù)據(jù)存放在自己的meta表中,meta表的位置信息存儲(chǔ)在Zookeeper中。
3.HMaster
HMaster是HBase集群的主節(jié)點(diǎn),它的職責(zé)主要包括: RegionServer狀態(tài)的監(jiān)控、RegionServer的故障轉(zhuǎn)移、元數(shù)據(jù)信息的更新、Region的分配、Region的故障轉(zhuǎn)移和集群的負(fù)載均衡等。
4. HRegionServer
HRegionServer是HBase集群的從節(jié)點(diǎn),負(fù)責(zé)用戶的讀寫請(qǐng)求。它的職責(zé)主要包括:管理主節(jié)點(diǎn)分配給它的Region、處理讀寫請(qǐng)求、與底層HDFS的交互、拆分變大的Region
以及StoreFile的合并。
5.Region
Region是HBase表的分片。HBase根據(jù)RowKey的不同的把表切分成不同的Region。一個(gè)Region由一個(gè)RegionServer管理,同一個(gè)RegionServer中可以管理多個(gè)不同的Region。
6.Store
HBase表中的一個(gè)列族對(duì)應(yīng)一個(gè)Store。Store中包含MemStore和StoreFile。
7.MemStore
MemStore就是內(nèi)存存儲(chǔ),用于緩存保存剛寫入HBase的數(shù)據(jù)或從HBase中讀取的數(shù)據(jù)。MemStore很小,一般幾兆到幾十兆。
8. StoreFile
HBase寫入數(shù)據(jù)時(shí),當(dāng)MemStore存儲(chǔ)滿后,會(huì)溢寫磁盤到StoreFile中。
9.HFile
HFile是實(shí)際的存儲(chǔ)文件。StoreFile是以HFile的形式存儲(chǔ)在HDFS的。
10. HDFS
HDFS提供真正的底層數(shù)據(jù)存儲(chǔ)服務(wù),具體功能如下:
l 提供表數(shù)據(jù)和元數(shù)據(jù)的底層分布式存儲(chǔ)服務(wù)
l 數(shù)據(jù)多副本,保證的HBase的高可靠和高可用
11.Write-Ahead logs
HBase讀寫數(shù)據(jù)時(shí),數(shù)據(jù)會(huì)先在內(nèi)存中保留一段時(shí)間,然后再寫進(jìn)磁盤。節(jié)點(diǎn)故障等因素有可能導(dǎo)致內(nèi)存中的數(shù)據(jù)丟失。為了解決這個(gè)問題,HBase會(huì)先將數(shù)據(jù)寫在Write-Ahead logfile日志文件中,然后再寫入內(nèi)存。這樣,在系統(tǒng)出現(xiàn)故障時(shí),數(shù)據(jù)就可以通過這個(gè)日志文件進(jìn)行重建
>>本文地址:http://www.littlerockbway.com/zhuanye/2021/67988.html
聲明:本站稿件版權(quán)均屬中公教育優(yōu)就業(yè)所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
1 您的年齡
2 您的學(xué)歷
3 您更想做哪個(gè)方向的工作?