集群規(guī)格選型
阿里云數(shù)據(jù)庫(kù)HBase支持自由組合Master和Core節(jié)點(diǎn)規(guī)格，數(shù)量和盤(pán)的種類(lèi)。您可以根據(jù)業(yè)務(wù)特征（如QPS、存儲(chǔ)量、讀寫(xiě)請(qǐng)求、相應(yīng)延遲、穩(wěn)定性等）自由搭配。
選型主要包括以下幾個(gè)方面：
Master機(jī)器的規(guī)格。
Core節(jié)點(diǎn)的規(guī)格和數(shù)量。
盤(pán)的大小和種類(lèi)。
HBase版本。參見(jiàn)HBase版本選擇。
ECS版本：獨(dú)享規(guī)格。獨(dú)享規(guī)格是完全沒(méi)有資源爭(zhēng)搶的規(guī)格，資源保障穩(wěn)定，延遲敏感的業(yè)務(wù)請(qǐng)務(wù)必使用獨(dú)占且選擇SSD云盤(pán)。
Master選擇
Master節(jié)點(diǎn)不帶存儲(chǔ)，默認(rèn)是主備保障單點(diǎn)容災(zāi)。Master節(jié)點(diǎn)上會(huì)部署HBase的Master，HDFS的Namenode和Zookeeper等，是集群中重要節(jié)點(diǎn)。如果master的CPU不夠或者內(nèi)存不夠，會(huì)嚴(yán)重制約HBase的性能。
core的規(guī)模 | master選擇 |
< 4臺(tái) | 4核/8 GB |
4 <= core數(shù) < 8 | 8核/16 GB （小規(guī)模集群推薦Master規(guī)格） |
8 <= core數(shù) <16 | 8核/32 GB |
大于16臺(tái) | 16核/64 GB或者以上 |
Master的規(guī)格不僅受到Core節(jié)點(diǎn)數(shù)量的影響，還和集群上表的數(shù)量和地域的數(shù)量有關(guān)，如果集群的表數(shù)量或者地域數(shù)量非常多，Master節(jié)點(diǎn)也需要適當(dāng)選擇高規(guī)格。
Core選擇
Core節(jié)點(diǎn)指HBase的RegionServer，您可根據(jù)業(yè)務(wù)請(qǐng)求量來(lái)選擇合適的Core節(jié)點(diǎn)規(guī)格。Core節(jié)點(diǎn)支持的范圍為：4核/8 G 至 32核/128 G。
為了達(dá)到最佳性能，通常我們以元信息能夠全部放入緩沖作為高性能的重要依據(jù)。針對(duì)不同的實(shí)例，如下給出的節(jié)點(diǎn)選擇示例供參考：
小實(shí)例：推薦使用4核16 GB或8核32 GB。
中大實(shí)例：根據(jù)內(nèi)存與數(shù)據(jù)量的比例，來(lái)選擇Core節(jié)點(diǎn)。
存儲(chǔ)量大：推薦使用16核64 GB或32核128 GB。
存儲(chǔ)量小：推薦使用16核32 GB或32核64 GB。
請(qǐng)求量的多少并不是Core節(jié)點(diǎn)選擇的唯一標(biāo)準(zhǔn)，進(jìn)行節(jié)點(diǎn)選擇時(shí)，需要綜合多方面考慮。例如：某個(gè)業(yè)務(wù)的請(qǐng)求量為每秒數(shù)百，根據(jù)請(qǐng)求量判斷，選擇4核8 GB的節(jié)點(diǎn)即可。但如果該業(yè)務(wù)中，若假設(shè)存在以下幾種情況，選擇4核8 GB的Core節(jié)點(diǎn)可能會(huì)導(dǎo)致業(yè)務(wù)不穩(wěn)定和延遲上漲。
用戶請(qǐng)求的一行數(shù)據(jù)非常大，存在幾KB，甚至數(shù)MB。
Scan請(qǐng)求中存在復(fù)雜的Filter。
請(qǐng)求的Cache命中率很低，每個(gè)請(qǐng)求都會(huì)請(qǐng)求磁盤(pán)。
集群上表和region非常多。
若需要輔助容量評(píng)估，請(qǐng)?jiān)卺斸斏下?lián)系云HBase答疑釘釘號(hào)或者發(fā)起工單咨詢。
下表給出一些簡(jiǎn)單的建議，但是評(píng)估Core節(jié)點(diǎn)的規(guī)格需要綜合多方面考慮。
TPS+QPS | Core的個(gè)數(shù)及選擇 | 建議 |
小于1000 | 2臺(tái) 4核16 GB | 推薦的最低規(guī)格，適合低負(fù)載訪問(wèn)。每臺(tái)Core節(jié)點(diǎn)上的region不宜超過(guò)600個(gè)。 云HBase中能買(mǎi)到的最低Core節(jié)點(diǎn)為4核8 GB，但不推薦4核8 GB規(guī)格，8 GB的內(nèi)存過(guò)小，在面對(duì)高峰和大KV時(shí)容易出現(xiàn)OOM等不穩(wěn)定現(xiàn)象。 |
1000 ~ 2W | 2~3臺(tái) 8核32 GB | 8核32 GB是我們推薦的適合中低負(fù)載的規(guī)格，價(jià)格相比8核16 GB貴的不多，但內(nèi)存翻倍，穩(wěn)定性更好。 |
2W以上 | 8核32 GB，16核32 GB，16核64 GB，32核64 GB，32核128 GB， 或者以上 | 按照實(shí)際請(qǐng)求量選擇Core節(jié)點(diǎn)的數(shù)量，如果是在線型業(yè)務(wù)，適當(dāng)選擇大內(nèi)存機(jī)型來(lái)增加Cache命中率來(lái)提高性能。如果有MR/Spark等離線大負(fù)載任務(wù)要運(yùn)行或者TPS/QPS非常高，需要適當(dāng)選擇大核機(jī)器。 |
選擇高配置機(jī)器還是更多Core節(jié)點(diǎn)？
HBase支持水平無(wú)限擴(kuò)展，當(dāng)出現(xiàn)負(fù)載過(guò)高，延遲變高，不穩(wěn)定，可以通過(guò)水平增加Core節(jié)點(diǎn)解決。但是由于業(yè)務(wù)設(shè)計(jì)的問(wèn)題或者使用問(wèn)題，很可能出現(xiàn)單機(jī)熱點(diǎn)，因此Core節(jié)點(diǎn)的規(guī)格決定了單機(jī)抗熱點(diǎn)的能力。因此把Core節(jié)點(diǎn)的規(guī)格選擇的特別低，只通過(guò)水平擴(kuò)展Core節(jié)點(diǎn)的方式，在面對(duì)風(fēng)險(xiǎn)時(shí)的穩(wěn)定性會(huì)沒(méi)有高配機(jī)型來(lái)得強(qiáng)。如果有瞬時(shí)的大請(qǐng)求打過(guò)來(lái)，或者偶發(fā)的熱點(diǎn)流量（在一個(gè)地域），低配的機(jī)器可能會(huì)出現(xiàn)負(fù)載過(guò)高或者OOM影響整體的穩(wěn)定性。
因此，我們建議Core節(jié)點(diǎn)的規(guī)格要根據(jù)業(yè)務(wù)事先做好評(píng)估，選擇合適規(guī)格的Core節(jié)點(diǎn)。
如果事先選擇的Core節(jié)點(diǎn)或者M(jìn)aster節(jié)點(diǎn)規(guī)格無(wú)法滿足要求，我們還將提供原地升配的功能，將Core/Master的配置升級(jí)到合適規(guī)格，詳情請(qǐng)釘釘上聯(lián)系云HBase答疑（釘釘號(hào)：s0s3eg3）或者發(fā)起工單咨詢。
存儲(chǔ)介質(zhì)
存儲(chǔ)介質(zhì)分為3個(gè)大類(lèi)，云盤(pán)，本地盤(pán)和冷存儲(chǔ)。
云盤(pán)： 云盤(pán)的特點(diǎn)是靈活和高可靠。云盤(pán)本身有副本冗余，完全屏蔽了硬件細(xì)節(jié)，不會(huì)因?yàn)閴谋P(pán)等原因丟失數(shù)據(jù)。并且可以自由擴(kuò)容，是業(yè)務(wù)的首選存儲(chǔ)介質(zhì)。云盤(pán)分為SSD云盤(pán)和高效云盤(pán)。
本地盤(pán)： 本地盤(pán)即真實(shí)的物理盤(pán)，特點(diǎn)是價(jià)格比云盤(pán)便宜，但是本地盤(pán)大小與機(jī)型強(qiáng)綁定，不能對(duì)單塊磁盤(pán)擴(kuò)容，只能通過(guò)增加Core節(jié)點(diǎn)來(lái)增加存儲(chǔ)容量，而且本地盤(pán)機(jī)型ECS也不支持升配，靈活性沒(méi)有云盤(pán)強(qiáng)。同時(shí)，本地盤(pán)如果出現(xiàn)壞盤(pán)會(huì)對(duì)用戶產(chǎn)生影響（單塊壞盤(pán)不會(huì)出現(xiàn)丟數(shù)據(jù)，出現(xiàn)壞盤(pán)后，云HBase團(tuán)隊(duì)會(huì)第一時(shí)間處理更換）。本地盤(pán)購(gòu)買(mǎi)的起步較高，適合存儲(chǔ)容量大的大客戶。
冷存儲(chǔ)：阿里云HBase特有存儲(chǔ)，基于OSS實(shí)現(xiàn)，冷存儲(chǔ)可以搭配云盤(pán)使用，用戶可以將不常用數(shù)據(jù)存儲(chǔ)到冷存儲(chǔ)或者使用冷熱分離功能自動(dòng)實(shí)現(xiàn)冷數(shù)據(jù)歸檔來(lái)降低成本。
在選定了存儲(chǔ)介質(zhì)后，集群的存儲(chǔ)介質(zhì)不可以再更改，其中云盤(pán)可以通過(guò)擴(kuò)容或者增加Core節(jié)點(diǎn)來(lái)增加容量，但本地盤(pán)只能通過(guò)增加Core節(jié)點(diǎn)擴(kuò)容。例外的是冷存儲(chǔ)，冷存儲(chǔ)功能不一定需要在開(kāi)通HBase集群時(shí)購(gòu)買(mǎi)，可以在之后的使用過(guò)程中隨時(shí)開(kāi)通和擴(kuò)容。
冷熱程度 | 介質(zhì)類(lèi)型 | 業(yè)務(wù)類(lèi)型 |
高性能 | SSD云盤(pán)/本地SSD盤(pán)/ESSD云盤(pán) | 適合對(duì)延遲要求高的在線業(yè)務(wù)，如廣告、推薦、Feed流、人物畫(huà)像等業(yè)務(wù)，SSD/ESSD盤(pán)的延遲低，通常在1~2ms左右，最重要的是毛刺率低。對(duì)P99延遲（99%請(qǐng)求的最大延遲）在意的用戶首選。 |
高效能 | 高效云盤(pán)/本地HDD盤(pán) | 適合對(duì)延遲要求一般的在線業(yè)務(wù)，HDD盤(pán)的延遲通常在10ms量級(jí)，但毛刺率要比SSD盤(pán)要大。 |
冷數(shù)據(jù) | OSS（冷存儲(chǔ)） | 準(zhǔn)在線業(yè)務(wù)，或者歸檔業(yè)務(wù)。冷存儲(chǔ)配合云盤(pán)/本地盤(pán)寫(xiě)吞吐基本與云盤(pán)/本地盤(pán)一致。但讀冷存儲(chǔ)QPS有限制，讀延遲通常在數(shù)十毫秒量級(jí)。 |