欧美一区二区三区老妇人-欧美做爰猛烈大尺度电-99久久夜色精品国产亚洲a-亚洲福利视频一区二区

hbase的官方建議有哪些

這篇文章主要介紹“hbase的官方建議有哪些”,在日常操作中,相信很多人在hbase的官方建議有哪些問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”hbase的官方建議有哪些”的疑惑有所幫助!接下來,請跟著小編一起來學(xué)習(xí)吧!

公司專注于為企業(yè)提供網(wǎng)站建設(shè)、網(wǎng)站設(shè)計(jì)、微信公眾號開發(fā)、購物商城網(wǎng)站建設(shè)成都小程序開發(fā),軟件按需求定制設(shè)計(jì)等一站式互聯(lián)網(wǎng)企業(yè)服務(wù)。憑借多年豐富的經(jīng)驗(yàn),我們會仔細(xì)了解各客戶的需求而做出多方面的分析、設(shè)計(jì)、整合,為客戶設(shè)計(jì)出具風(fēng)格及創(chuàng)意性的商業(yè)解決方案,成都創(chuàng)新互聯(lián)公司更提供一系列網(wǎng)站制作和網(wǎng)站推廣的服務(wù)。

    1、regionServer上region的個數(shù):官方給出的建議是20-200個region,但是下面又說

    如何粗略計(jì)算regionServer上region:有個公式,
    

HBase 0.98.x

((RS Xmx) * hbase.regionserver.global.memstore.size) / (hbase.hregion.memstore.flush.size * (# column families))+

HBase 0.94.x

((RS Xmx) * hbase.regionserver.global.memstore.upperLimit) / (hbase.hregion.memstore.flush.size * (# column families))+

    貌似hbase.regionserver.global.memstore.size和 hbase.regionserver.global.memstore.upperLimit默認(rèn)值都是0.4,也就是說如果我RS的內(nèi)存分配16G,其他都是默認(rèn)值,只有一個列族,0.98版本的一個region個數(shù)有51個,為什么這么計(jì)算?其實(shí)這是一種極限情況,hbase.regionserver.global.memstore.upperLimit其實(shí)這個參數(shù)的作用是防止內(nèi)存占用過大,當(dāng)ReigonServer內(nèi)所有region的memstores所占用內(nèi)存總和達(dá)到heap的40%時,HBase會強(qiáng)制block所有的更新并flush這些region以釋放所有memstore占用的內(nèi)存。這個公式是假設(shè)memstore達(dá)到最大值了,為了不發(fā)生上面的情況。 同upperLimit,只不過lowerLimit在所有region的memstores所占用內(nèi)存達(dá)到Heap的35%時,不flush所有的memstore。它會找一個memstore內(nèi)存占用最大的region,做個別flush,此時寫更新還是會被block。lowerLimit算是一個在所有region強(qiáng)制flush導(dǎo)致性能降低前的補(bǔ)救措施。在日志中,表現(xiàn)為 “** Flush thread woke up with memory above low water.”
 

    參數(shù)調(diào)整會影響讀寫,如果寫的壓力大導(dǎo)致經(jīng)常超過這個閥值,則調(diào)小讀緩存hfile.block.cache.size增大該閥值,或者Heap余量較多時,不修改讀緩存大小。
如果在高壓情況下,也沒超過這個閥值,那么建議你適當(dāng)調(diào)小這個閥值再做壓測,確保觸發(fā)次數(shù)不要太多,然后還有較多Heap余量的時候,調(diào)大hfile.block.cache.size提高讀性能
    參數(shù)調(diào)整會影響讀寫,(以下是經(jīng)驗(yàn)之談吧)如果寫的壓力大導(dǎo)致經(jīng)常超過這個閥值,則調(diào)小讀緩存hfile.block.cache.size,增大該閥值,或者Heap余量較多時,不修改讀緩存大小。

    如果在高壓情況下,也沒超過這個閥值,那么建議你適當(dāng)調(diào)小這個閥值再做壓測,確保觸發(fā)次數(shù)不要太多,然后還有較多Heap余量的時候,調(diào)大hfile.block.cache.size提高讀性能
    hfile.block.cache.size表示storefile的讀緩存占用Heap的大小百分比,0.2表示20%。該值直接影響數(shù)據(jù)讀的性能。hbase.regionserver.global.memstore.upperLimit和這個參數(shù)一個影響寫,一個影響讀,如果兩值加起來超過80-90%,會有OOM的風(fēng)險(xiǎn)。
 

    2、Maximum region size
    官方推薦maximum region size is 10-20Gb,5-10Gb is optimal.
    0.98版本后加入了一些優(yōu)化機(jī)制,可以使得region size 更大。

到此,關(guān)于“hbase的官方建議有哪些”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識,請繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會繼續(xù)努力為大家?guī)砀鄬?shí)用的文章!

新聞標(biāo)題:hbase的官方建議有哪些
網(wǎng)頁地址:http://chinadenli.net/article18/pigigp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供品牌網(wǎng)站設(shè)計(jì)微信公眾號網(wǎng)頁設(shè)計(jì)公司電子商務(wù)App開發(fā)動態(tài)網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

成都定制網(wǎng)站網(wǎng)頁設(shè)計(jì)