1. HBase是什么

1.1 HBase的概念

• HBase基于Google的BigTable論文，是建立的==HDFS==之上，提供高可靠性、高性能、列存儲、可伸縮、實時讀寫的分布式數(shù)據(jù)庫系統(tǒng)。
• 在需要==實時讀寫隨機訪問==超大規(guī)模數(shù)據(jù)集時，可以使用HBase。

1.2 HBase的特點

• ==海量存儲==
  • 可以存儲大批量的數(shù)據(jù)
• ==列式存儲==
  • HBase表的數(shù)據(jù)是基于列族進行存儲的，列族是在列的方向上的劃分。
• ==極易擴展==
  • 底層依賴HDFS，當磁盤空間不足的時候，只需要動態(tài)增加datanode節(jié)點就可以了
  • 可以通過增加服務器來對集群的存儲進行擴容
• ==高并發(fā)==
  • 支持高并發(fā)的讀寫請求
• ==稀疏==
  • 稀疏主要是針對HBase列的靈活性，在列族中，你可以指定任意多的列，在列數(shù)據(jù)為空的情況下，是不會占用存儲空間的。
• ==數(shù)據(jù)的多版本==
  • HBase表中的數(shù)據(jù)可以有多個版本值，默認情況下是根據(jù)版本號去區(qū)分，版本號就是插入數(shù)據(jù)的時間戳
• ==數(shù)據(jù)類型單一==
  • 所有的數(shù)據(jù)在HBase中是以==字節(jié)數(shù)組==進行存儲

2、Hbase整天架構

創(chuàng)新互聯(lián)是一家以網(wǎng)絡技術公司，為中小企業(yè)提供網(wǎng)站維護、成都網(wǎng)站制作、成都網(wǎng)站建設、外貿(mào)營銷網(wǎng)站建設、網(wǎng)站備案、服務器租用、主機域名、軟件開發(fā)、微信小程序等企業(yè)互聯(lián)網(wǎng)相關業(yè)務，是一家有著豐富的互聯(lián)網(wǎng)運營推廣經(jīng)驗的科技公司，有著多年的網(wǎng)站建站經(jīng)驗，致力于幫助中小企業(yè)在互聯(lián)網(wǎng)讓打出自已的品牌和口碑，讓企業(yè)在互聯(lián)網(wǎng)上打開一個面向全國乃至全球的業(yè)務窗口：建站歡迎咨詢：18982081108

2.1 Client客戶端

• Client是操作HBase集群的入口
  • 對于管理類的操作，如表的增、刪、改操縱，Client通過RPC與HMaster通信完成
  • 對于表數(shù)據(jù)的讀寫操作，Client通過RPC與RegionServer交互，讀寫數(shù)據(jù)
• Client類型：
  • HBase shell
  • Java編程接口
  • Thrift、Avro、Rest等等

2.2 ZooKeeper集群

• 作用

  • 實現(xiàn)了HMaster的高可用，多HMaster間進行主備選舉

  • 保存了HBase的元數(shù)據(jù)信息meta表，提供了HBase表中region的尋址入口的線索數(shù)據(jù)

  • 對HMaster和HRegionServer實現(xiàn)了監(jiān)控

2.3 HMaster

• HBase集群也是主從架構，HMaster是主的角色，是老大
• 主要負責Table表和Region的相關管理工作：
• 關于Table
  • 管理Client對Table的增刪改的操作
  • 關于Region
  • 在Region分裂后，負責新Region分配到指定的HRegionServer上
  • 管理HRegionServer間的負載均衡，遷移region分布
  • 當HRegionServer宕機后，負責其上的region的遷移

2.4 HRegionServer

• HBase集群中從的角色

• 作用

  • 響應客戶端的讀寫數(shù)據(jù)請求
  • 負責管理一系列的Region
  • 切分在運行過程中變大的region

2.5 Region

• HBase集群中分布式存儲的最小單元
• 一個Region對應一個Table表的部分數(shù)據(jù)

3、HBase數(shù)據(jù)模型

3.1 rowkey行鍵

• table的主鍵，table中的記錄按照rowkey 的字典序進行排序
• Row key行鍵可以是任意字符串(大長度是 64KB，實際應用中長度一般為 10-100bytes)

3.2 Column Family列族

• 列族或列簇
• HBase表中的每個列，都歸屬與某個列族
• 列族是表的schema的一部分(而列不是)，即建表時至少指定一個列族
• 比如創(chuàng)建一張表，名為user，有兩個列族，分別是info和data，建表語句create 'user', 'info', 'data'

3.3 Column列

• 列肯定是表的某一列族下的一個列，用列族名:列名表示，如info列族下的name列，表示為info:name
• 屬于某一個ColumnFamily,類似于我們mysql當中創(chuàng)建的具體的列

3.4 cell單元格

• 指定row key行鍵、列族、列，可以確定的一個cell單元格
• cell中的數(shù)據(jù)是沒有類型的，全部是以字節(jié)數(shù)組進行存儲
  

  3.5 Timestamp時間戳

• 可以對表中的Cell多次賦值，每次賦值操作時的時間戳timestamp，可看成Cell值的版本號version number
• 即一個Cell可以有多個版本的值

  4、HBase安裝部署

  4.1、下載安裝包

  下載地址：https://archive.apache.org/dist/hbase/1.2.1/

  4.2、安裝Hbase

  解壓到安裝目錄： tar -zxcf habse-1.2.1-bin.tar.gz -C /opt/bigdata2.7
  重命名解壓目錄：mv hbase-1.2.1 hbase

  4.3、修改配置文件

  1、需要把hadoop中的配置文件core-site.xml,hdfs-site.xml拷貝到hbase安裝目錄下的conf文件夾中
  2、修改conf目錄下的配置文件
  （1）修改hbase-env.sh
  #添加java環(huán)境變量<br/>export JAVA_HOME=/kkb/install/jdk1.8.0_141<br/>export HBASE_MANAGES_ZK=false`

（2）修改 hbase-site.xml

<configuration>
    <!--指定hbase在HDFS上的存儲路徑-->
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://node01:8020/hbase</value>
    </property>
    <!--指定hbase是分布式的-->
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
      <!--指定zk的地址，多個用,分割-->
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>node01:2181,node02:2181,node03:2181</value>
    </property>  
</configuration>

（3）修改regionservers

vim regionservers
node02
node03

（4）修改backup-masters'

node2

3、配置hbase的環(huán)境變量

vi /etc/profile

export HBASE_HOME=/opt/bigdata2.7/hbase
export PATH=$PATH:$HBASE_HOME/bin

4.4、分發(fā)hbase目錄到其他節(jié)點

進入habase目錄：cd /opt/bigdata2.7
scp -r hbase node2:/opt/bigdata2.7
scp -r hbase node3:/opt/bigdata2.7
scp /etc/profile node2:/etc
scp /etc/profile mpde3:/etc

4.5、讓所有的節(jié)點hbase環(huán)境變量生效

在所有節(jié)點執(zhí)行：
source /etc/profile

5、Hbase集群啟動和停止

（1）啟動
前提條件：先啟動hadoop集群和zookeeper集群
啟動hbase
start-hbase.sh

（2）停止
stop-hbase.sh
profile mpde3:/etc`

4.5、讓所有的節(jié)點hbase環(huán)境變量生效

在所有節(jié)點執(zhí)行：
source /etc/profile

5、Hbase集群啟動和停止

（1）啟動
前提條件：先啟動hadoop集群和zookeeper集群
啟動hbase
start-hbase.sh

（2）停止
stop-hbase.sh

網(wǎng)站名稱：Hbase原理架構與安裝部署教程-創(chuàng)新互聯(lián)
URL鏈接：http://chinadenli.net/article30/dghgpo.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供手機網(wǎng)站建設、品牌網(wǎng)站制作、網(wǎng)站排名、網(wǎng)站維護、用戶體驗、企業(yè)網(wǎng)站制作

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉載內(nèi)容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)