• <xmp id="wgksg"><samp id="wgksg"></samp>
  • <blockquote id="wgksg"></blockquote>
  • 400-650-7353

    精品課程

    您所在的位置:首頁 > IT干貨資料 > 大數據 > 【大數據基礎知識】HBase組件簡介

    【大數據基礎知識】HBase組件簡介

    • 發布: 大數據培訓
    • 來源:大數據干貨資料
    • 2021-03-18 19:46:59
    • 閱讀()
    • 分享
    • 手機端入口

    1.Client

    用戶通過Client(客戶端)訪問HBase。同時,為了提高對HBase的訪問速度和效率,客戶端還維護了一份緩存。

    2.Zookeeper

    Zookeeper主要起的作用是協同服務,這具體包括以下幾個方面:

    (1)HBase通過Zookeeper實現HMaster的高可用。同一時刻,Zoopkeeper保證集群中只有一個HMaster;如果HMaster出現異常,Zoopkeeper會通過選舉產生新的HMaster。

    (2)Zoopkeeper監控RegionServer的狀態,如果RegionServer有異;蛴行鹿濣c加入,Zookeeper會以回調方式通知HMaster。

    (3)Zoopkeeper存儲HBase元數據的統一入口地址。HBase真正的元數據存放在自己的meta表中,meta表的位置信息存儲在Zookeeper中。

    3.HMaster

    HMaster是HBase集群的主節點,它的職責主要包括: RegionServer狀態的監控、RegionServer的故障轉移、元數據信息的更新、Region的分配、Region的故障轉移和集群的負載均衡等。

    4. HRegionServer

    HRegionServer是HBase集群的從節點,負責用戶的讀寫請求。它的職責主要包括:管理主節點分配給它的Region、處理讀寫請求、與底層HDFS的交互、拆分變大的Region

    以及StoreFile的合并。

    5.Region

    Region是HBase表的分片。HBase根據RowKey的不同的把表切分成不同的Region。一個Region由一個RegionServer管理,同一個RegionServer中可以管理多個不同的Region。

    6.Store

    HBase表中的一個列族對應一個Store。Store中包含MemStore和StoreFile。

    7.MemStore

    MemStore就是內存存儲,用于緩存保存剛寫入HBase的數據或從HBase中讀取的數據。MemStore很小,一般幾兆到幾十兆。

    8. StoreFile

    HBase寫入數據時,當MemStore存儲滿后,會溢寫磁盤到StoreFile中。

    9.HFile

    HFile是實際的存儲文件。StoreFile是以HFile的形式存儲在HDFS的。

    10. HDFS

    HDFS提供真正的底層數據存儲服務,具體功能如下:

    l 提供表數據和元數據的底層分布式存儲服務

    l 數據多副本,保證的HBase的高可靠和高可用

    11.Write-Ahead logs

    HBase讀寫數據時,數據會先在內存中保留一段時間,然后再寫進磁盤。節點故障等因素有可能導致內存中的數據丟失。為了解決這個問題,HBase會先將數據寫在Write-Ahead logfile日志文件中,然后再寫入內存。這樣,在系統出現故障時,數據就可以通過這個日志文件進行重建

    課程好禮申請領取
    您的姓名
    您的電話
    意向課程
     

    中公優就業

    官方QQ

    掃描上方二維碼或點擊一鍵加群,免費領取價值599元網課,加群暗號:599。 一鍵加群

    >>本文地址:
    注:本站稿件未經許可不得轉載,轉載請保留出處及源文件地址。

    推薦閱讀

    優就業:ujiuye

    關注中公優就業官方微信

    • 關注微信回復關鍵詞“大禮包”,領80G學習資料
    QQ交流群
    領取免費網課
    (加群備注“網站”)
    IT培訓交流群 加入群聊 +
    軟件測試 加入群聊 +
    全鏈路UI/UE設計 加入群聊 +
    Python+人工智能 加入群聊 +
    互聯網營銷 加入群聊 +
    Java開發 加入群聊 +
    PHP開發 加入群聊 +
    VR/AR游戲開發 加入群聊 +
    大前端 加入群聊 +
    大數據 加入群聊 +
    Linux云計算 加入群聊 +
    優就業官方微信
    掃碼回復關鍵詞“大禮包”
    領取80G學習資料

    測一測
    你適合學哪門IT技術?

    1 您的年齡

    2 您的學歷

    3 您更想做哪個方向的工作?

    獲取測試結果
     
    課程資料、活動優惠 領取通道
     
     
    A级毛片毛片免费观看久,A毛看片免费观看视频,毛片曰本女人牲交视频视频