一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Hbase的基礎(chǔ)性介紹與入門

汽車玩家 ? 來源:今日頭條 ? 作者:不一樣的程序猿 ? 2020-03-15 17:21 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

無論是 NoSQL,還是大數(shù)據(jù)領(lǐng)域,HBase 都是非常"炙熱"的一門數(shù)據(jù)庫。本文將對 HBase 做一些基礎(chǔ)性的介紹,旨在入門。

一、簡介

HBase 是一個(gè)開源的、面向列的非關(guān)系型分布式數(shù)據(jù)庫,目前是Hadoop體系中非常關(guān)鍵的一部分。在最初,HBase是基于谷歌的 BigTable 原型實(shí)現(xiàn)的,許多技術(shù)來自于Fay Chang在2006年所撰寫的Google論文"BigTable"。與 BigTable基于Google文件系統(tǒng)(File System)一樣,HBase則是基于HDFS(Hadoop的分布式文件系統(tǒng))之上而開發(fā)的。

HBase 采用 Java 語言實(shí)現(xiàn),在其內(nèi)部實(shí)現(xiàn)了BigTable論文提到的一些壓縮算法、內(nèi)存操作和布隆過濾器等,這些能力使得HBase 在海量數(shù)據(jù)存儲(chǔ)、高性能讀寫場景中得到了大量應(yīng)用,如 Facebook 在 2010年11 月開始便一直選用 HBase來作為消息平臺(tái)的存儲(chǔ)層技術(shù)。HBase 以Apache License Version 2.0開源,這是一種對商業(yè)應(yīng)用友好的協(xié)議,同時(shí)該項(xiàng)目當(dāng)前也是Apache軟件基金會(huì)的頂級(jí)項(xiàng)目之一。

有什么特性

基于列式存儲(chǔ)模型,對于數(shù)據(jù)實(shí)現(xiàn)了高度壓縮,節(jié)省存儲(chǔ)成本

采用 LSM 機(jī)制而不是B(+)樹,這使得HBase非常適合海量數(shù)據(jù)實(shí)時(shí)寫入的場景

高可靠,一個(gè)數(shù)據(jù)會(huì)包含多個(gè)副本(默認(rèn)是3副本),這得益于HDFS的復(fù)制能力,由RegionServer提供自動(dòng)故障轉(zhuǎn)移的功能

高擴(kuò)展,支持分片擴(kuò)展能力(基于Region),可實(shí)現(xiàn)自動(dòng)、數(shù)據(jù)均衡

強(qiáng)一致性讀寫,數(shù)據(jù)的讀寫都針對主Region上進(jìn)行,屬于CP型的系統(tǒng)

易操作,HBase提供了Java API、RestAPI/Thrift API等接口

查詢優(yōu)化,采用Block Cache 和 布隆過濾器來支持海量數(shù)據(jù)的快速查找

與RDBMS的區(qū)別

對于傳統(tǒng) RDBMS 來說,支持 ACID 事務(wù)是數(shù)據(jù)庫的基本能力,而 HBase 則使用行級(jí)鎖來保證寫操作的原子性,但是不支持多行寫操作的事務(wù)性,這主要是從靈活性和擴(kuò)展性上做出的權(quán)衡。

ACID 要素包含 原子性(Atomicity)、一致性(Consistency)、隔離性(Isolation)以及持久性(Durability)

總體來說, HBase 與傳統(tǒng)關(guān)系數(shù)據(jù)庫的區(qū)別,如下表所示:

Hbase的基礎(chǔ)性介紹與入門

二、數(shù)據(jù)模型

下面,我們以關(guān)系型數(shù)據(jù)庫的一個(gè)數(shù)據(jù)表來演示 HBase 的不同之處。

先來看下面這張表:

Hbase的基礎(chǔ)性介紹與入門

這里記錄的是一些家庭設(shè)備上報(bào)的狀態(tài)數(shù)據(jù)(DeviceState),其中包括設(shè)備名、狀態(tài)、時(shí)間戳這些字段。

在 HBase 中,數(shù)據(jù)是按照列族(Column Family,簡稱CF)來存儲(chǔ)的,也就是說對于不同的列會(huì)被分開存儲(chǔ)到不同的文件。那么對于上面的狀態(tài)數(shù)據(jù)表來說,在HBase中會(huì)被存儲(chǔ)為兩份:

列族1. 設(shè)備名

Hbase的基礎(chǔ)性介紹與入門

列族2. 狀態(tài)

Hbase的基礎(chǔ)性介紹與入門

這里Row-key是唯一定位數(shù)據(jù)行的ID字段,而Row-key 加上 CF、Column-Key,再加上一個(gè)時(shí)間戳才可以定位到一個(gè)單元格數(shù)據(jù)。其中時(shí)間戳用來表示數(shù)據(jù)行的版本, 在HBase中默認(rèn)會(huì)有 3 個(gè)時(shí)間戳的版本數(shù)據(jù),這意味著對同一條數(shù)據(jù)(同一個(gè)Rowkey關(guān)聯(lián)的數(shù)據(jù))進(jìn)行寫入時(shí),最多可以保存3個(gè)版本。

在查詢某一行的數(shù)據(jù)時(shí),HBase需要同時(shí)從兩個(gè)列族(文件)中進(jìn)行查找,最終將結(jié)果合并后返回給客戶端。 由此可見如果列族太多,則會(huì)影響讀取的性能,在設(shè)計(jì)時(shí)就需要做一些權(quán)衡。

由此可見,HBase的使用方式與關(guān)系型數(shù)據(jù)庫是大不相同的,在使用 HBase 時(shí)需要拋棄許多關(guān)系型數(shù)據(jù)庫的思維及做法,比如強(qiáng)類型、二級(jí)索引、表連接、觸發(fā)器等等。

然而 HBase 的靈活性及高度可伸縮性卻是傳統(tǒng) RDBMS 無法比擬的。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    8960

    瀏覽量

    140209
  • Hbase
    +關(guān)注

    關(guān)注

    0

    文章

    27

    瀏覽量

    11442
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    CAN入門應(yīng)用手冊

    電子發(fā)燒友網(wǎng)站提供《CAN入門應(yīng)用手冊 .pdf》資料免費(fèi)下載
    發(fā)表于 07-14 14:45 ?0次下載

    DSP從入門到精通全集

    這是一本循序漸進(jìn)介紹DSP的書籍,從DSP的入門知識(shí)介紹到DPS的硬件,接口,應(yīng)用,從DSP的ADC/DAC到數(shù)字濾波器處理。本文除了對DSP的各種軟硬件知識(shí)進(jìn)行介紹后,還結(jié)合實(shí)際,接
    發(fā)表于 07-12 14:36

    【「零基礎(chǔ)開發(fā)AI Agent」閱讀體驗(yàn)】總體預(yù)覽及入門

    基礎(chǔ)知識(shí)有所補(bǔ)充,另外書本后面的案例也會(huì)對Ai的應(yīng)用產(chǎn)生一些啟發(fā). 首先老規(guī)矩,先看一下目錄結(jié)構(gòu) 包含3大主題: 入門篇:介紹了Agent的概念、發(fā)展、與Prompt和Copilot的區(qū)別
    發(fā)表于 04-20 21:53

    分布式存儲(chǔ)數(shù)據(jù)恢復(fù)—虛擬機(jī)上hbase和hive數(shù)據(jù)庫數(shù)據(jù)恢復(fù)案例

    分布式存儲(chǔ)數(shù)據(jù)恢復(fù)環(huán)境: 16臺(tái)某品牌R730xd服務(wù)器節(jié)點(diǎn),每臺(tái)服務(wù)器節(jié)點(diǎn)上有數(shù)臺(tái)虛擬機(jī)。 虛擬機(jī)上部署Hbase和Hive數(shù)據(jù)庫。 分布式存儲(chǔ)故障: 數(shù)據(jù)庫底層文件被誤刪除,數(shù)據(jù)庫不能使用。要求恢復(fù)hbase和hive數(shù)據(jù)庫。
    的頭像 發(fā)表于 04-17 11:05 ?218次閱讀

    典型電路原理、電路識(shí)圖從入門到精通等資料

    1、電路識(shí)圖從入門到精通高清電子資料 由淺入深地介紹了電路圖的基礎(chǔ)知識(shí)、典型單元電路的識(shí)圖方法,通過“入門篇”和“精通篇”循序漸進(jìn)、由淺入深地介紹了電路圖的基礎(chǔ)知識(shí)、典型單元電路的識(shí)圖
    的頭像 發(fā)表于 04-15 15:53 ?6902次閱讀
    典型電路原理、電路識(shí)圖從<b class='flag-5'>入門</b>到精通等資料

    電路識(shí)圖從入門到精通高清電子資料

    由淺入深地介紹了電路圖的基礎(chǔ)知識(shí)、典型單元電路的識(shí)圖方法,通過“入門篇”和“精通篇”循序漸進(jìn)、由淺入深地介紹了電路圖的基礎(chǔ)知識(shí)、典型單元電路的識(shí)圖方法,以及典型小家電、電動(dòng)車、洗衣機(jī)、電冰箱、空調(diào)器
    發(fā)表于 04-10 16:22

    2025年氣密測試設(shè)備使用教程:入門必看,氣密測試儀使用方法

    在2025年的現(xiàn)代制造業(yè)中,氣密測試儀已成為確保產(chǎn)品品質(zhì)不可或缺的工具。無論是新能源汽車的電池包、精密醫(yī)療器械,還是高端消費(fèi)電子產(chǎn)品,氣密測試都是生產(chǎn)流程中的關(guān)鍵環(huán)節(jié)。本文將詳細(xì)介紹如何正確操作
    的頭像 發(fā)表于 03-10 11:46 ?553次閱讀
    2025年氣密<b class='flag-5'>性</b>測試設(shè)備使用教程:<b class='flag-5'>入門</b>必看,氣密<b class='flag-5'>性</b>測試儀使用方法

    液晶屏維修從入門到精通

    資料介紹了如何從液晶屏入門到提高全部內(nèi)容
    發(fā)表于 02-24 16:46 ?5次下載

    DeepSeek:從入門到精通

    DeepSeek:從入門到精通
    發(fā)表于 02-08 18:00 ?126次下載

    MODBUS串口通訊初級(jí)入門手冊

    初級(jí)入門手冊介紹
    發(fā)表于 01-23 16:24 ?2次下載

    AIGC入門及鴻蒙入門

    人工智能和大數(shù)據(jù)技術(shù)的創(chuàng)新內(nèi)容生成工具,正逐漸成為矚目的焦點(diǎn)。它為創(chuàng)意工作打開了全新的大門,尤其在文本和視覺內(nèi)容創(chuàng)作方面表現(xiàn)卓越。對于初學(xué)者來說,可以通過學(xué)習(xí)相關(guān)基礎(chǔ)知識(shí)和實(shí)踐操作來入門AIGC領(lǐng)域。同時(shí)
    發(fā)表于 01-13 10:32

    WinCC 7.5入門指南

    WinCC 7.5入門指南
    發(fā)表于 10-21 10:37 ?12次下載

    NHET入門

    電子發(fā)燒友網(wǎng)站提供《NHET入門.pdf》資料免費(fèi)下載
    發(fā)表于 10-14 11:26 ?0次下載
    NHET<b class='flag-5'>入門</b>

    BQ76925入門

    電子發(fā)燒友網(wǎng)站提供《BQ76925入門.pdf》資料免費(fèi)下載
    發(fā)表于 09-19 13:34 ?1次下載
    BQ76925<b class='flag-5'>入門</b>

    BQ產(chǎn)品入門指南

    電子發(fā)燒友網(wǎng)站提供《BQ產(chǎn)品入門指南.pdf》資料免費(fèi)下載
    發(fā)表于 09-02 12:00 ?4次下載
    BQ產(chǎn)品<b class='flag-5'>入門</b>指南