国产99久久精品_欧美日本韩国一区二区_激情小说综合网_欧美一级二级视频_午夜av电影_日本久久精品视频

最新文章專題視頻專題問答1問答10問答100問答1000問答2000關(guān)鍵字專題1關(guān)鍵字專題50關(guān)鍵字專題500關(guān)鍵字專題1500TAG最新視頻文章推薦1 推薦3 推薦5 推薦7 推薦9 推薦11 推薦13 推薦15 推薦17 推薦19 推薦21 推薦23 推薦25 推薦27 推薦29 推薦31 推薦33 推薦35 推薦37視頻文章20視頻文章30視頻文章40視頻文章50視頻文章60 視頻文章70視頻文章80視頻文章90視頻文章100視頻文章120視頻文章140 視頻2關(guān)鍵字專題關(guān)鍵字專題tag2tag3文章專題文章專題2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章專題3
問答文章1 問答文章501 問答文章1001 問答文章1501 問答文章2001 問答文章2501 問答文章3001 問答文章3501 問答文章4001 問答文章4501 問答文章5001 問答文章5501 問答文章6001 問答文章6501 問答文章7001 問答文章7501 問答文章8001 問答文章8501 問答文章9001 問答文章9501
當(dāng)前位置: 首頁 - 科技 - 知識(shí)百科 - 正文

hbase的行鎖與多版本并發(fā)控制(MVCC)

來源:懂視網(wǎng) 責(zé)編:小采 時(shí)間:2020-11-09 13:13:51
文檔

hbase的行鎖與多版本并發(fā)控制(MVCC)

hbase的行鎖與多版本并發(fā)控制(MVCC):MVCC (Multiversion Concurrency Control),即多版本并發(fā)控制技術(shù),它使得大部分支持行鎖的事務(wù)引擎,不再單純的使用行鎖來進(jìn)行數(shù)據(jù)庫的并發(fā)控制,取而代之的是,把數(shù)據(jù)庫的行鎖與行的多個(gè)版本結(jié)合起來,只需要很小的開銷,就可以實(shí)現(xiàn)非鎖定讀,從而大大提高
推薦度:
導(dǎo)讀hbase的行鎖與多版本并發(fā)控制(MVCC):MVCC (Multiversion Concurrency Control),即多版本并發(fā)控制技術(shù),它使得大部分支持行鎖的事務(wù)引擎,不再單純的使用行鎖來進(jìn)行數(shù)據(jù)庫的并發(fā)控制,取而代之的是,把數(shù)據(jù)庫的行鎖與行的多個(gè)版本結(jié)合起來,只需要很小的開銷,就可以實(shí)現(xiàn)非鎖定讀,從而大大提高

MVCC (Multiversion Concurrency Control),即多版本并發(fā)控制技術(shù),它使得大部分支持行鎖的事務(wù)引擎,不再單純的使用行鎖來進(jìn)行數(shù)據(jù)庫的并發(fā)控制,取而代之的是,把數(shù)據(jù)庫的行鎖與行的多個(gè)版本結(jié)合起來,只需要很小的開銷,就可以實(shí)現(xiàn)非鎖定讀,從而大大提高

MVCC (Multiversion Concurrency Control),即多版本并發(fā)控制技術(shù),它使得大部分支持行鎖的事務(wù)引擎,不再單純的使用行鎖來進(jìn)行數(shù)據(jù)庫的并發(fā)控制,取而代之的是,把數(shù)據(jù)庫的行鎖與行的多個(gè)版本結(jié)合起來,只需要很小的開銷,就可以實(shí)現(xiàn)非鎖定讀,從而大大提高數(shù)據(jù)庫系統(tǒng)的并發(fā)性能。

HBase正是通過行鎖+MVCC保證了高效的并發(fā)讀寫。

為什么需要并發(fā)控制

HBase系統(tǒng)本身只能保證單行的ACID特性。ACID的含義是:

  • 原子性(Atomicity)
  • 一致性(Consistency)
  • 隔離性(Isolation)
  • 持久性(Durability)
  • 傳統(tǒng)的關(guān)系型數(shù)據(jù)庫一般都提供了跨越所有數(shù)據(jù)的ACID特性;為了性能考慮,HBase只提供了基于單行的ACID。

    下面是一個(gè)hbase并發(fā)寫的例子。

    原始數(shù)據(jù)如下
    mvcc

    從Apache HBase Write Path一文可以知道hbase寫數(shù)據(jù)是分為兩步:
    1. 寫Write-Ahead-Log(WAL)文件
    2. 寫MemStore:將每個(gè)cell[(row,column)對(duì)]的數(shù)據(jù)寫到內(nèi)存中的memstore

    寫寫同步

    假定對(duì)寫沒有采取并發(fā)控制,并考慮以下的順序:

    mvcc

    最終得到的結(jié)果是:

    mvcc

    這樣就得到了不一致的結(jié)果。顯然我們需要對(duì)并發(fā)寫操作進(jìn)行同步。
    最簡(jiǎn)單的方式是提供一個(gè)基于行的獨(dú)占鎖來保證對(duì)同一行寫的性。所以寫的順序是:

  • (0) 獲取行鎖
  • (1) 寫WAL文件
  • (2) 更新MemStore:將每個(gè)cell寫入到memstore
  • (3) 釋放行鎖
  • 讀寫同步

    盡管對(duì)并發(fā)寫加了鎖,但是對(duì)于讀呢?見下面的例子:
    mvcc

    如果在上面的圖中紅線所示的地方進(jìn)行讀操作,最終得到的結(jié)果是:
    mvcc

    可見需要對(duì)讀和寫也進(jìn)行并發(fā)控制,不然會(huì)得到不一致的數(shù)據(jù)。最簡(jiǎn)單的方案就是讀和寫公用一把鎖。這樣雖然保證了ACID特性,但是讀寫操作同時(shí)搶占鎖會(huì)互相影響各自的性能。

    MVCC算法

    HBase采用了MVCC算法來避免讀操作去獲取行鎖。

    對(duì)于寫操作:

  • (w1) 獲取行鎖后,每個(gè)寫操作都立即分配一個(gè)寫序號(hào)
  • (w2) 寫操作在保存每個(gè)數(shù)據(jù)cell時(shí)都要帶上寫序號(hào)
  • (w3) 寫操作需要申明以這個(gè)寫序號(hào)來完成本次寫操作
  • 對(duì)于讀操作:

  • (r1) 每個(gè)讀操作開始都分配一個(gè)讀序號(hào),也稱為讀取點(diǎn)
  • (r2) 讀取點(diǎn)的值是所有的寫操作完成序號(hào)中的最大整數(shù)(所有的寫操作完成序號(hào)<=讀取點(diǎn))
  • (r3) 對(duì)某個(gè)(row,column)的讀取操作r來說,結(jié)果是滿足寫序號(hào)為“寫序號(hào)<=讀取點(diǎn)這個(gè)范圍內(nèi)”的最大整數(shù)的所有cell值的組合
  • 在采用MVCC后的數(shù)據(jù)執(zhí)行圖:
    mvcc

    注意到采用MVCC算法后,每一次寫操作都有一個(gè)寫序號(hào)(即w1步),每個(gè)cell數(shù)據(jù)寫memstore操作都有一個(gè)寫序號(hào)(w2,例如:“Cloudera [wn=1]”)),并且每次寫操作完成也是基于這個(gè)寫序號(hào)(w3)。

    如果在“Restaurant [wn=2]” 這步之后,“Waiter [wn=2]”這步之前,開始一個(gè)讀操作。根據(jù)規(guī)則r1和r2,讀的序號(hào)為1。根據(jù)規(guī)則3,讀操作以序號(hào)1讀到的值是:

    mvcc

    這樣就實(shí)現(xiàn)了以無鎖的方式讀取到一致的數(shù)據(jù)了。

    重新總結(jié)下MVCC算法下寫操作的執(zhí)行流程:

  • (0) 獲取行鎖
  • (0a) 獲取寫序號(hào)
  • (1) 寫WAL文件
  • (2) 更新MemStore:將每個(gè)cell寫入到memstore
  • (2a) 以寫序號(hào)完成操作
  • (3) 釋放行鎖
  • 本文是基于HBase 0.92. 在HBase 0.94中會(huì)有些優(yōu)化策略,比如 HBASE-51 提到的。

    英文原文:https://blogs.apache.org/hbase/entry/apache_hbase_internals_locking_and

    參考:深入理解MVCC多版本并發(fā)控制

    聲明:本網(wǎng)頁內(nèi)容旨在傳播知識(shí),若有侵權(quán)等問題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com

    文檔

    hbase的行鎖與多版本并發(fā)控制(MVCC)

    hbase的行鎖與多版本并發(fā)控制(MVCC):MVCC (Multiversion Concurrency Control),即多版本并發(fā)控制技術(shù),它使得大部分支持行鎖的事務(wù)引擎,不再單純的使用行鎖來進(jìn)行數(shù)據(jù)庫的并發(fā)控制,取而代之的是,把數(shù)據(jù)庫的行鎖與行的多個(gè)版本結(jié)合起來,只需要很小的開銷,就可以實(shí)現(xiàn)非鎖定讀,從而大大提高
    推薦度:
    標(biāo)簽: 控制 版本 鎖定
    • 熱門焦點(diǎn)

    最新推薦

    猜你喜歡

    熱門推薦

    專題
    Top 主站蜘蛛池模板: 国产一区精品 | 免费啪啪网 | 国产精品综合色区在线观看 | 欧美日韩 在线播放 | 最新国产小视频在线播放 | 亚洲国产成人久久一区久久 | 免费大黄网站 | 在线观看网站国产 | 在线色网| 国产一区二区免费视频 | 国产精品一区二区国产 | 亚洲国产精品久久久久久 | 国产片一区二区三区 | 国产精品久久一区一区 | 久久大香香蕉国产免费网vrr | 日韩精品成人免费观看 | 国产手机在线国内精品 | 亚洲国产精品免费视频 | 日韩国产一区二区 | 亚洲伊人久久综合一区二区 | 国产成人久久久精品一区二区三区 | 一级特黄牲大片免费视频 | 精品日韩在线观看 | 亚洲一级毛片 | 国产a级一级久久毛片 | 欧美日韩在线精品一区二区三区 | 亚洲欧美激情另类 | 午夜免费福利视频 | 成人欧美一区二区三区在线 | 欧美日韩中文字幕 | 手机看片日韩欧美 | 国模私拍一区二区三区 | 欧美日韩中字 | 欧美第一页在线观看 | 欧美色图亚洲激情 | 综合网天天 | 天堂一区二区三区精品 | 337p日本欧洲亚洲大胆精品 | 在线国产观看 | 国产成人a一区二区 | 精品日韩二区三区精品视频 |