国产睡熟迷奷白丝护士系列精品,中文色字幕网站,免费h网站在线观看的,亚洲开心激情在线

      <sup id="hb9fh"></sup>
          1. 千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機構(gòu)

            手機站
            千鋒教育

            千鋒學(xué)習(xí)站 | 隨時隨地免費學(xué)

            千鋒教育

            掃一掃進入千鋒手機站

            領(lǐng)取全套視頻
            千鋒教育

            關(guān)注千鋒學(xué)習(xí)站小程序
            隨時隨地免費學(xué)習(xí)課程

            當(dāng)前位置:首頁  >  技術(shù)干貨  > 為什么分布式數(shù)據(jù)庫這么喜歡用kv store?

            為什么分布式數(shù)據(jù)庫這么喜歡用kv store?

            來源:千鋒教育
            發(fā)布人:xqq
            時間: 2023-10-12 22:21:18 1697120478

            一、為什么分布式數(shù)據(jù)庫這么喜歡用kv store

            雖然不論是單機數(shù)據(jù)庫(MySQL、PostgreSQL等等),還是題主說到的分布式數(shù)據(jù)庫(CockroachDB、TiDB),都存在KV這個抽象,但對于KV這個接口的設(shè)計,還是存在差別的。

            數(shù)據(jù)庫通常會有這么幾個模塊,KV存儲、事務(wù)、索引,這三者之間的關(guān)系看起來涇渭分明,但實際上交織耦合,其中存在很多設(shè)計點。

            名列前茅種設(shè)計是目前share-nothing分布式數(shù)據(jù)庫用的比較多的:基于單機KV存儲實現(xiàn)分布式KV,再基于分布式KV實現(xiàn)事務(wù),在distributed transactional key-value store的基礎(chǔ)上再實現(xiàn)global index,以及查詢引擎。在這種設(shè)計下,單機的KV存儲甚至不需要支持事務(wù),因為完全可以基于這個KV實現(xiàn)分布式事務(wù)。典型代表是TiDB。

            這種設(shè)計的好處不再贅述,看一下局限性:分層太過清晰,想打通多個層次的時候反而比較復(fù)雜。例如分布式事務(wù),是不是可以和Consensus Protocol融合,實現(xiàn)安全的MVCC Follower Read?是不是可以借助單機引擎的事務(wù),來優(yōu)化單個region內(nèi)的事務(wù)避免分布式事務(wù)的開銷?

            所以第二種設(shè)計,保留單機事務(wù)的概念,把單機事務(wù)當(dāng)做common case,而分布式事務(wù)只是錦上添花。奠定了這么一個基本概念之后,通常索引也會優(yōu)先做成單機的,全局索引的優(yōu)先級降低甚至不做。在這種設(shè)計下,單機的KV存儲,事實上就需要支持事務(wù),甚至,為了在此基礎(chǔ)上做分布式事務(wù),還需要提供一些額外的接口,例如point-in-time snapshot read。典型代表是MongoDB。

            由于具有了原生的單機事務(wù),因此在common case下會很高效,可以當(dāng)單機數(shù)據(jù)庫來用。但其痛點也隨之產(chǎn)生:如何基于單機事務(wù)做分布式事務(wù),兩階段提交怎么做,事務(wù)隔離怎么做,多版本讀怎么做?并且,這些功能往往會耦合于單機的事務(wù)引擎,可想而知其復(fù)雜度。

            如果單獨考慮第二種設(shè)計中的索引實現(xiàn),又會產(chǎn)生多種的KV接口設(shè)計。索引是基于KV做,還是下沉到KV中?

            前面一種相對清晰,但性能方面有所折衷,由于索引的創(chuàng)建是基于純粹的KV接口,bulk load不好做,并且索引本身也是多版本的后面一種設(shè)計,由于存儲引擎具有了schema信息,索引可以有更多的優(yōu)化空間。例如索引可以做成單版本的(PostgreSQL),指向多版本的heap file,以省去多版本的開銷;例如像X-Engine那樣,利用LSM 的特性實現(xiàn)更加高效的Fast DDL

            簡單總結(jié)一下,雖然大部分?jǐn)?shù)據(jù)庫都有KV存儲這個抽象,但仍然存在很大的設(shè)計空間,例如單機的KV是否需要支持事務(wù),是否需要感知schema,是否需要暴露多版本的接口。因此,不能籠統(tǒng)地說分布式數(shù)據(jù)庫都喜歡用KV store。

            延伸閱讀:

            二、主要的單機存儲引擎

            1、哈希存儲:hash的CRUD是非??斓?。但缺點是不支持順序掃描。bitcask是一個基于hash表結(jié)構(gòu)的存儲系統(tǒng)。他將寫操作(包括刪除標(biāo)識)追加到文件尾。并定期合并新老文件&記錄。

            2、B樹:既支持隨機讀取又支持范圍查找的系統(tǒng)。查找時間復(fù)雜度為logd(n)(d為每個節(jié)點的出度)。Mysql的InnoDB的引擎和OS的文件系統(tǒng)使用的就是B+樹。(為什么選擇使用B樹的變種B+樹,讀者有興趣可以去探究下。提示:磁盤讀取)

            3、LSM樹(Log Structured Merge Tree):由B+數(shù)改進而來。其思想為:將增量寫操作保存在內(nèi)存中,超過閾值時刷入磁盤,從而減少隨機寫磁盤操作。讀操作則需要合并磁盤數(shù)據(jù)和內(nèi)存中的寫操作。通過Memtable/SSTable實現(xiàn),實現(xiàn)細(xì)節(jié)在此不做深入探究。比較適合寫操作較多的業(yè)務(wù)場景。BigTable/HBase/Cassandra中的列簇的數(shù)據(jù)存儲方式采用的即是LSM樹。

            聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
            10年以上業(yè)內(nèi)強師集結(jié),手把手帶你蛻變精英
            請您保持通訊暢通,專屬學(xué)習(xí)老師24小時內(nèi)將與您1V1溝通
            免費領(lǐng)取
            今日已有369人領(lǐng)取成功
            劉同學(xué) 138****2860 剛剛成功領(lǐng)取
            王同學(xué) 131****2015 剛剛成功領(lǐng)取
            張同學(xué) 133****4652 剛剛成功領(lǐng)取
            李同學(xué) 135****8607 剛剛成功領(lǐng)取
            楊同學(xué) 132****5667 剛剛成功領(lǐng)取
            岳同學(xué) 134****6652 剛剛成功領(lǐng)取
            梁同學(xué) 157****2950 剛剛成功領(lǐng)取
            劉同學(xué) 189****1015 剛剛成功領(lǐng)取
            張同學(xué) 155****4678 剛剛成功領(lǐng)取
            鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
            董同學(xué) 138****2867 剛剛成功領(lǐng)取
            周同學(xué) 136****3602 剛剛成功領(lǐng)取
            相關(guān)推薦HOT