一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

分布式全閃架構(gòu)的演進(jìn)之路

高端存儲知識 ? 來源:高端存儲知識 ? 2023-11-27 10:12 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

無共享體系結(jié)構(gòu) (SNA:Shared-Nothing Architecture) 是一種分布式計(jì)算體系結(jié)構(gòu),其中每個(gè)更新請求都由計(jì)算機(jī)群集中的單個(gè)節(jié)點(diǎn)(處理器/內(nèi)存/存儲單元)滿足。目的是消除節(jié)點(diǎn)之間的爭用。節(jié)點(diǎn)不共享(獨(dú)立訪問)相同的內(nèi)存或存儲。另一種架構(gòu)是共享所有內(nèi)容(Shared-Everything),其中請求由任意節(jié)點(diǎn)組合滿足。這可能會引入爭用,因?yàn)槎鄠€(gè)節(jié)點(diǎn)可能會同時(shí)尋求更新相同的數(shù)據(jù)。

ab0ccec4-8cba-11ee-939d-92fbcf53809c.png

這些術(shù)語其實(shí)首先來自數(shù)據(jù)庫領(lǐng)域。加州大學(xué)伯克利分校的邁克爾·斯通布拉克(Michael Stonebraker)在1986年的一篇數(shù)據(jù)庫論文(“The Case for Shared Nothing Architecture” ,Database Engineering)中使用了這個(gè)術(shù)語。Teradata 于 1983 年交付了第一個(gè) SN 數(shù)據(jù)庫系統(tǒng)。無共享和共享一切架構(gòu)各有優(yōu)勢。DBMS供應(yīng)商和行業(yè)分析師經(jīng)常就此事進(jìn)行辯論;例如,Microsoft 吹捧其 SQL Server 2005 與 Oracle 10g RAC 的比較。

后來,這個(gè)分布式架構(gòu),慢慢發(fā)展到了存儲領(lǐng)域。首先體現(xiàn)在分布式文件存儲上。

ab25008e-8cba-11ee-939d-92fbcf53809c.png

2003年,谷歌發(fā)布了GFS白皮書,采用了shared-nothing架構(gòu),解決了IBM GPFS的shared-disk帶來的成本和擴(kuò)展性問題,成為了存儲圈shared-nothing架構(gòu)的啟蒙。

后來的HDFS還有無數(shù)的軟件定義存儲創(chuàng)業(yè)公司,都是參考了GFS的SN架構(gòu)。

ab35c036-8cba-11ee-939d-92fbcf53809c.png

GPFS也一樣,雖然1998年就推向市場,但最初只支持Shared-Disk架構(gòu),2012年才順應(yīng)潮流,開始支持Shared-Nothing架構(gòu)。一般來說,Shared-Disk架構(gòu)有更好的性能,但成本也更高。

從此,SN架構(gòu)成為了分布式軟件定義存儲的標(biāo)準(zhǔn)架構(gòu),至今已經(jīng)已經(jīng)有20多年的歷史。全球幾乎所有的分布式軟件定義存儲,99%都是采用SN架構(gòu)。

但是,2019年,一個(gè)叫VAST Data的公司,推出了業(yè)界第一款Shared-Everthing架構(gòu)的全閃第二存儲,支持文件和對象,號稱$/GB成本比HDD還便宜,成為AI存儲的一匹黑馬,受到了業(yè)界的吹捧。

在2000年,VAST Data更是提出“Shared-Nothing時(shí)代的結(jié)束”的口號,讓業(yè)界重新思考分布式存儲的架構(gòu)之爭,就像20年前數(shù)據(jù)庫架構(gòu)之爭一樣。

國內(nèi)的情況也一樣。最近,XSKY星辰天合推出了業(yè)界首款Shared-Everything架構(gòu)的分布式全閃主存儲星飛XINFINI 9000,支持塊和文件。國內(nèi)的同行這段時(shí)間也在談?wù)?,到底軟件定義存儲的經(jīng)典架構(gòu)Shared-Nothing時(shí)代真的結(jié)束了嗎?

其實(shí),Shared-Everything在存儲圈,不是什么新事務(wù),因?yàn)楦叨舜鎯σ婚_始就是這樣的架構(gòu),現(xiàn)在也是。

比如Dell EMC的高端存儲PowerMax最新的Dynamic Fabric架構(gòu),就是共享內(nèi)存和共享NVMe SSD的shared-everything scale-out架構(gòu)。

但在分布式軟件定義存儲領(lǐng)域,為什么大家都更喜歡shared-nothing架構(gòu)呢?VAST Data和XSKY為什么拋棄這個(gè)經(jīng)典架構(gòu),采用類似高端存儲的shared-everything架構(gòu)呢?

最開始我也有這樣的問題,因此我收集了大量的資料,分析了業(yè)界主流的全閃存儲架構(gòu),從集中式存儲到分布式存儲,得出了很多我自己個(gè)人的看法。西瓜哥的個(gè)人觀點(diǎn),雖然僅代表個(gè)人思考,但也許你也能從中得到啟發(fā)。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19882

    瀏覽量

    234966
  • 存儲單元
    +關(guān)注

    關(guān)注

    1

    文章

    66

    瀏覽量

    16434
  • 計(jì)算機(jī)
    +關(guān)注

    關(guān)注

    19

    文章

    7657

    瀏覽量

    90723
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    3119

    瀏覽量

    75230

原文標(biāo)題:從Shared-Nothing到Shared-Everything:分布式全閃架構(gòu)的演進(jìn)與未來

文章出處:【微信號:High-end_Storage,微信公眾號:高端存儲知識】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    分布式軟件系統(tǒng)

    分布式軟件系統(tǒng)分布式軟件系統(tǒng)(Distributed Software Systems)是支持分布式處理的軟件系統(tǒng),是在由通信網(wǎng)絡(luò)互聯(lián)的多處理機(jī)體系結(jié)構(gòu)上執(zhí)行任務(wù)的系統(tǒng)。它包括分布式
    發(fā)表于 07-22 14:53

    一文讀懂分布式架構(gòu)知識體系(內(nèi)含超核心知識大圖)

    分布式基礎(chǔ)理論、架構(gòu)設(shè)計(jì)模式、工程應(yīng)用、部署運(yùn)維、業(yè)界方案這幾大方面,介紹基于 MSA(微服務(wù)架構(gòu))的分布式知識體系大綱,從而對 SOA 到 MSA 進(jìn)化有著立體的認(rèn)識;從概念上和工
    發(fā)表于 10-23 10:02

    分布式系統(tǒng)的優(yōu)勢是什么?

    當(dāng)討論分布式系統(tǒng)時(shí),我們面臨許多以下這些形容詞所描述的 同類型: 分布式的、刪絡(luò)的、并行的、并發(fā)的和分散的。分布式處理是一個(gè)相對較新的領(lǐng)域,所以還沒有‘致的定義。與順序計(jì)算相比、并行的、并發(fā)的和
    發(fā)表于 03-31 09:01

    集中式電源架構(gòu)分布式電源架構(gòu)

    電源,然后經(jīng)過板上電源模塊轉(zhuǎn)換到各個(gè)目標(biāo)電源進(jìn)行使用,電源架構(gòu)一般有集中式電源架構(gòu)分布式電源架構(gòu)。1、集中式電源架構(gòu)即輸入電壓直接通過隔離
    發(fā)表于 11-15 07:11

    如何高效完成HarmonyOS分布式應(yīng)用測試?

    作者:liuxun,HarmonyOS測試架構(gòu)師HarmonyOS是新一代的智能終端操作系統(tǒng),給開發(fā)者提供了設(shè)備發(fā)現(xiàn)、設(shè)備連接、跨設(shè)備調(diào)用等豐富的分布式API。隨著越來越多的開發(fā)者投入到
    發(fā)表于 12-13 18:07

    分布式軟總線實(shí)現(xiàn)近場設(shè)備間統(tǒng)一的分布式通信管理能力如何?

    現(xiàn)實(shí)中多設(shè)備間通信方式多種多樣(WIFI、藍(lán)牙等),不同的通信方式使用差異大,導(dǎo)致通信問題多;同時(shí)還面臨設(shè)備間通信鏈路的融合共享和沖突無法處理等挑戰(zhàn)。那么分布式軟總線實(shí)現(xiàn)近場設(shè)備間統(tǒng)一的分布式通信管理能力如何呢?分布式軟總線組件
    發(fā)表于 03-16 11:03

    【學(xué)習(xí)打卡】OpenHarmony的分布式任務(wù)調(diào)度

    了,除了串行作業(yè)之外,分布式調(diào)度系統(tǒng)也支持并行作業(yè)。分布式系統(tǒng)的架構(gòu)有以下幾種:1.集中式:通過中央節(jié)點(diǎn)將任務(wù)分配給工作節(jié)點(diǎn)或執(zhí)行節(jié)點(diǎn),并在這些執(zhí)行節(jié)點(diǎn)之間編排任務(wù)。2.去中心化:有多個(gè)中心節(jié)點(diǎn),每個(gè)
    發(fā)表于 07-18 17:06

    基于MapReduce架構(gòu)分布式母線保護(hù)

    為了解決目前母線保護(hù)裝置就地安放時(shí)支持間隔少和部分保護(hù)性能差的現(xiàn)狀,提出在HSR環(huán)網(wǎng)分布式母線保護(hù)的基礎(chǔ)上,引入基于MapReduce架構(gòu)分布式設(shè)計(jì)方法。將保護(hù)子機(jī)分為調(diào)度節(jié)點(diǎn)和任務(wù)節(jié)點(diǎn),對母線
    發(fā)表于 04-03 15:52 ?1次下載
    基于MapReduce<b class='flag-5'>架構(gòu)</b>的<b class='flag-5'>分布式</b>母線保護(hù)

    什么是分布式系統(tǒng)_分布式系統(tǒng)的類型

     什么是分布式系統(tǒng)(以及分布式系統(tǒng)架構(gòu)的優(yōu)缺點(diǎn))現(xiàn)在的架構(gòu)很多,各種各樣的,如高并發(fā)架構(gòu)、異地多活架構(gòu)
    發(fā)表于 05-25 17:43 ?8396次閱讀

    基于分布式仿真系統(tǒng)的實(shí)時(shí)通訊架構(gòu)

    基于分布式仿真系統(tǒng)的實(shí)時(shí)通訊架構(gòu)
    發(fā)表于 06-19 14:55 ?11次下載

    什么是分布式系統(tǒng) 分布式架構(gòu)有哪些

    什么是分布式系統(tǒng)? 1.分布式系統(tǒng)一定是由多個(gè)節(jié)點(diǎn)組成的系統(tǒng)。 2.這些連通的節(jié)點(diǎn)上部署了我們的節(jié)點(diǎn),并且相互的操作會有協(xié)同。 隨著應(yīng)用架構(gòu)演進(jìn),
    的頭像 發(fā)表于 07-31 09:54 ?7821次閱讀

    浪潮信息發(fā)布新一代G6分布式存儲

    分布式存儲全球前三、中國第一的浪潮存儲,本次會上推出了新一代G6分布式存儲,以極簡架構(gòu)為核心,打造EB級極致容量、億級IOPS極致性能等
    的頭像 發(fā)表于 04-19 09:42 ?1972次閱讀

    星辰天合發(fā)布全新一代分布式存儲,英特爾? QAT及英特爾? DSA助其提供非凡性能

    ◇ 近日,英特爾的合作伙伴北京市星辰天合科技股份有限公司(簡稱:XSKY 星辰天合)舉辦了主題為“星星之火”的 XSKY 星海架構(gòu)暨星飛存儲發(fā)布會,發(fā)布了分布式
    的頭像 發(fā)表于 11-24 20:00 ?1280次閱讀
    星辰天合發(fā)布全新一代<b class='flag-5'>全</b><b class='flag-5'>閃</b><b class='flag-5'>分布式</b>存儲,英特爾? QAT及英特爾? DSA助其提供非凡性能

    什么是分布式架構(gòu)?

    分布式架構(gòu)是指將一個(gè)系統(tǒng)或應(yīng)用拆分成多個(gè)獨(dú)立的節(jié)點(diǎn),這些節(jié)點(diǎn)通過網(wǎng)絡(luò)連接進(jìn)行通信和協(xié)作,以實(shí)現(xiàn)共同完成任務(wù)的一種架構(gòu)模式。這種架構(gòu)模式旨在提高系統(tǒng)的可擴(kuò)展性、可靠性和性能表現(xiàn)。 一、
    的頭像 發(fā)表于 01-12 15:04 ?1887次閱讀
    什么是<b class='flag-5'>分布式</b><b class='flag-5'>架構(gòu)</b>?

    分布式通信的原理和實(shí)現(xiàn)高效分布式通信背后的技術(shù)NVLink的演進(jìn)

    大型模型的大小已經(jīng)超出了單個(gè) GPU 的范圍。所以就需要實(shí)現(xiàn)跨多個(gè) GPU 的模型訓(xùn)練,這種訓(xùn)練方式就涉及到了分布式通信和 NVLink。 當(dāng)談及分布式通信和 NVLink 時(shí),我們進(jìn)入了一個(gè)引人入勝且不斷演進(jìn)的技術(shù)領(lǐng)域,下面我
    的頭像 發(fā)表于 11-18 09:39 ?1272次閱讀
    <b class='flag-5'>分布式</b>通信的原理和實(shí)現(xiàn)高效<b class='flag-5'>分布式</b>通信背后的技術(shù)NVLink的<b class='flag-5'>演進(jìn)</b>