0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

如何選擇合適的存儲架構(gòu):集中式存儲or分布式存儲

要長高 ? 來源:霄云碧海存儲 ? 作者: shxy ? 2022-05-06 17:27 ? 次閱讀

存儲技術(shù)發(fā)展日新月異。一方面?zhèn)鹘y(tǒng)集中式SAN/NAS還在廣泛使用,另一方面各類分布式存儲產(chǎn)品已紛紛在新興的海量數(shù)據(jù)場景中占據(jù)市場。如何根據(jù)業(yè)務需求選擇合適的存儲架構(gòu)?分布式存儲能否在所有場景都能取代傳統(tǒng)集中式存儲?請參考本文攻略。

01傳統(tǒng)集中式存儲

傳統(tǒng)SAN/NAS存儲的硬件架構(gòu)采用“控制器+硬盤柜”的方式。中高端存儲支持多個控制器,以保障高可用并提高性能。多控制器為緊耦合,通過PCIE總線或Infiniband網(wǎng)絡互連,共享磁盤陣列,共享緩存。

pYYBAGJ06WGAa2yjAAEDd8cmhVk029.png

傳統(tǒng)存儲的系統(tǒng)架構(gòu)具有I/O路徑短,訪問延遲小的優(yōu)勢。傳統(tǒng)存儲通過內(nèi)置BBU電池或外置的UPS來實現(xiàn)掉電保護,保障緩存中的數(shù)據(jù)在掉電后不丟失,結(jié)合雙活、容災、CDP等技術(shù)保障業(yè)務系統(tǒng)的連續(xù)性和數(shù)據(jù)安全性。

傳統(tǒng)集中式存儲起步早,技術(shù)成熟,架構(gòu)簡單,表現(xiàn)出足夠的穩(wěn)定性,對高IOPS、低延時、和數(shù)據(jù)強一致性有很好支持。另外,近年來全閃存陣列存儲發(fā)展迅速,IOPS性能提高到機械硬盤存儲的100倍以上,能夠有效解決IOPS性能痛點。

傳統(tǒng)集中式存儲的特性適合作為金融/醫(yī)療等核心業(yè)務系統(tǒng)的數(shù)據(jù)庫存儲。

傳統(tǒng)存儲的系統(tǒng)架構(gòu)決定了其擴展能力有限,無法很好支撐高并發(fā)訪問性能。隨著我們進入大數(shù)據(jù)時代,集中式存儲增長空間越來越有限。

02分布式存儲

企業(yè)不斷快速增長的海量數(shù)據(jù),需要更有彈性可擴展的存儲架構(gòu)。

分布式存儲是新興的存儲技術(shù),采用“標準的x86服務器硬件+存儲軟件”的架構(gòu),將標準X86/ARM服務器通過高速以太網(wǎng)或Infiniband互連,通過分布式存儲軟件將服務器本地的HDD、SSD等存儲介質(zhì)組織成統(tǒng)一的大規(guī)模存儲資源池。分布式存儲實現(xiàn)了存儲的硬件與軟件解耦,數(shù)據(jù)中心能夠以標準化硬件搭建存儲平臺,提升IT敏捷性,降低運維成本,符合軟件定義數(shù)據(jù)中心的發(fā)展趨勢。

分布式存儲也稱為軟件定義分布式存儲(SDS: Software Defined Storage)。

poYBAGJ06WiAZwtuAACp_l6YoFc920.png

分布式存儲的存儲單元為x86/ARM服務器(也稱為節(jié)點),以標準2U 存儲服務器為例,前面板可插入12塊3.5寸硬盤。

硬盤的容量,有:

4TB\6TB\8TB\10TB\12TB\16TB等。

如果選擇10TB硬盤,則單個節(jié)點的物理容量為 12 * 10 = 120TB。

分布式存儲有效解決了傳統(tǒng)集中式存儲的可擴展性問題,規(guī)??蓴U展至上千個節(jié)點,容量擴展到上百PB甚至EB級,性能隨容量線性提升。按需在線擴容后,自動實現(xiàn)數(shù)據(jù)再均衡。分布式存儲的多個存儲節(jié)點能夠同時提供讀寫服務,因此具有很高的吞吐率,可達到幾十GB/s。

分布式存儲支持3種存儲功能,能夠打造統(tǒng)一的數(shù)據(jù)存儲平臺:

1、SAN塊存儲,SCSI/iSCSI接口協(xié)議

2、NAS文件存儲,CIFS/NFS接口協(xié)議

3、對象存儲,S3接口協(xié)議

分布式存儲使用多副本和糾刪碼技術(shù)實現(xiàn)數(shù)據(jù)保護。多副本方式(業(yè)界常用的多副本方式一般為2副本或3副本),其優(yōu)點是可靠性高,性能高;但缺點是存儲容量有效利用率低(2副本為50%,3副本為33%)。業(yè)界常用的糾刪碼配置方式一般為8+4(8個數(shù)據(jù)塊,4個校驗塊,容量利用率為66%)。糾刪碼的優(yōu)點是可靠性高,容量利用率高,缺點是性能低。

一般選擇原則是:

1、在線存儲設備用多副本;備份歸檔用糾刪碼;

2、小文件用多副本;大文件用糾刪碼。

目前,國內(nèi)有多種分布式存儲產(chǎn)品可以選擇,包括開源軟件、基于開源軟件優(yōu)化的產(chǎn)品、國產(chǎn)研發(fā)的分布式存儲產(chǎn)品等。

poYBAGJ06XCAT-AxAAAqXqoJqkA818.png

上海霄云研發(fā)的碧海分布式存儲,性能優(yōu)異,解決了海量小文件存儲的痛點,性能達到傳統(tǒng)集中式高端存儲和Ceph類產(chǎn)品的3倍,文件數(shù)可達到百億級以上,為醫(yī)療PACS影像、金融電子票據(jù)、自動駕駛、工業(yè)自動化等海量數(shù)據(jù)場景提供了革新的存儲解決方案。

03結(jié)語

poYBAGJ06XeAPZ4WAABSKPTsxKg175.png

綜上所述,分布式存儲是一種未來主流的存儲技術(shù),具備非常好的發(fā)展前景,但是分布式存儲并不能適應所有的業(yè)務場景,需要根據(jù)實際的業(yè)務需求進行合理選擇。

霄云科技研制的碧海分布式存儲系統(tǒng),已經(jīng)廣泛應用于醫(yī)療、金融、電信、教育等領(lǐng)域的核心生產(chǎn)系統(tǒng),深受用戶好評。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 存儲技術(shù)
    +關(guān)注

    關(guān)注

    5

    文章

    729

    瀏覽量

    45767
  • 分布式存儲
    +關(guān)注

    關(guān)注

    4

    文章

    168

    瀏覽量

    19492
收藏 人收藏

    評論

    相關(guān)推薦

    概述隔離電源集中式電源架構(gòu)

    這里寫目錄標題概述隔離電源集中式電源架構(gòu)分布式電源架構(gòu):個人理解概述· 集中式電源
    發(fā)表于 11-11 07:07

    集中式電源架構(gòu)分布式電源架構(gòu)

    電源,然后經(jīng)過板上電源模塊轉(zhuǎn)換到各個目標電源進行使用,電源架構(gòu)一般有集中式電源架構(gòu)分布式電源架構(gòu)。1、
    發(fā)表于 11-15 07:11

    什么是分布式存儲技術(shù)?有哪些應用?

    分布式存儲概念 與目前常見的集中式存儲技術(shù)不同,分布式存儲技術(shù)并不是將數(shù)據(jù)
    的頭像 發(fā)表于 11-17 09:26 ?2.3w次閱讀
    什么是<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>技術(shù)?有哪些應用?

    集中式服務器架構(gòu)和基于ARM微服務器架構(gòu)存儲差別在哪?

    集中式服務器架構(gòu)和基于ARM微服務器架構(gòu)存儲差別在哪? 近年來,軟件定義存儲也成為企業(yè)級IT熱議的話題之一,其中,基于ARM微服務器
    發(fā)表于 12-27 12:45 ?813次閱讀

    中心化存儲分布式存儲有著怎樣的聯(lián)系

    分布式存儲是相對于中心化存儲來說的,中心化存儲,也叫集中式存儲。所謂中心化
    發(fā)表于 09-16 11:16 ?1182次閱讀

    集中式存儲分布式存儲的區(qū)別以及優(yōu)缺點分析

    前段時間在社區(qū)里有一些關(guān)于超融合的弊端、超融合可靠性問題以及超融合場景局限性,以及分布式存儲與傳統(tǒng)集中式存儲優(yōu)缺點對比的討論,作為相關(guān)產(chǎn)品的從業(yè)人員,個人認為對任何一個創(chuàng)新性的
    的頭像 發(fā)表于 11-08 17:20 ?4.6w次閱讀

    分布式存儲常見的架構(gòu)有哪些

    分布式存儲系統(tǒng),是將數(shù)據(jù)分散存儲在多臺獨立的設備上。傳統(tǒng)的網(wǎng)絡存儲系統(tǒng)采用集中存儲服務器存放所
    發(fā)表于 11-16 14:55 ?8545次閱讀

    簡述圖文存儲常識:單機、集中、分布式、云、云原生存儲

    背景 本文主要對楊傳輝(日照)《大規(guī)模分布式存儲系統(tǒng)原理解析與架構(gòu)實戰(zhàn)》、大話存儲、網(wǎng)絡資源(具體參考文末鏈接)及個人理解進行整理,意在構(gòu)建出存儲
    的頭像 發(fā)表于 05-26 10:05 ?3502次閱讀
    簡述圖文<b class='flag-5'>存儲</b>常識:單機、<b class='flag-5'>集中</b>、<b class='flag-5'>分布式</b>、云、云原生<b class='flag-5'>存儲</b>

    電源架構(gòu)--集中式電源架構(gòu)/分布式電源架構(gòu)

    這里寫目錄標題概述隔離電源集中式電源架構(gòu)分布式電源架構(gòu):個人理解概述· 集中式電源
    發(fā)表于 11-06 17:21 ?15次下載
    電源<b class='flag-5'>架構(gòu)</b>--<b class='flag-5'>集中式</b>電源<b class='flag-5'>架構(gòu)</b>/<b class='flag-5'>分布式</b>電源<b class='flag-5'>架構(gòu)</b>

    浪潮信息以新一代存儲核心構(gòu)建新一代集中式分布式存儲平臺

    隨著數(shù)字化轉(zhuǎn)型的持續(xù)深入,各行業(yè)用戶面臨的數(shù)據(jù)存儲挑戰(zhàn)也與日俱增。在此背景下,浪潮信息基于“存儲即平臺”戰(zhàn)略,以新一代G6存儲為核心,構(gòu)建起新一代集中式
    的頭像 發(fā)表于 12-06 12:22 ?3175次閱讀
    浪潮信息以新一代<b class='flag-5'>存儲</b>核心構(gòu)建新一代<b class='flag-5'>集中式</b>和<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>平臺

    分布式vs.集中式存儲架構(gòu)如何選?

    存儲技術(shù)發(fā)展日新月異。一方面?zhèn)鹘y(tǒng)集中式SAN/NAS還在廣泛使用,另一方面各類分布式存儲產(chǎn)品已紛紛在新興的海量數(shù)據(jù)場景中占據(jù)市場。如何根據(jù)業(yè)務需求
    的頭像 發(fā)表于 05-09 10:08 ?4380次閱讀
    <b class='flag-5'>分布式</b>vs.<b class='flag-5'>集中式</b>,<b class='flag-5'>存儲</b><b class='flag-5'>架構(gòu)</b>如何選?

    電機集中式繞組和分布式繞組的區(qū)別

    什么時候使用集中式繞組,什么時候使用分布式繞組,取決于電機的尺寸和具體應用(depends on the dimensions of the motor and its application)。
    發(fā)表于 06-19 10:41 ?6564次閱讀
    電機<b class='flag-5'>集中式</b>繞組和<b class='flag-5'>分布式</b>繞組的區(qū)別

    集中式架構(gòu)的優(yōu)勢有哪些

    在電子化和智能化發(fā)展的需要下,傳統(tǒng)的分布式架構(gòu)逐漸進化為域集中式架構(gòu),“域”和“域控制器”產(chǎn)生。域控制器最早由博世、大陸、德爾福等 Tier1廠商提出,通過利用處理能力更強的多核 CP
    的頭像 發(fā)表于 07-13 16:00 ?1176次閱讀

    分布式存儲與計算:大數(shù)據(jù)時代的解決方案

    分布式存儲和計算技術(shù)應運而生,并迅速成為處理大數(shù)據(jù)的首選方案。本文將深入探討分布式存儲和計算的概念、優(yōu)勢及其在各個領(lǐng)域的應用情況。 1.分布式
    的頭像 發(fā)表于 03-07 14:42 ?674次閱讀

    同有科技新一代端到端自主可控全閃集中式存儲盛大發(fā)布

    同有科技堅持“技術(shù)立足”、“研發(fā)驅(qū)動”,自2010年布局自主可控存儲研發(fā),集中式分布式兩大產(chǎn)品線分別經(jīng)過五代與三代的迭代開發(fā)與市場驗證。
    的頭像 發(fā)表于 07-02 11:35 ?235次閱讀
    同有科技新一代端到端自主可控全閃<b class='flag-5'>集中式</b><b class='flag-5'>存儲</b>盛大發(fā)布