0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

2021年12種最佳分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)榜單

存儲(chǔ)加速器 ? 來源:存儲(chǔ)社區(qū) ? 作者:存儲(chǔ)社區(qū) ? 2021-01-27 16:06 ? 次閱讀

分布式文件系統(tǒng)存儲(chǔ)利用單個(gè)并行文件系統(tǒng)將多個(gè)存儲(chǔ)節(jié)點(diǎn)集群在一起。該系統(tǒng)提供一個(gè)名稱空間和一個(gè)存儲(chǔ)池,以并行提供多個(gè)主機(jī)的高帶寬數(shù)據(jù)訪問。然后,將數(shù)據(jù)分布在集群中的節(jié)點(diǎn)上,以提供數(shù)據(jù)可用性和彈性,并以線性方式擴(kuò)展容量和吞吐量。相反,對(duì)象存儲(chǔ)是指將數(shù)據(jù)存儲(chǔ)在稱為“對(duì)象”的結(jié)構(gòu)中的系統(tǒng)和軟件。這些工具通過RESTful HTTP API為用戶數(shù)據(jù)提供服務(wù),這些API實(shí)際上已經(jīng)成為訪問對(duì)象存儲(chǔ)的標(biāo)準(zhǔn)。

盡管它們是單獨(dú)的存儲(chǔ)方法,但是分布式文件系統(tǒng)和對(duì)象存儲(chǔ)市場正在穩(wěn)步合并。分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)是基于分布式設(shè)計(jì)的軟件和硬件。這些解決方案支持對(duì)象和或橫向擴(kuò)展文件技術(shù),以解決因非結(jié)構(gòu)化數(shù)據(jù)增長而導(dǎo)致的業(yè)務(wù)需求。這些平臺(tái)的市場是基于分布式計(jì)算體系結(jié)構(gòu)的,在該體系結(jié)構(gòu)中,系統(tǒng)中沒有單點(diǎn)故障或爭用。為了更好地說明問題,解決方案必須具有完全分布式的體系結(jié)構(gòu),其中數(shù)據(jù)和元數(shù)據(jù)可以通過網(wǎng)絡(luò)跨集群中的多個(gè)節(jié)點(diǎn)進(jìn)行復(fù)制,分布或擦除編碼。

選擇最佳的分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)來使用可能是一項(xiàng)艱巨的任務(wù),可以參考以下12種最佳分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)的清單,以考慮是否要尋找相關(guān)的解決方案。

Caringo

Caringo Inc.提供基于對(duì)象的技術(shù),用于訪問,存儲(chǔ)和分發(fā)非結(jié)構(gòu)化或基于文件的數(shù)據(jù)。它的 旗艦產(chǎn)品 Caringo Swarm提供了私有云存儲(chǔ), 使用戶能夠部署存儲(chǔ)集群而不會(huì)被專有硬件鎖定。該提供商提供了可擴(kuò)展的SDS解決方案,該解決方案具有對(duì)傳統(tǒng)文件數(shù)據(jù),對(duì)象存儲(chǔ)API和公共云數(shù)據(jù)的通用支持。Caringo的存儲(chǔ)平臺(tái)可在私有,公共和混合云環(huán)境中提供。用戶還可以在x86硬件的任何組合上進(jìn)行內(nèi)部擴(kuò)展。Caringo是第一代對(duì)象存儲(chǔ)供應(yīng)商之一,并且提供對(duì)象解決方案已有13年以上。

Cloudian

Cloudian 是對(duì)象存儲(chǔ)系統(tǒng)的獨(dú)立提供商,提供S3兼容性以及合作伙伴生態(tài)系統(tǒng)。供應(yīng)商的旗艦解決方案 HyperStore是為高吞吐量對(duì)象存儲(chǔ)工作負(fù)載而設(shè)計(jì)的橫向擴(kuò)展對(duì)象平臺(tái)。它在數(shù)據(jù)中心內(nèi)提供了可伸縮性,靈活性和經(jīng)濟(jì)性。HyperStore還提供了一個(gè)附加文件網(wǎng)關(guān)來管理文件工作負(fù)載。此外,Cloudian的數(shù)據(jù)結(jié)構(gòu)體系結(jié)構(gòu)使企業(yè)可以跨站點(diǎn)存儲(chǔ),查找和保護(hù)對(duì)象和文件數(shù)據(jù)。這些過程可以在一個(gè)統(tǒng)一的平臺(tái)內(nèi)的本地和公共云中進(jìn)行。

DDN

DataDirect Networks,也稱為DDN,是可伸縮存儲(chǔ)和處理解決方案以及專業(yè)服務(wù)的提供商。組織可以使用各種DDN存儲(chǔ)平臺(tái)來大規(guī)模捕獲,存儲(chǔ),處理,分析,協(xié)作和分發(fā)數(shù)據(jù),信息和內(nèi)容。DDN的解決方案EXAScaler是在本地和云中運(yùn)行的分布式文件系統(tǒng)。EXAScaler的目標(biāo)是大規(guī)模,高吞吐量的文件工作負(fù)載,而WOS(DDN的輔助平臺(tái))被定位為長期存儲(chǔ)庫和EXAScaler的層。供應(yīng)商為金融服務(wù)公司,醫(yī)療保健組織,能源公司,政府機(jī)構(gòu)和云服務(wù)提供商提供服務(wù)。

Hitachi Vantara

Hitachi Vantara 協(xié)助企業(yè)存儲(chǔ),擴(kuò)充,激活和貨幣化其數(shù)據(jù)。該提供程序在對(duì)象存儲(chǔ)的保護(hù)下提供了四種解決方案,分別是Hitachi Content Platform(HCP),HCP Anywhere,Hitachi Data Ingestor (HDI)和Hitachi Content Intelligence。每個(gè)都提供對(duì)象存儲(chǔ), 文件同步,共享, 最終用戶數(shù)據(jù)保護(hù);云文件網(wǎng)關(guān);以及搜索和分析見解。HCP產(chǎn)品組合是用于數(shù)據(jù)管理和分析的廣泛戰(zhàn)略計(jì)劃的組成部分,并提供了一個(gè)涵蓋一系列垂直領(lǐng)域和解決方案領(lǐng)域的生態(tài)系統(tǒng)。賣方完全是–是Hitachi,Ltd.的子公司,還提供備份和災(zāi)難恢復(fù)解決方案。

華為

華為技術(shù)有限公司是一家電信解決方案提供商,提供具有有線,無線和IP技術(shù)的基礎(chǔ)架構(gòu)應(yīng)用軟件和設(shè)備 。在存儲(chǔ)方面, 華為提供全閃存,混合閃存,云存儲(chǔ),超融合基礎(chǔ)架構(gòu)(HCI)和數(shù)據(jù)管理。供應(yīng)商提供OceanStor 9000 V5作為文件系統(tǒng)平臺(tái),并提供OceanStor 100D(以前為FusionStorage)作為塊和對(duì)象存儲(chǔ)解決方案。OceanStor 100D非常適合私有云,歸檔和內(nèi)容分發(fā),而OceanStor 9000通常用于視頻監(jiān)視,富媒體分發(fā)和商業(yè)高性能計(jì)算(HPC)。未來幾年,華為將把OceanStor 100D定位為其旗艦解決方案,以滿足所有非結(jié)構(gòu)化數(shù)據(jù)需求。

IBM

IBM提供各種技術(shù)和咨詢服務(wù),包括預(yù)測分析和軟件開發(fā)。該提供商提供了一系列存儲(chǔ)選項(xiàng),包括閃存,軟件定義存儲(chǔ)(SDS),數(shù)據(jù)保護(hù)軟件,混合存儲(chǔ)陣列,存儲(chǔ)區(qū)域網(wǎng)絡(luò)(SAN)和磁帶存儲(chǔ)。IBM Spectrum Scale是供應(yīng)商的文件系統(tǒng)產(chǎn)品,可在本地和公共云中運(yùn)行。其對(duì)象存儲(chǔ)產(chǎn)品Cloud Object Storage(COS)也可以在本地和IBM Cloud中運(yùn)行。建議將Spectrum Scale用于商業(yè)HPC和分析,而COS更適合歸檔和私有云存儲(chǔ)。Spectrum Scale支持OpenShift容器,IBM COS最近添加了更高性能的設(shè)備以及經(jīng)過認(rèn)證的新型第三方服務(wù)器。

浪潮

浪潮提供大數(shù)據(jù)服務(wù),云數(shù)據(jù)中心,云服務(wù)和智能企業(yè)。提供商的浪潮AS13000G5系列平臺(tái)為文件和對(duì)象存儲(chǔ)提供了統(tǒng)一的軟件解決方案。浪潮為PB級(jí)應(yīng)用提供了三種AS13000G5產(chǎn)品,用于高清視頻,高性能,高可靠性和基于云的部署。該供應(yīng)商的存儲(chǔ)平臺(tái)非常適合商業(yè)HPC,備份和歸檔,分析以及混合云。雖然 浪潮提供了很多的服務(wù),但其存儲(chǔ)業(yè)務(wù)是公司中僅次于服務(wù)器業(yè)務(wù)的第二大業(yè)務(wù)。

NetApp

盡管NetApp主要提供本地存儲(chǔ)基礎(chǔ)架構(gòu),但該提供商還專注于混合云數(shù)據(jù)服務(wù),該服務(wù)可促進(jìn)跨云和本地環(huán)境管理應(yīng)用程序和數(shù)據(jù)。供應(yīng)商的對(duì)象存儲(chǔ)解決方案StorageGRID是一個(gè)可用作軟件和硬件設(shè)備的平臺(tái),可以在公共云和本地運(yùn)行。NetApp還支持從本地StorageGRID到公共云服務(wù)AWS和Azure的數(shù)據(jù)分層。此外,提供商還可以在接收時(shí)提供信息生命周期管理(ILM),將每個(gè)節(jié)點(diǎn)的容量增加到2.8PB和10億個(gè)對(duì)象,提供主動(dòng)高可用性負(fù)載平衡軟件以及多因素身份驗(yàn)證。

Pure Storage

Pure Storage是一家全閃存企業(yè)存儲(chǔ)提供商,可在數(shù)據(jù)中心中廣泛部署閃存。FlashBlade是提供商專用的統(tǒng)一文件和對(duì)象產(chǎn)品。Pure Storage提供了一個(gè)橫向擴(kuò)展的分布式文件系統(tǒng),該系統(tǒng)可以通過添加刀片來擴(kuò)展容量和性能來處理數(shù)百億個(gè)文件和對(duì)象,以實(shí)現(xiàn)最大的吞吐量和并行度。此外,供應(yīng)商還支持將其擴(kuò)展到150個(gè)刀片,并為其Purity // FB軟件提供復(fù)制和文件系統(tǒng)回滾。Pure Storage還使用戶能夠采用下一代技術(shù),包括人工智能機(jī)器學(xué)習(xí),以最大化其數(shù)據(jù)價(jià)值。2020年,Pure Storage以3.7億美元收購了 Portworx 。

Qumulo

Qumulo是一家企業(yè)數(shù)據(jù)存儲(chǔ)提供商,其解決方案可在 Qumulo存儲(chǔ)服務(wù)器上,Dell和HPE等公司的硬件上以及本機(jī)在公共云中使用。Qumulo File System是一種軟件定義的解決方案,可在本地和公共云中運(yùn)行。該平臺(tái)專為具有容量管理和性能分析的大規(guī)模,高吞吐量文件工作負(fù)載而設(shè)計(jì)。Qumulo還提供了混合硬件節(jié)點(diǎn)和增強(qiáng)的SMBv3支持,以及將文件從Qumulo群集復(fù)制到AWS S3的功能。此外,提供商還提供了AWS Marketplace上可用的軟件,第三方硬件以及Qumulo 直接出售給客戶的標(biāo)準(zhǔn)硬件 。

RedHat

紅帽公司是向企業(yè)社區(qū)提供開源軟件產(chǎn)品的軟件提供商。紅帽提供紅帽 Ceph存儲(chǔ)和Gluster存儲(chǔ)。Ceph Storage支持塊,對(duì)象和文件存儲(chǔ)訪問,而Gluster Storage是文件產(chǎn)品。Ceph Storage還支持Red Hat OpenShift容器存儲(chǔ)(OCS)和Red Hat Cloud的超融合基礎(chǔ)架構(gòu)的基礎(chǔ)存儲(chǔ)。建議將Ceph用于內(nèi)容交付和混合云,而Gluster適用于備份,歸檔,主目錄和富媒體。該提供商提供了一個(gè)多云網(wǎng)關(guān),自動(dòng)化,后端存儲(chǔ)和安裝實(shí)用程序。

Scality

Scality 是一家由風(fēng)險(xiǎn)投資支持的軟件提供商,可提供大規(guī)模的存儲(chǔ)管理和基礎(chǔ)架構(gòu)解決方案。該供應(yīng)商的旗艦解決方案RING提供了用于大容量非結(jié)構(gòu)化數(shù)據(jù)工作負(fù)載的集成文件和對(duì)象存儲(chǔ),可在商品硬件上作為軟件運(yùn)行,并使x86服務(wù)器可擴(kuò)展至數(shù)百PB和數(shù)十億個(gè)對(duì)象。此外,RING具有端到端并行架構(gòu)和獲得專利的對(duì)象存儲(chǔ)核心,可提高可用性和耐用性。該平臺(tái)通過標(biāo)準(zhǔn)存儲(chǔ)協(xié)議(例如NFS,S3,OpenStack Swift和Cinder)與應(yīng)用程序集成 。Scality通過其集成的文件和對(duì)象體系結(jié)構(gòu)與其他供應(yīng)商區(qū)分開來。

責(zé)任編輯:xj

原文標(biāo)題:2021年12種最佳分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)

文章出處:【微信公眾號(hào):存儲(chǔ)社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • API
    API
    +關(guān)注

    關(guān)注

    2

    文章

    1472

    瀏覽量

    61749
  • 對(duì)象存儲(chǔ)
    +關(guān)注

    關(guān)注

    0

    文章

    67

    瀏覽量

    11956
  • 分布式系統(tǒng)
    +關(guān)注

    關(guān)注

    0

    文章

    146

    瀏覽量

    19191

原文標(biāo)題:2021年12種最佳分布式文件系統(tǒng)和對(duì)象存儲(chǔ)平臺(tái)

文章出處:【微信號(hào):TopStorage,微信公眾號(hào):存儲(chǔ)加速器】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    基于分布式存儲(chǔ)系統(tǒng)醫(yī)療影像數(shù)據(jù)存儲(chǔ)解決方案

    基于分布式存儲(chǔ)系統(tǒng)醫(yī)療影像數(shù)據(jù)存儲(chǔ)解決方案
    的頭像 發(fā)表于 09-14 09:53 ?239次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲(chǔ)系統(tǒng)</b>醫(yī)療影像數(shù)據(jù)<b class='flag-5'>存儲(chǔ)</b>解決方案

    基于分布式對(duì)象存儲(chǔ)WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺(tái)

    基于分布式對(duì)象存儲(chǔ)WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺(tái)
    的頭像 發(fā)表于 08-28 09:56 ?245次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>對(duì)象</b><b class='flag-5'>存儲(chǔ)</b>WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合<b class='flag-5'>平臺(tái)</b>

    黑龍江電力高性能WDS分布式存儲(chǔ)系統(tǒng)解決方案

    黑龍江電力高性能WDS分布式存儲(chǔ)系統(tǒng)解決方案
    的頭像 發(fā)表于 07-01 09:54 ?309次閱讀
    黑龍江電力高性能WDS<b class='flag-5'>分布式</b><b class='flag-5'>存儲(chǔ)系統(tǒng)</b>解決方案

    華為分布式存儲(chǔ)連續(xù)三榮膺2024Gartner“客戶之選”

    近日,全球權(quán)威咨詢與分析機(jī)構(gòu)Gartner發(fā)布《2024Gartner Peer InsightsTM 分布式文件系統(tǒng)對(duì)象存儲(chǔ)“客戶之聲
    的頭像 發(fā)表于 05-24 10:12 ?650次閱讀

    浪潮信息發(fā)布AS13000G7-N系列分布式全閃存儲(chǔ)

    浪潮信息近日推出了專為大型AI模型優(yōu)化的AS13000G7-N系列分布式全閃存儲(chǔ)。該系列基于浪潮信息自研的分布式文件系統(tǒng),結(jié)合新一代數(shù)據(jù)加速引擎DataTurbo,為用戶提供卓越的
    的頭像 發(fā)表于 05-14 10:03 ?500次閱讀

    為大模型專門優(yōu)化 浪潮信息發(fā)布分布式全閃存儲(chǔ)AS13000G7-N系列

    北京20245月10日?/美通社/ -- 近日,浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲(chǔ)AS13000G7-N系列。該系列依托浪潮信息自研分布式
    的頭像 發(fā)表于 05-10 16:37 ?399次閱讀
    為大模型專門優(yōu)化 浪潮信息發(fā)布<b class='flag-5'>分布式</b>全閃<b class='flag-5'>存儲(chǔ)</b>AS13000G7-N系列

    浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲(chǔ)AS13000G7-N系列

    近日,浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲(chǔ)AS13000G7-N系列。該系列依托浪潮信息自研分布式文件系統(tǒng),搭載新一代數(shù)據(jù)加速引擎DataTurbo,
    的頭像 發(fā)表于 05-08 09:38 ?492次閱讀
    浪潮信息發(fā)布為大模型專門優(yōu)化的<b class='flag-5'>分布式</b>全閃<b class='flag-5'>存儲(chǔ)</b>AS13000G7-N系列

    分布式存儲(chǔ)與計(jì)算:大數(shù)據(jù)時(shí)代的解決方案

    分布式存儲(chǔ)和計(jì)算技術(shù)應(yīng)運(yùn)而生,并迅速成為處理大數(shù)據(jù)的首選方案。本文將深入探討分布式存儲(chǔ)和計(jì)算的概念、優(yōu)勢(shì)及其在各個(gè)領(lǐng)域的應(yīng)用情況。 1.分布式
    的頭像 發(fā)表于 03-07 14:42 ?674次閱讀

    【Vsan數(shù)據(jù)恢復(fù)】Vsan分布式存儲(chǔ)虛擬磁盤文件丟失的數(shù)據(jù)恢復(fù)案例

    一套vsan分布式存儲(chǔ)架構(gòu)有數(shù)臺(tái)服務(wù)器節(jié)點(diǎn),該vsan分布式存儲(chǔ)架構(gòu)配置了固態(tài)硬盤和機(jī)械硬盤,固態(tài)硬盤作為緩存盤使用,機(jī)械硬盤作為容量盤使用。 機(jī)房供電異常導(dǎo)致服務(wù)器異常關(guān)機(jī),工作人
    的頭像 發(fā)表于 01-03 16:39 ?581次閱讀

    分布式鎖的三實(shí)現(xiàn)方式

    分布式鎖的三實(shí)現(xiàn)方式? 分布式鎖是在分布式系統(tǒng)中用于實(shí)現(xiàn)對(duì)共享資源進(jìn)行訪問控制的一機(jī)制。
    的頭像 發(fā)表于 12-28 10:01 ?836次閱讀

    鴻蒙原生應(yīng)用開發(fā)——分布式數(shù)據(jù)對(duì)象

    01、什么是分布式數(shù)據(jù)對(duì)象 在可信組網(wǎng)環(huán)境下,多個(gè)相互組網(wǎng)認(rèn)證的設(shè)備將各自創(chuàng)建的對(duì)象加入同一個(gè) sessionId,使得加入的多個(gè)數(shù)據(jù)對(duì)象之間可以同步數(shù)據(jù),也就是說,當(dāng)某一數(shù)據(jù)
    發(fā)表于 12-08 10:01

    redis分布式鎖的應(yīng)用場景有哪些

    系統(tǒng)中,多個(gè)節(jié)點(diǎn)可能同時(shí)訪問共享資源,例如數(shù)據(jù)庫、文件系統(tǒng)等。使用Redis分布式鎖可以保證在同一時(shí)刻只有一個(gè)節(jié)點(diǎn)能夠訪問該資源,避免了并發(fā)沖突問題,確保數(shù)據(jù)的一致性。 分布式任務(wù)調(diào)度
    的頭像 發(fā)表于 12-04 11:21 ?1357次閱讀

    zookeeper分布式原理

    是提供一個(gè)高可用的、一致性的機(jī)制,用于解決分布式系統(tǒng)中常見的一致性問題,比如Leader選舉、分布式鎖等。在本文中,我們將詳細(xì)介紹Zookeeper的原理和工作機(jī)制。 數(shù)據(jù)模型 Zookeeper的數(shù)據(jù)模型是一個(gè)類似于
    的頭像 發(fā)表于 12-03 16:33 ?600次閱讀

    分布式數(shù)據(jù)恢復(fù)-hbase+hive分布式存儲(chǔ)誤刪除文件的數(shù)據(jù)恢復(fù)方案

    。 hbase+hive分布式存儲(chǔ)故障&初檢: 數(shù)據(jù)庫文件被誤刪除,數(shù)據(jù)庫無法使用。 通過現(xiàn)場對(duì)該分布式環(huán)境的初步檢測,發(fā)現(xiàn)虛擬機(jī)還可以正常啟動(dòng),虛擬機(jī)里面的數(shù)據(jù)庫塊
    的頭像 發(fā)表于 11-24 15:55 ?398次閱讀

    HarmonyOS分布式文件系統(tǒng)開發(fā)指導(dǎo)

    分布式文件系統(tǒng)概述 分布式文件系統(tǒng)(hmdfs,HarmonyOS Distributed File System)提供跨設(shè)備的文件訪問能力
    發(fā)表于 11-14 17:14