0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

簡述圖文存儲常識:單機、集中、分布式、云、云原生存儲

存儲加速器 ? 來源: 阿里云云棲號 ? 作者: 阿里云云棲號 ? 2021-05-26 10:05 ? 次閱讀

背景

本文主要對楊傳輝(日照)《大規(guī)模分布式存儲系統(tǒng)原理解析與架構實戰(zhàn)》、大話存儲、網絡資源(具體參考文末鏈接)及個人理解進行整理,意在構建出存儲發(fā)展基本軌跡和一些基本常識,讓更多像我一樣的初入者有個宏觀上的認知。

存儲發(fā)展史

從單機到互聯(lián)網,存儲作為的基礎設施,主要發(fā)展都是圍繞構建 低成本、高性能、可擴展、易用的目標進行演進,時至今日,在形態(tài)上存儲分為單機存儲、集中存儲、分布式存儲、云存儲、云原生存儲

007b4ca6-bd41-11eb-9e57-12bb97331649.jpg

各階段存儲的基本形態(tài)如下

008de56e-bd41-11eb-9e57-12bb97331649.jpg

各階段基本形態(tài)

存儲數(shù)據分類 & 模型

無論單機存儲、分布式存儲、云存儲都是基于特定應用場景下,對指定數(shù)據類型構建對應的存儲數(shù)據模型

數(shù)據分類

009812c8-bd41-11eb-9e57-12bb97331649.jpg

數(shù)據模型

00a22e66-bd41-11eb-9e57-12bb97331649.jpg

存儲類型

常見三種存儲類型:塊存儲、文件存儲、對象存儲

00bc0c00-bd41-11eb-9e57-12bb97331649.jpg

塊存儲

基于Block塊的存儲模式,兩種常見存儲方式:

DAS(Direct Attch Storage), 直連主機存儲方式

SAN (Storage Area Netowrk),高速網絡鏈接主機存儲方式

文件存儲

依附網絡提供文件存儲服務

對象存儲

構建于鍵值存儲,核心是將數(shù)據通路(data)和控制通路(meta)分離,并且基于對象存儲設備(Object-based Storage Device,OSD)構建存儲系統(tǒng),對外以RSETful API形式服務

單機存儲

基本概念

單機存儲系統(tǒng)是單機存儲引擎(數(shù)據結構在機械磁盤、SSD等持久化介質上的實現(xiàn))的一種封裝,對外提供文件、鍵值、表格或者關系模型的存儲服務。

存儲引擎

存儲引擎是存儲系統(tǒng)的發(fā)動機,決定了存儲系統(tǒng)能夠提供的功能和性能, 提供功能包含:

增加(Create)

讀?。≧etrieve),隨機讀取和順序掃描

更新(Update)

刪除(Delete

引擎間差異如下:

00d736c4-bd41-11eb-9e57-12bb97331649.jpg

集中式存儲

基本概念

集中式存儲相對與單機存儲而言,存儲系統(tǒng)中包含了更多組件,除了機頭(控制器)、磁盤陣列(JBOD)和交換機等設備外,還有管理設備等輔助設備。

00eea020-bd41-11eb-9e57-12bb97331649.jpg

參考:集中式存儲的基本邏輯示意圖

系統(tǒng)構成

機頭,整個存儲系統(tǒng)的核心部件,通常由控制器、前后端口組成,

控制器,通常有二,實現(xiàn)互備高可用,控制器中的軟件實現(xiàn)對磁盤的管理,將磁盤抽象化為存儲資源池,然后劃分為LUN提供給服務器使用。

前后端口,前端端口用戶為服務器提供存儲服務,后端端口用于擴充存儲系統(tǒng)的容量(連接更多的存儲設備)

磁盤柜(Just a Bound Of Disk , JBOD),磁盤掛在服務器外的專用柜里,有獨立電源、散熱、接口等,內部線纜相連(SCSI),對機頭后端端口統(tǒng)一掛載

分布式存儲

基本概念

分布式存儲系統(tǒng),是將分散獨立的存儲設備通過網絡互聯(lián),系統(tǒng)關聯(lián),對外作為一個整體提供存儲服務。

系統(tǒng)分類

分布式文件系統(tǒng)

分布式鍵值系統(tǒng)

分布式表格系統(tǒng)

分布式數(shù)據庫

設計原則

參考CAP

云存儲

基本概念

云存儲,是一種云計算領域存儲服務方式,底層構建在分布式存儲基礎之上,上層通過Internet形式提供存儲服務,除具備分布式存儲基礎特性外,更兼具靈活性,通常由云廠商提供

參考產品

0120da7c-bd41-11eb-9e57-12bb97331649.jpg

云原生存儲

基本概念

云原生存儲脫胎于云存儲,除具備云存儲的特性外、須滿足具備云原生生態(tài)系統(tǒng)中其他所有組件具備相同的動態(tài)(公共云/專有云/混合云等場景)構建可擴展應用、S3 API 驅動、K8S友好等

參考示例

Rook

CNCF首個云原生存儲項目Rook,是將文件、數(shù)據塊和對象存儲系統(tǒng)引入到Kubernetes集群,與其他正在使用存儲的應用程序和服務一起無縫運行。通過這種方式,云原生集群可以在公有云和本地部署中自給自足并且具備可移植性。該項目的開發(fā)目的是使企業(yè)能夠通過動態(tài)應用編排,為在本地和公有云環(huán)境中運行的分布式存儲系統(tǒng)實現(xiàn)數(shù)據中心現(xiàn)代化。

013bf500-bd41-11eb-9e57-12bb97331649.jpg

Rook Architecure

01493774-bd41-11eb-9e57-12bb97331649.jpg

Ceph Rook integrates with Kubernetes

MinIO

MinIO是一款高性能、軟件定義的,對象存儲套件,幫助客戶構建云原生數(shù)據基礎設施。可與 Kubernetes 集成,允許操作員使用 Kubernetes 界面管理存儲,而 Kubernetes 可以處理從存儲提供到卷放置的所有事務。

編輯:jq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 控制器
    +關注

    關注

    112

    文章

    15885

    瀏覽量

    175372
  • 交換機
    +關注

    關注

    20

    文章

    2572

    瀏覽量

    98260
  • JBOD
    +關注

    關注

    0

    文章

    3

    瀏覽量

    8982
  • 單機
    +關注

    關注

    0

    文章

    15

    瀏覽量

    6259

原文標題:圖文存儲常識:單機、集中、分布式、云、云原生存儲

文章出處:【微信號:TopStorage,微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    基于分布式存儲系統(tǒng)醫(yī)療影像數(shù)據存儲解決方案

    基于分布式存儲系統(tǒng)醫(yī)療影像數(shù)據存儲解決方案
    的頭像 發(fā)表于 09-14 09:53 ?129次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統(tǒng)醫(yī)療影像數(shù)據<b class='flag-5'>存儲</b>解決方案

    基于分布式對象存儲WDS的信托非結構化數(shù)據整合平臺

    基于分布式對象存儲WDS的信托非結構化數(shù)據整合平臺
    的頭像 發(fā)表于 08-28 09:56 ?146次閱讀
    基于<b class='flag-5'>分布式</b>對象<b class='flag-5'>存儲</b>WDS的信托非結構化數(shù)據整合平臺

    醫(yī)療PACS影像數(shù)據的極速分布式存儲解決方案

    醫(yī)療PACS影像數(shù)據的極速分布式存儲解決方案
    的頭像 發(fā)表于 08-23 10:13 ?146次閱讀
    醫(yī)療PACS影像數(shù)據的極速<b class='flag-5'>分布式</b>塊<b class='flag-5'>存儲</b>解決方案

    基于分布式存儲WDS的金融信創(chuàng)承載數(shù)據庫類關鍵應用

    基于分布式存儲WDS的金融信創(chuàng)承載數(shù)據庫類關鍵應用
    的頭像 發(fā)表于 08-16 09:42 ?139次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>WDS的金融信創(chuàng)<b class='flag-5'>云</b>承載數(shù)據庫類關鍵應用

    從積木到裝配云原生安全

    從這兩個方面分別進行分析和解決。 新技術帶來新的安全風險 云原生的概念定義本身就比較抽象,從誕生到現(xiàn)在也經歷了多次變化。2018年CNCF對云原生的概念進行了重定義:云原生技術有利于各組織在公有
    的頭像 發(fā)表于 07-26 10:35 ?167次閱讀
    從積木<b class='flag-5'>式</b>到裝配<b class='flag-5'>式</b><b class='flag-5'>云原生</b>安全

    基于WDS的保險公司極速分布式存儲建設高速混合方案

    基于WDS的保險公司極速分布式存儲建設高速混合方案
    的頭像 發(fā)表于 07-08 09:52 ?170次閱讀
    基于WDS的保險公司極速<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>建設高速混合<b class='flag-5'>云</b>方案

    黑龍江電力高性能WDS分布式存儲系統(tǒng)解決方案

    黑龍江電力高性能WDS分布式存儲系統(tǒng)解決方案
    的頭像 發(fā)表于 07-01 09:54 ?223次閱讀
    黑龍江電力高性能WDS<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統(tǒng)解決方案

    面向企業(yè)關鍵業(yè)務場景的分布式存儲軟件ExponTech WDS

    面向企業(yè)關鍵業(yè)務場景的分布式存儲軟件ExponTech WDS
    的頭像 發(fā)表于 06-05 09:41 ?238次閱讀
    面向企業(yè)關鍵業(yè)務場景的<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>軟件ExponTech WDS

    大數(shù)據時代的存儲革命:理解分布式存儲系統(tǒng)

    數(shù)據管理的效率極低。因此,分布式存儲系統(tǒng)應運而生。 分布式存儲就是將數(shù)據存儲在眾多的服務器或網絡節(jié)點上,而不是
    的頭像 發(fā)表于 03-07 15:40 ?323次閱讀

    分布式存儲與計算:大數(shù)據時代的解決方案

    分布式存儲和計算技術應運而生,并迅速成為處理大數(shù)據的首選方案。本文將深入探討分布式存儲和計算的概念、優(yōu)勢及其在各個領域的應用情況。 1.分布式
    的頭像 發(fā)表于 03-07 14:42 ?568次閱讀

    高性能存儲實現(xiàn)新突破的英特爾至強處理器

    基于第四代英特爾 至強 可擴展處理器的 Curve 高性能分布式存儲方案在吞吐、時延、TCO 等方面具備出色優(yōu)勢,能夠為金融、互聯(lián)網、交通、能源等各行業(yè)提供高效的云原生存儲解決方案。
    發(fā)表于 02-26 14:01 ?360次閱讀
    高性能<b class='flag-5'>存儲</b>實現(xiàn)新突破的英特爾至強處理器

    【Vsan數(shù)據恢復】Vsan分布式存儲虛擬磁盤文件丟失的數(shù)據恢復案例

    一套vsan分布式存儲架構有數(shù)臺服務器節(jié)點,該vsan分布式存儲架構配置了固態(tài)硬盤和機械硬盤,固態(tài)硬盤作為緩存盤使用,機械硬盤作為容量盤使用。 機房供電異常導致服務器異常關機,工作人
    的頭像 發(fā)表于 01-03 16:39 ?498次閱讀

    一圖讀懂《分布式融合存儲研究報告(2023)》

    轉自:存儲產業(yè)技術創(chuàng)新戰(zhàn)略聯(lián)盟 2023年11月30日, 存 儲產業(yè)技術創(chuàng)新戰(zhàn)略聯(lián)盟、中國電子技術標準化研究院聯(lián)合發(fā)布《分布式融合存儲研究報告(2023)》,詳細闡釋分布式融合
    的頭像 發(fā)表于 12-21 18:05 ?528次閱讀
    一圖讀懂《<b class='flag-5'>分布式</b>融合<b class='flag-5'>存儲</b>研究報告(2023)》

    云原生數(shù)據庫GaiaDB架構設計解析

    目前,云原生數(shù)據庫已經被各行各業(yè)大規(guī)模投入到實際生產中,最終的目標都是「單機 + 分布式一體化」。但在演進路線上,當前主要有兩個略有不同的路徑。
    的頭像 發(fā)表于 12-14 14:48 ?446次閱讀
    <b class='flag-5'>云原生</b>數(shù)據庫GaiaDB架構設計解析

    高效管理海量數(shù)據!憶聯(lián) SSD 為分布式存儲提供極致性能

    近年來,為滿足大規(guī)模的存儲應用需求,分布式存儲成為環(huán)境下存儲底座構建的重要選擇,相較于傳統(tǒng)集中
    的頭像 發(fā)表于 10-13 15:55 ?513次閱讀
    高效管理海量數(shù)據!憶聯(lián) SSD 為<b class='flag-5'>分布式</b>塊<b class='flag-5'>存儲</b>提供極致性能