分散式和集中式的區別:公司文件集中存儲

背景

本文主要對楊傳輝(日照)《大規模分散式存儲系統原理解析與架構實戰》、大話存儲、網路資源(具體參考文末鏈接)及個人理解進行整理,意在構建出存儲發展基本軌跡和一些基本常識,讓更多像我一樣的初入者有個宏觀上的認知。

存儲發展史

從單機到互聯網,存儲作為的基礎設施,主要發展都是圍繞構建 低成本、高性能、可擴展、易用的目標進行演進,時至今日,在形態上存儲分為單機存儲、集中存儲、分散式存儲、雲存儲、雲原生存儲

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

各階段存儲的基本形態如下圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

各階段基本形態

存儲數據分類 & 模型

無論單機存儲、分散式存儲、雲存儲都是基於特定應用場景下,對指定數據類型構建對應的存儲數據模型

數據分類

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

數據模型

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

存儲類型

常見三種存儲類型:塊存儲、文件存儲、對象存儲

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

塊存儲

基於Block塊的存儲模式,兩種常見存儲方式:

  • DAS(Direct Attch Storage), 直連主機存儲方式
  • SAN (Storage Area Netowrk),高速網路鏈接主機存儲方式

文件存儲

依附網路提供文件存儲服務

對象存儲

構建於鍵值存儲,核心是將數據通路(data)和控制通路(meta)分離,並且基於對象存儲設備(Object-based Storage Device,OSD)構建存儲系統,對外以RSETful API形式服務

單機存儲

基本概念

單機存儲系統是單機存儲引擎(數據結構在機械磁碟、SSD等持久化介質上的實現)的一種封裝,對外提供文件、鍵值、表格或者關係模型的存儲服務。

存儲引擎

存儲引擎是存儲系統的發動機,決定了存儲系統能夠提供的功能和性能, 提供功能包含:

  • 增加(Create)
  • 讀取(Retrieve),隨機讀取和順序掃描
  • 更新(Update)
  • 刪除(Delete)

引擎間差異如下:

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

集中式存儲

基本概念

集中式存儲相對與單機存儲而言,存儲系統中包含了更多組件,除了機頭(控制器)、磁碟陣列(JBOD)和交換機等設備外,還有管理設備等輔助設備。圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

參考:集中式存儲的基本邏輯示意圖

系統構成

  • 機頭,整個存儲系統的核心部件,通常由控制器、前後埠組成,
  • 控制器,通常有二,實現互備高可用,控制器中的軟體實現對磁碟的管理,將磁碟抽象化為存儲資源池,然後劃分為LUN提供給伺服器使用。
  • 前後埠,前端埠用戶為伺服器提供存儲服務,後端埠用於擴充存儲系統的容量(連接更多的存儲設備)
  • 磁碟櫃(Just a Bound Of Disk , JBOD),磁碟掛在伺服器外的專用櫃里,有獨立電源、散熱、介面等,內部線纜相連(SCSI),對機頭後端埠統一掛載

分散式存儲

基本概念

分散式存儲系統,是將分散獨立的存儲設備通過網路互聯,系統關聯,對外作為一個整體提供存儲服務。

系統分類

  • 分散式文件系統
  • 分散式鍵值系統
  • 分散式表格系統
  • 分散式資料庫

雲存儲

基本概念

雲存儲,是一種雲計算領域存儲服務方式,底層構建在分散式存儲基礎之上,上層通過Internet形式提供存儲服務,除具備分散式存儲基礎特性外,更兼具靈活性,通常由雲廠商提供

參考產品

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

雲原生存儲

基本概念

雲原生存儲脫胎於雲存儲,除具備雲存儲的特性外、須滿足具備雲原生生態系統中其他所有組件具備相同的動態(公共雲/專有雲/混合雲等場景)構建可擴展應用、S3 API 驅動、K8S油耗等

參考示例

Rook

CNCF首個雲原生存儲項目Rook,是將文件、數據塊和對象存儲系統引入到Kubernetes集群,與其他正在使用存儲的應用程序和服務一起無縫運行。通過這種方式,雲原生集群可以在公有雲和本地部署中自給自足並且具備可移植性。該項目的開發目的是使企業能夠通過動態應用編排,為在本地和公有雲環境中運行的分散式存儲系統實現數據中心現代化。圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

Rook Architecure圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

Ceph Rook integrates with Kubernetes

MinIO

MinIO是一款高性能、軟體定義的,對象存儲套件,幫助客戶構建雲原生數據基礎設施。可與 Kubernetes 集成,允許操作員使用 Kubernetes 界面管理存儲,而 Kubernetes 可以處理從存儲提供到卷放置的所有事務。

圖文存儲常識:單機、集中、分散式、雲、雲原生存儲

本文為阿里雲原創內容,未經允許不得轉載。

原創文章,作者:投稿專員,如若轉載,請註明出處:https://www.506064.com/zh-tw/n/219161.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
投稿專員的頭像投稿專員
上一篇 2024-12-09 10:55
下一篇 2024-12-09 10:55

相關推薦

發表回復

登錄後才能評論