原创 twt社区 雲端環境下的儲存服務類型和儲存技術 一、儲存服務的類型 儲存服務的類型依資料類型的不同，一般分為區塊儲存、檔案儲存和物件儲存三類。 區塊儲存基於傳統的磁碟陣列實現，將儲存區域劃分成固定大小的區塊，以磁碟區的方式掛載到主機作業系統後，作業系統可將其格式化成檔案系統，或以裸資料的方式作為資料庫的 儲存。 區塊儲存方式不存在資料打包和解包過程，因此應用系統跟儲存系統耦合程度緊密，資料存取延遲低、效能高。 檔案儲存指的是儲存媒體上儲存的是目錄-子目錄-檔案這種形式的資料結構。 這種資料結構是我們自然人所能容易辨識的數據，絕大部分由身為自然人的程式設計師所編寫的各種軟體程式也使用這種方式來存取檔案。 因此文件儲存的特點是一方面可讀性高，另一方面存取資料需要先遍歷多層文件目錄。 物件儲存採用基於鍵值存取機制的扁平化儲存架構設計，它沒有多層樹級檔案目錄。 在物件儲存系統中，物件是資料儲存的基本單元，所有物件都有一個物件標識，透過物件標識OSD指令存取該對象，使用簡單，小IO效能好。 二、雲端環境下的儲存技術 隨著電子商務、雲端原生、微服務、分散式應用程式、DevOps等現代應用架構的流行，使用者開始將越來越多的傳統應用進行改造和重構，遷移到雲端環境。 那麼在雲端環境下有哪些儲存技術可供選擇使用呢？ 以下針對雲端環境提供的區塊儲存、文件儲存和物件儲存三類儲存服務，簡單講講對應的儲存技術。 1. 塊存儲 雲端環境的區塊儲存技術主要包括使用集中式區塊儲存和分散式區塊儲存兩種技術路線。 1） 集中式區塊存儲 作為目前最流行的IaaS框架 ，OpenStack架構中有一個獨立的元件叫做Cinder。 Cinder是OpenStack中提供儲存服務的API框架，用來為後端不同的儲存結構提供統一的介面。 不同的區塊設備服務廠商在Cinder中實現其驅動支援。 後端的儲存可以是DAS、NAS、SAN、物件儲存或分散式檔案系統。 由於在雲端運算領域OpenStack受歡迎度非常高，因此眾多儲存廠商如NetAPP、IBM、 DellEMC、華為和眾多開源區塊儲存系統均提供了對Cinder的支持，這也為在雲端平台基礎架構層使用集中式 SAN儲存提供了技術基礎。 當使用者規劃在雲端平台下使用集中式區塊儲存時，需要先考慮兩個面向。 第一，自己使用的雲端平台是不是基於OpenStack開發的，如果不是，那可能沒有SAN的介面。 國內的主流雲端平台產品大都是基於OpenStack開發的，但也存在少量的自研雲端平台。 第二，基於OpenStack的雲端平台透過使用Cinder來對接FC-SAN集中式存儲，Cinder只提供框架，需要透過呼叫FC-SAN設備廠商提供的Driver來使用和管理。 這方面需要雲端平台廠商配合。 目前國內大部分基於OpenStack開發的雲端平台產品中已經整合主流儲存廠商的FC驅動，可以讓Cinder與儲存底層對接，得到更高且更穩定的效能表現。 2）分散式區塊存儲 分散式區塊儲存是分散式儲存架構下的一個儲存介面。 目前主流分散式儲存技術主要分HCI超融合基礎架構及SDS軟體定義分散式儲存。 主流SDS分散式儲存又分為Ceph系和非Ceph系。 在大規模雲端環境下，SDS軟體定義分散式儲存適配度更高。 2. 文件存儲 文件儲存技術依照底層硬體架構可分為集中式NAS儲存和分散式檔案系統。 集中式NAS儲存生態完善，在各大企業資料中心檔案共享服務中佔很大比例。 集中式NAS儲存設備由機頭和擴充櫃組成，整合度高，運作維護相對簡單。 分散式檔案系統與集中式NAS相比，差異在於提供了平行化和橫向擴展的能力。 分散式檔案系統依架構有無中心分為兩類，一種是有中心架構的分散式檔案系統架構，包括GFS、HDFS等。 另外一種是完全無中心的分散式儲存架構，包括CephFS、GlusterFS等。 其中CephFS和GlusterFS支援POSFIX 介面。 GFS和HDFS的預設最小儲存單元為64M、128M甚至更高，是適合大檔案尤其是GB等級的大檔案儲存場景的分散式儲存系統。 GlusterFS是採用無中心對稱式架構，沒有專用的元資料伺服器，元資料存在於檔案的屬性和擴充屬性中。 資料分片分佈，也更適合大檔案儲存。 CephFS是分散式儲存系統Ceph檔案儲存的接口，CephFS…