奧推網

選單
科技

中國電子雲釋出自研 CeaStor 海量分散式物件儲存

IT之家 1 月 18 日訊息,中國電子雲自研 CeaStor 海量分散式物件儲存正式釋出,主要面向海量非結構化資料場景,實現資料資產統一運營管理。

據 IDC 估計,到 2025 年電子郵件、影片、照片、網頁、音訊檔案、感測器資料、網頁等非結構化資料或將佔全球所有資料的 80%。IT之家瞭解到,

物件儲存融合了塊儲存和檔案儲存的優點,擁有速度快、容量大等特性

,適合處理大規模海量非結構化資料。

中國電子雲 CeaStor 分散式物件儲存基於雲原生多協議一體化架構進行設計,在此架構之上,構建磐石引擎作為核心,在效率上領先傳統分散式儲存。

圖:雲原生多協議一體化架構

多協議儲存服務:一套儲存可同時提供塊 / 檔案 / 物件 / 大資料服務,滿足各種協議需求。

宣告式儲存資源:塊和檔案儲存資源服務透過定製化 CSI 驅動,以宣告式方式無縫對接雲原生應用。

各故障快速自愈:儲存軟體棧模組服務 POD 故障後,新服務 POD 自動快速拉起,實現故障快速自愈。

自動化部署運維:儲存軟體 PXE 一鍵式自動化部署,儲存管理一鍵式自動化巡檢並且自動化進行亞健康檢測。

敏捷釋出新特性:利用雲原生特性,產品具備敏捷開發優勢、使用者具備快速升級能力、同時支援運算元下推實現計算能力下沉。

圖:磐石引擎架構

新架構支援全使用者態設計,節省大量的處理器時間開銷;CPU 資源無鎖化,大大提升處理器的利用效率;獨立協程模型,保障處理器不間斷工作,任務切換時間降低至納秒級;介質資源無鎖化,去除鎖機制干擾,避免資源爭搶;大 IO 直通小 IO 聚合,大大提升隨機小 IO 的效能;智慧快取預讀,大大提升儲存讀效能。

中國電子雲稱 CeaStor 分散式物件儲存還具備以下優勢:

單桶物件無限

面對海量的電子票據影像、自動駕駛圖片、卡口圖片、電子卷宗等場景中,單一名稱空間動輒百億千億級別的非結構化檔案儲存需求,CeaStor 分散式物件儲存可實現單桶物件數量無限制。

CeaStor 分散式物件儲存透過元資料索引動態分片方式,能夠自動匹配負責支撐元資料的硬碟數量,解決傳統物件儲存由於元資料索引分片太少無法發揮全部硬碟能力,太多分片又導致物件列舉效率低下的問題。當出現儲存異常情況(如壞盤,宕機重啟,斷網重連等),元資料索引分片所在的物件修復採用無鎖化增量修復機制,可實現每一個索引分片所管轄的物件數量可以無限增加;結合新資料的多版本控制,可以做到資料修復的同時不影響新資料寫入。

超大比例糾刪

在大規模叢集儲存場景下,最大可支援“32+2”的大比例糾刪,空間可用率高達 94% 以上,可以大大降低使用者的投資成本。

全域性生命週期管理

透過該特性使用者可以自定義規則,指定物件檔案的掃描字首以及修改時間等屬性,對桶內物件設定有效期限,超過該期限的物件將被自動刪除或者自動搬遷至更廉價的儲存介質,讓不同活躍度的資料與不同型別的儲存介質動態匹配或自動清除,實現資料更高效的全生命週期管理。以下是一些示例用例:

將超過 90 天的物件從 SSD 儲存池降級至 HDD 儲存池。

刪除 2022 年 1 月 1 日之前建立的物件。

在啟用版本控制的儲存桶中僅保留每個物件的 3 個最新版本。

多租戶資源管理

多租戶特性提供基於租戶粒度的統一資源管理,以租戶為單位分配和管理資源,多個租戶共享同一套物理儲存系統,租戶間資源隔離,確保安全性和隱私。在實際應用中,多租戶技術的設計思想正是希望利用多租戶模式帶來資源的高度整合,從而提高資源利用率,降低組織的資源成本,同時又保障了資源的安全性。

業務負載均衡

不同業務客戶端的應用,配置相同的域名,域名經過 DNS 解析後,會被解析為不同的 VIP,然後透過輪詢或節點負載等策略將資料打散到對應 VIP 的儲存節點上,從而實現業務的負載均衡。當出現某節點故障,該節點的 VIP 會漂移到其他健康節點上,該節點上的業務會快速切換到對應節點進行支撐。

中國電子雲 CeaStor 分散式物件儲存應用場景如下: