- YRCloudFile 軟件
- 高性能分布式文件存儲(chǔ) YRCloudFile
存儲(chǔ)挑戰(zhàn)
存儲(chǔ)性能要求高
計(jì)算對存儲(chǔ)的需求主要發(fā)生在計(jì)算前數(shù)據(jù)加載的階段和數(shù)據(jù)保存階段,這些場景需要存儲(chǔ)具有非常高的數(shù)據(jù)吞吐能力,如果存儲(chǔ)性能差會(huì)導(dǎo)致 GPU、CPU 等待,浪費(fèi)算力。
海量文件處理
HPC 應(yīng)用通常需要處理海量文件,這對整個(gè)存儲(chǔ)系統(tǒng)的擴(kuò)展性以及元數(shù)據(jù)性能方面提出了非常大的挑戰(zhàn)。
控制存儲(chǔ)成本
按照業(yè)務(wù)發(fā)展,數(shù)據(jù)具備生命周期特征,區(qū)分熱數(shù)據(jù)和冷數(shù)據(jù),并將其合理分類并存儲(chǔ)到不同成本的介質(zhì)中,可以有效降低成本。
文件訪問接口
高性能場景所需的文件共享協(xié)議多以高并發(fā)低延時(shí)并行協(xié)議為主,同時(shí)在容器計(jì)算普及的環(huán)境下,容器對于持久化存儲(chǔ)需求強(qiáng)烈,結(jié)合一部分 HPC 使用了大數(shù)據(jù)模組,對接大數(shù)據(jù)接口亦是存儲(chǔ)需要具備的能力。
解決方案
焱融科技 YRCloudFile 高性能分布式并行文件系統(tǒng),針對各類 HPC 計(jì)算對數(shù)據(jù)存儲(chǔ)的不同需求,進(jìn)行了深度優(yōu)化。解決了海量數(shù)據(jù)帶來的吞吐和 IO 性能瓶頸,以及傳統(tǒng)文件存儲(chǔ)無法彈性擴(kuò)展性能和容量,運(yùn)維與數(shù)據(jù)管理困難等問題,為 AI、超算、仿真和生物信息分析等業(yè)務(wù)提供高性能計(jì)算存儲(chǔ)解決方案。
方案優(yōu)勢
全分布式架構(gòu)
存儲(chǔ)性能升級通過分布式元數(shù)據(jù)服務(wù)、數(shù)據(jù)并行讀寫優(yōu)化和 POSIX 高性能客戶端等設(shè)計(jì),提供高帶寬、高 IO 和高擴(kuò)展性的存儲(chǔ)服務(wù),支持 TB 級吞吐和千億數(shù)量級文件管理能力,根據(jù)業(yè)務(wù)發(fā)展需要快速完成性能和空間擴(kuò)展。
數(shù)據(jù)訪問接口豐富
無縫對接各計(jì)算平臺焱融科技 YRCloudFile 高性能存儲(chǔ)支持 POSIX、SMB、NFS 等接口協(xié)議,構(gòu)建統(tǒng)一文件命名空間,并支持?jǐn)?shù)據(jù)分層、數(shù)據(jù)加載、小文件存儲(chǔ)優(yōu)化等功能特性,快速對接計(jì)算業(yè)務(wù)系統(tǒng)。
部署架構(gòu)靈活
支持混合云數(shù)據(jù)流轉(zhuǎn)通過本地?cái)?shù)據(jù)中心 YRCloudFile 存儲(chǔ)系統(tǒng)和公共云環(huán)境 YRCloudFile 的無縫對接,全方位滿足不同業(yè)務(wù)部署需求,支持線下存儲(chǔ)數(shù)據(jù)與云端存儲(chǔ)之間的數(shù)據(jù)自動(dòng)流轉(zhuǎn),便于業(yè)務(wù)快速擴(kuò)展和調(diào)整,也能充分利用云端計(jì)算資源,為業(yè)務(wù)帶來更大的彈性空間。
數(shù)據(jù)冷熱分層
降低存儲(chǔ)成本具備智能分層功能,允許客戶按需自定義冷熱數(shù)據(jù)層策略。數(shù)據(jù)在冷熱層間的流動(dòng)對業(yè)務(wù)完全透明,降低存儲(chǔ)成本,保障業(yè)務(wù)連續(xù)性。