應用(yòng)案例

經過20多(duō)年的發展,寶德(dé)持續而深刻地把握市場需求,積累了海量的客戶資源和豐富的服務(wù)經驗

某軟件公(gōng)司IPFS存儲項目
案例背景

某公(gōng)司位于廣東自貿區(qū)内美麗的濱海城市江門珠西智谷産(chǎn)業帶,屬珠西智谷的重點扶植項目,是由互聯網領域資深專家發起成立的一家軟件服務(wù)類公(gōng)司,緻力于移動互聯網項目定制化開發、自有(yǒu)産(chǎn)品研發、技(jì )術方案咨詢等服務(wù)。

在IPFS火熱的同時,對于星際文(wén)件系統的存儲硬件與軟件也提出了更高的要求。在傳統的存儲上并不能(néng)滿足海量數據不斷發展,以及基礎設施規模後帶來的日益複雜的運維管理(lǐ)等問題。行業發展表現出了穩、準、狠的特點:

:該行業對成本要求極高,每一分(fēn)錢都想花(huā)在刀(dāo)刃上;

:增長(cháng)的預期,需求量是可(kě)以估算對客戶有(yǒu)一個準确;

:一旦确認需求,從需求确認到下單速度極快。


整個IPFS主網算力總計約3.5EB,亞洲市場占比超過60%,約2.1EB。數據增長(cháng)約每小(xiǎo)時1.4PB,每天約27PB。中(zhōng)國(guó)每天約12.6PB。IPFS自公(gōng)網上線(xiàn)以來,數據量穩定增長(cháng),預估爆發式增長(cháng)的趨勢将會持續。

案例分(fēn)析

寶德(dé)分(fēn)布式存儲網絡拓撲

解決方案

總體(tǐ)目标:

Filecoin是由協議實驗室發起的一種分(fēn)散式存儲解決方案,它将現有(yǒu)的雲存儲轉化為(wèi)一個算法市場。礦工(gōng)通過提供數據存儲或數據檢索服務(wù)來獲得相應代币,用(yòng)戶則需要支付數據存儲和數據檢索的費用(yòng)。

Filecoin中(zhōng)代币(FIL)的獲取是各礦商(shāng)最直接的獲利方式,獲得更高效的出塊率是各廠商(shāng)最持續關注的技(jì )術方案:


用(yòng)戶需求:

1) 複制證明(PoRep):連續大數據塊寫,高帶寬

2) 時空證明(PoST):随機小(xiǎo)數據塊讀,低延時,高IO

3) 合理(lǐ)的硬件配置 + 高效的存儲系統(高帶寬)= 加速複制證明(PoRep)≈ 得更高的算力;

4) 合理(lǐ)的硬件配置 + 高效的存儲系統(低延時)= 提升時空證明(WindowPoST)≈ 更快的驗證效率;

5) 合理(lǐ)的網絡架構 + 高算力 + 更高的驗證效率 ≈ 更多(duō)區(qū)塊獎勵(FIL)。


PL-XDFS以10GE鏈路組網,組建規模化存儲集群提供PB級Filecoin存儲池支持,滿足高帶寬、高IO、低延時的存儲需求,在複制證明和時空證明進程中(zhōng)提升礦機集群整體(tǐ)性能(néng),增加出塊率,保證礦商(shāng)經濟效益。

PL-XDFS集群通過10GE鏈路與Miner節點組建獨立的存儲專用(yòng)網絡,保證Worker節點在進行複制證明和時空證明期間數據的快速連續寫入和高IO并發讀寫需求。

一期配置5節點36盤位存儲集群,采用(yòng)16TB SATA硬盤,通過4+1糾删冗餘方式,可(kě)用(yòng)容量可(kě)達1.9PB,後續會陸續擴容至100節點。

客戶收益

極簡架構,高性能(néng)保障

PL-XDFS極簡内核,同配置情況下發揮更高的硬件性能(néng),充分(fēn)保證性能(néng)輸出;
全對稱集群架構,容量、性能(néng)同步擴展,避免擴容瓶頸;

針對性技(jì )術優化

優化的糾删碼算法,提供高可(kě)靠的數據保護,集群并發讀寫,以及近80%的空間利用(yòng)率(4+1 EC),提供存儲算力的同時最大化降低投資成本;
獨有(yǒu)的數據分(fēn)布方式,發生節點故障時,隻影響相關冗餘組性能(néng)和安(ān)全級别,存儲系統整體(tǐ)不受影響,降低節點故障對算力和出塊率影響;
xMate優化,元數據信息駐留緩存,提升百倍以上的數據檢索及定位效果,加速時空證明;
獨有(yǒu)的集群架構,分(fēn)散元數據管理(lǐ),可(kě)以部署超1000節點,達EB級規模的存儲集群。

針對性配置優

支持NFS挂載方式提供廣泛的适用(yòng)性,或者采用(yòng)高性能(néng)POSIX挂載方式實現30%的性能(néng)輸出;
共享卷設置root最高權限,設置子目錄權限繼承,避免因權限問題無法完成時空證明。