• <nav id="uyayw"><nav id="uyayw"></nav></nav>
  • 中國數據存儲服務平臺

    為了讓你用上海量存儲,希捷開源了一套對象存儲——CORTX

    2020年9月25日凌晨,希捷開源了一個叫做CORTX的對象存儲軟件項目,CORTX項目100%開源,兼容標準的S3接口,目前已經可以在github上獲取到源碼,同時,還提供了預配置的虛擬機鏡像直接安裝快速體驗,如果有什么問題,也可以在新建立的CORTX開源開發者社區里進行交流。

    CORTX是希捷完全從頭開始設計和實現的對象存儲方案,它直接將數據存到塊設備中,而不經過本地文件系統層,它還有許多高級特性,比如使用流式b-trees來訪問系統和用戶元數據等小塊數據,以此提升性能。

    CORTX作為面向非結構化數據存儲的大容量分布式對象存儲方案,其擴展性是重點,單一namespace下可以從幾PB起步擴展到EB級別。

    與此同時,為了方便在生產環境用起來,CORTX還發布了參考架構Lyve Drive Rack(LDR)方案,LDR是一個融合系統,它采用AA高可用架構設計,數據保護方面還支持ADATA技術,單節點支持放置84或者106塊磁盤,支持16、18TB CMR磁盤,容量大約1.3PB起步。

    LDR目前在磁盤柜級別提供了數據持久性,如上圖所示,這種等級制(Hierarchical)的擦除編碼技術能加快磁盤的故障恢復速度,特別是在用大容量磁盤時候更有效。

    想要自行搭建CORTX系統的用戶最好使用有高可靠設計的存儲硬件,因為,CORTX軟件中的擦除編碼技術目前還是預覽狀態,想要使用該技術的話還得等等。

    對希捷來說,CORTX可以更好地利用大容量磁盤,CORTX開源方案中加入了希捷對于大容量硬盤做的許多獨有優化,官方的優化能發揮硬盤本身的特性和優勢。

    從戰略上來講,對于希捷的主營業務有直接利好,希捷也宣布將于12月發布20TB HAMR磁盤,預計在2026年,能把HAMR盤做到50TB。從目前資料來看,希捷表示目前主要支持CMR,以及新的HAMR盤,沒有提及SMR,不過,后續可能會基于CORTX對SMR做一些優化。

    基于大容量磁盤的CORTX可以提供超高的存儲密度,減少地板資源占用,節省寶貴的機房空間,所以,對最終用戶來說,CORTX可以實實在在幫助用戶降低成本,至少軟件是免費的。還有希捷硬盤原廠技術服務撐腰,可能會比別的開源方案用的更放心一些。

    市場需要這樣一個新的對象存儲方案嗎?

    由于CORTX是100%開源的,所以,天生就比較容易被接受。CORTX由希捷來開源的好處是,可以快速構建生態,在CORTX社區里,匯集了大量最終用戶、OEM以及許多開發者。

    英特爾表示可以基于傲騰持久內存、QAT技術、以及DAOS文件系統與之合作。著名HPC并行文件系統廠商WekaIO肯定了CORTX對于在存儲的高性能和存儲的經濟方面的價值。

    而且,CORTX是一款不依賴特定硬件架構的開源對象存儲軟件,只要是支持標準塊存儲接口的設備都可以用,言外之意是別的品牌的磁盤也能用。對用戶來說,沒有廠商鎖定的風險,對于合作伙伴來說,參考解決方案的打造可以豐富其產品類型。

    CORTX是一個非結構化數據存儲方案,其應用場景包括人工智能、機器學習、混合云、邊緣計算、高性能計算等。目前,已有多家科研機構測試或者實際使用了CORTX,包括法國替代能源和原子能機構、英國原子能管理局、洛斯阿拉莫斯國家實驗室。

    還有硬件合作伙伴正在測試軟硬一體的打包解決方案。首批參考架構將于2020年Q4正式對外可用,商用版本的一體機方案可以從合作伙伴處獲取,從而為LDR提供企業級支持。

    希捷為什么要開源這樣一個項目呢?

    如今互聯網技術發展越來越多地影響著企業IT,希捷的CORTX主要面向的是企業級用戶,CORTX開源的、沒有廠商綁定的思路與超大規模數據中心的做法如出一轍,讓企業也享受到互聯網公司技術的優勢,比如互聯網公司能比企業更快用上大容量磁盤。

    希捷分析后給出了一個有趣的數字,現在的企業級存儲比較貴,用戶在企業級存儲上投入的資金中只有25%是花在磁盤本身的,換言之,就是用戶付出的額外成本太高了,降低成本的方式有很多,比如開源一個CORTX。

    其實,在幾年前,西數也有過類似的解決方案,它的意義在于提升產品方案的附加值,不只是售賣磁盤而已。相比之下,希捷的此次做法就高明很多,開源方案更容易讓人接受,開源的CORTX避免了與合作伙伴的直接競爭。

    希捷與對象存儲其實頗有淵源。

    1999年,希捷提交了“基于對象的存儲設備命令集建議”的初步版本,包括卡內基梅隆大學、IBM、Quantum和StorageTek對該建議都有貢獻,這份建議中將對象定義為一種抽象數據,它具有唯一的標識符和元數據,定義了對象如何與文件系統的關系,以及許多其他創新概念。

    希捷也從來不滿足于只做硬盤。值得一提的是,LYVE Drive是希捷一大類存儲產品的品牌,LYVE Drive Mobile從SD卡、到讀卡器、到硬盤盒、存儲陣列都有,側重于移動性,能讓數據從邊緣傳到數據中心,LYVE Drive Shuttle則算一個獨立的系統,有計算存儲和網絡能力,而LYVE Drive Rack作為新的存儲系統參考架構,進一步豐富了該產品線。

    未經允許不得轉載:存儲在線 » 為了讓你用上海量存儲,希捷開源了一套對象存儲——CORTX
    分享到: 更多 (0)
    萧阳叶云舒的小说全文免费阅读_国模gogo大尺度尿喷人体_综合av欧美和日韩av综合_成本人动画片在线观看_亚洲全国最大的色惰网_久久vs国产综合色