高性能計算GPU解決方案系列課程七--分布式檔案系統

7.     分布式檔案系統

7.1.     檔案系統     

     1）   本地檔案系統

       一種存儲群組織計算機資料的方法，它使得對其存取和查找變得容易。

        檔案系統管理的存儲資源直接連在本地節點上，如：ext2，ext3，ext4，NTFS

     2）   分布式檔案系統

        檔案系統管理的存儲資源通過網絡不節點相連

        分布式檔案系統的設計是基于客戶機/伺服器模式，如：nfs

    3）    叢集檔案系統

        由多個伺服器節點組成的分布式檔案系統，如ISILON，LoongStore，Lustre    4）    并行檔案系統

        所有用戶端可以同時幵發讀寫同一個檔案

        支援幵行應用(如MPI)如Lustre，GPFS

7.2.     基于叢集的分布式架構  

  1）    特點

        分布式檔案系統

        伺服器直連各自存儲

        MDS管理中繼資料

        RAID、卷管理、檔案系統三者合一

        性能和容量同時擴充

        規模可以很大

17.png (54.21 KB, 下載下傳次數: 0)

2016-7-11 15:14 上傳

   2）     典型案例

      a）  國外商業産品

             IBM GPFS, EMC ISILON, PanasasPanFS     

     b )    國外開源系統

             Intel Lustre, Redhat GFS, GlusterGlusterfs

             Clemon PVFS,Sage Weil/InktankCeph, Apache HDFS

     c )     國内産品

             中科藍鲸BWFS

             龍存Loongstore

             餘慶FastDFS

             淘寶TFS

7.3.     性能評價方法

           1）帶寬

           2）IOPS

           3）試工具

                Linux dd

                IOzone

                IOmeter

                Mdtest

                IOR

原文釋出時間為： 2016-7-11 15:14:44

原文由：十四王爺 釋出，版權歸屬于原作者 

本文來自雲栖社群合作夥伴NVIDIA，了解相關資訊可以關注NVIDIA官方網站