高性能计算GPU解决方案系列课程七--分布式文件系统

7.     分布式文件系统

7.1.     文件系统     

     1）   本地文件系统

       一种存储和组织计算机数据的方法，它使得对其存取和查找变得容易。

        文件系统管理的存储资源直接连在本地节点上，如：ext2，ext3，ext4，NTFS

     2）   分布式文件系统

        文件系统管理的存储资源通过网络不节点相连

        分布式文件系统的设计是基于客户机/服务器模式，如：nfs

    3）    集群文件系统

        由多个服务器节点组成的分布式文件系统，如ISILON，LoongStore，Lustre    4）    并行文件系统

        所有客户端可以同时幵发读写同一个文件

        支持幵行应用(如MPI)如Lustre，GPFS

7.2.     基于集群的分布式架构  

  1）    特点

        分布式文件系统

        服务器直连各自存储

        MDS管理元数据

        RAID、卷管理、文件系统三者合一

        性能和容量同时扩展

        规模可以很大

17.png (54.21 KB, 下载次数: 0)

2016-7-11 15:14 上传

   2）     典型案例

      a）  国外商业产品

             IBM GPFS, EMC ISILON, PanasasPanFS     

     b )    国外开源系统

             Intel Lustre, Redhat GFS, GlusterGlusterfs

             Clemon PVFS,Sage Weil/InktankCeph, Apache HDFS

     c )     国内产品

             中科蓝鲸BWFS

             龙存Loongstore

             余庆FastDFS

             淘宝TFS

7.3.     性能评价方法

           1）带宽

           2）IOPS

           3）试工具

                Linux dd

                IOzone

                IOmeter

                Mdtest

                IOR

原文发布时间为： 2016-7-11 15:14:44

原文由：十四王爷 发布，版权归属于原作者 

本文来自云栖社区合作伙伴NVIDIA，了解相关信息可以关注NVIDIA官方网站