Global File System

r囧r小猫 2022-08-09 00:50 16阅读 0赞

本文为网络资料整合  
**简介**  
Global File System是Minnesota大学开发的基于SAN的共享存储的集群文件系统，GFS在很长一段时间都是以源代码开放软件的形式出现的，后来被Sistina公司产品化，但由于Sistina企图通过向用户提供支持和服务获得收益的计划失败，为了要促进自己的财务收入，Sistina  
在2001年将GFS变成了一种“专有软件”。Red Hat公司收购Sistina之后，遵循GPL协议（General Public License）公开了GFS的源代码。现在，GFS的全名为“红帽全球文件系统”（Red Hat Global File System），每台服务器每年收取2200美元的费用；GFS为底层的共享块设备在文件系统级别提供并发的读写功能。与传统的NAS结构不同，GFS的文件系统层运行于高带宽的FC协议网络（NAS的文件系统层依托传统的IP网络实现），因此更能发挥SAN存储架构的性能优势。  
**框架**  
GFS最初是在IRIX上开发的，后来移植到LINUX上，并开放源码。通过使用GFS，多台服务器可以共用一个文件系统来存储文件。信息既可以存储在服务器上，也可以存储在一个存储局域网络上。  
GFS与GPFS结构相似，但它是全对称的机群文件系统，没有服务器，因而没有性能瓶颈和单一故障点。GFS将文件数据缓存于节点的存储设备中，而不是缓存在节点的内存中。并通过设备锁来同步不同节点对文件的访问，保持UNIX文件共享语义。GFS实现了日志，节点失效可以快速恢复。GFS使用SCSI设备锁来进行同步，目前很少设备实现这种设备锁。在没有设备锁的情况下，GFS也是通过唯一的锁服务器来进行同步，因此，锁服务器是其性能的瓶颈。  
用户通过GFS可以加快数据访问速度，并进行信息复制。一旦一台服务器出现问题，用户仍可以通过网络内其他的计算机访问有关的数据。GFS对于以以下两种方式连接而成的计算机集群尤其有用：

1.  计算机集群中任何一台机器都可以在另一台机器发生故障时接管这台计算机的工作
2.  计算机集群中的所有机器联合起来组成一台超级计算机

GFS允许多个Linux机器通过网络共享存储设备。每一台机器都可以将网络共享磁盘看作是本地磁盘，而且GFS自己也以本地文件系统的形式出现。如果某台机器对某个文件执行了些操作，则后来访问此文件的机器就会读到写以后的结果。  
**GFS提供三种存储解决方案架构：**  
1、 高性能和高可测性  
多台GFS节点直接通过FC交换机连接到SAN存储体，应用程序直接跑在GFS节点上，避免了传统NAS架构中文件服务器节点的各种瓶颈和IP网络延迟。这种架构可支持300个GFS节点。  
![这里写图片描述][20150929194735454]  
2、兼顾性能、可测性、价格  
这种方式跨越IP跟FC两种协议，SAN存储通过GNBD（Global Network Block Device）被export到传统的IP网络，这似乎和NAS的架构有点类似，但实际上有巨大的区别，首先NAS的文件服务器只有一个（当然也可以实现互为HA的架构），而GFS种的GNBD可以有多个，且是负载均衡（负载均衡本身包含了HA）的架构；其次NAS在IP网络上运行的是文件系统级别的操作，而文件系统级别的操作对系统资源的消耗是巨大的，而GFS在IP网络上跑的是比文件系统更底层的类似ISCSI的协议，即数据块被封装在IP 包中进行传输，因此在效率上会比NAS高。每一个GNBD在内存中都有一个线程池，线程用于处理到SAN存储中一个数据块的路径映射，因此，每一个SAN 存储体都能通过任意一个GNBD来访问，实现了负载均衡和HA。  
![这里写图片描述][20150929194818876]  
3、更经济，兼顾性能  
这种架构和图二中的架构最大的区别是没有SAN存储体，存储方式是直连存储（DAS），这种方式可以在传统环境中轻松实现，但是需要考虑对GNBD和它的DAS的冗余。  
![这里写图片描述][20150929194852593]  
**扩展**  
GFS设计时就考虑到了可以通过NFS或者HTTP协议进行扩展。但是数据控制和数据传输的开销显然要小于NFS。  
控制路径从用户应用通过VFS传递到NFS客户端。NFS通过TCP/IP协议执行远程调用。NFS服务器端响应调用请求，通过VFS访问本地文件系统，然后由本地文件系统来访问本地的存储设备。数据传输路径包括：用户内存和NFS客户端缓存之间的内存拷贝，NFS客户端与网络缓存之间的拷贝，缓存网络缓存和NFS服务器端缓存之间的拷贝。这些拷贝通过系统总线和网络连接进行。  
控制路径从用户应用通过VFS到达GFS。GFS向网络存储池（Network Storage Pool）中的存储设备发出请求。块对齐数据（Block Aligned Data）在用户内存和存储设备间传输，非对齐数据则临时的通过系统内存传递。  
GFS中有一个很重要的概念，叫网络存储池（The network storage pool，NSP)。NSP为每台机器提供了一个统一的存储地址空间。GFS通过NSP实现了存储设备的网络共享。这些存储设备可以是共享SCSI(Shared SCSI)和共享通道(Fibre Channel - FC)。NSP包装这些存储设备使得它们好像节点本地的文件系统。  
NSP还可以根据存储设备的类型分为多个子存储池（subpools）。NSP同时也对锁进行管理。GFS发送“锁”和“解锁”命令给NSP，NSP收到后把逻辑锁号转成对应的物理设备的锁号进行锁定。  
GFS把文件系统组织成数个资源组（Resource Groups）。通过RG，GFS把文件系统的资源分布在整个NSP上。一个存储设备上可以存在多个RG。RG实际上是各微型的文件系统(minifile system)。从文件到RG，以及从RG到NSP子池的映射。文件可能被存放在数个RG和多重存储池中。  
**性能**  
优点：

1.  高可用性：如果一个GFS客户失效，数据还可以通过其他GFS客户访问；
2.  扩展性：因为不需要中心服务器，所有很容易扩展存储容量和访问带宽；

缺点：

1.  和现在流行的SAN型文件系统相比，设计思想似乎有点落后了；
2.  费用较高；

[20150929194735454]: /images/20220731/0d925616942a43cd8cd28a81f24b194c.png
[20150929194818876]: /images/20220731/8742be615a10405c937029e35ed4d360.png
[20150929194852593]: /images/20220731/936a7b08635b4503ab3835c5f9f8a529.png