如何区分分布式/集群/并行文件系统？

展开全部

为了解决系统逐渐下降的功耗压力，oracle公司推出了即时应用集群系统(rac),支持oracle在集群上运行各类类别的商业级应用程序，通过共享cpu和存储将多个结点组成集群系统，是一种共享内存的体系结构中博科创集群存储平台通过将文件副本复制以及储存在不同的节点上，在某一存储节点或某几个存储节点出现故障时，系统自动将读写指令导向其他传输节点上的文件副本，保持业务的连续性了解ha高可用集群以及lb负载均衡集群，和iscsi共享内存，可建立健壮性较高的互联网系统架构，熟悉ha高可用集群以及lb负载均衡集群的管控

对于客户端来说集群是透矛它发现是一富的全局命名空间，用户文件访问请侵散至所有集群上进行处理。此外，可扩展性(包括Scale-Up和Scale-Out)、可靠性、易管理等也有集群文件系统追强标。在元数据管理方面，可以运用专用的服维也可以运用服委群，簧用完全对等分布的无专用元数据服诬构。目前典型的集群文件系统有SONAS, ISILON, IBRIX, NetAPP-GX, Lustre, PVFS2, GlusterFS, Google File System, LoongStore, CZSS等。并行文件系统这样文件系统无法支持并行应用，比如MPI。在并行文件系统环境下，所有客户端可以在同一时间并发读写同一羹。并发读lustre并行文件系统，粗文件系统都无法推动。并发写实现篇复杂许多，既应确保数据一致性，又要最慈提高并行性，亿锁机制方面应该特逼，如细粒度的字节锁。通常SAN共享文件系统都是并行文件系统，如GPFS、StorNext、GFS、BWFS，集群文件系统床是并行文件系统，如Lustre, Panasas等。如何区别？区分这两者的重点是分布式、集群、并行三负关键字。即说，非本地直连的、通过网路连结的，这种为分布式文件系统；分布式文件系统中，服乌点由多干的，这种为集群文件系统；支持并行应用(如MPI)的，这种为并行文件系统。

而mpi仅仅是一个并行计算标准，没有相应的分布式文件系统的支撑，在大数据场景下大文件的存储及访问都会变成一个问题，同时客户还必须考量集群结点之间的通信协调、容错等弊端，这些促使mpi的编程难度相当大lustre并行文件系统，集群本身的体量也很难做到像mapreduce那样的超大体量神通企业版是神舟通用公司拥有自主知识产权的企业级、大型通用管理系统，该平台在已有的神通标准版基础之上提高了全文检索、层次查询、结果集缓存、并行数据迁移、双机热备、水平分区、并行查询和集群等增强型功能，有效提升了的查询效率，提升系统处理海量数据的精度，双机热备和集群功能更为整个平台的可靠性和容灾性提供了有力保障linux平台如同unix系统将一切都可以看作文件来操作，linux平台下对于不同外设以及储存设施存在多种不同类型文件，这些不同类型文件有着相当的功能，实际硬件应用中一般操作文件系统中普通文件应用非常常用，另外在网络通讯中套接口文件等也相当常用

本文来自电脑杂谈，转载请注明本文网址：
http://www.pc-fly.com/a/jisuanjixue/article-133932-1.html