您是否制作了这三个分布式存储文件系统？

品牌: 华为SAN网络存储

随着云计算在全球范围内的飞速发展，谷歌，亚马逊等企业的崛起，特别是在“互联网+”深度融合的背景下对企业云化的需求，传统企业正在被动地徘徊在云计算的建设中. 数据中心. 在传统存储阵列和分布式存储体系结构之间. 这两种存储结构没有绝对的优缺点，大数据的繁荣使得分布式存储结构近年来受到了前所未有的关注. （以下图片来自互联网）

分布式系统中的传统存储

传统SAN具有高度的可靠性，稳定性和丰富的功能，已在应用实践中得到广泛认可. 随着数据量的不断增加，企业对数据存储的可伸缩性提出了要求，而分布式存储系统已逐渐成为高度可伸缩且价格便宜的选择.

考虑用于分布式存储的关键技术主要包括: 全局名称空间，缓存一致性，安全性，可用性和可伸缩性. 从数据形式上划分，主要有: 结构化数据，非制度化数据和半结构化数据.

GFS，AFS和Lustre已成为主流的三种分布式存储文件系统. 其中，GFS（Googlefilesystem）称为Google文件系统，其性能，可伸缩性，可靠性和可用性得到了肯定，主要组件包括Master和n chunkserver，而ChunkServer（块服务器）可以被多个Client客户端访问.

GFS体系结构

与传统文件系统不同分布式存储硬件架构，GFS不再将构建错误视为异常，而是将其视为常见情况. 处理文件的大小一直是文件系统要考虑的问题. 对于任何类型的文件系统，成千上万个KB系统将始终占用内存，因此，对于大文件，管理必须高效，对于小文件，还需要支持而不是优化.

在GFS中，块服务器的大小固定为64MB. 该块大小比普通文件系统的块大小大得多. 它可以减少元数据的开销并减少与Master的交互，但是块大小太大也会导致内部碎片或同一块中的多个小文件可能导致访问热点.

GFS主要在运行Linux系统的大量普通计算机上运行，​​从而降低了其硬件成本. 但是，冗余备份和快速恢复等一系列技术可确保其正常高效地运行. GFS还是非结构化数据的主要技术和文件系统.

AFS是AndrewFileSystem的缩写. AFS将文件系统的可伸缩性放在设计和实践的最前沿，因此AFS具有良好的可伸缩性，并且可以轻松地支持数百个节点甚至数千个节点的分布式环境. AFS最初是由卡内基梅隆大学设计和开发的，现在对于研究和一些大型网络已经相当成熟.

AFS概述

AFS的主要组件包括: 单元，AFS客户端，基本存储单元卷，AFS服务器和卷复制. AFS是模块化的，不需要所有服务器进程都可以在每个服务器上运行. AFS具有良好的可伸缩性. 客户华村可以带来性能提升和可用性提升. AFS的缺点是管理员界面不够友好，并且需要更多知识来支持AFS.

品牌: 华为SAN网络存储

Lustre是由HP，Intel，ClusterFileSystem和美国能源部开发的Linux集群并行文件系统. 该名称来自Linux和Clusters. Luster还是遵循GPL许可协议的开源软件. Luster也被称为并行分布式文件系统，通常用于大型计算机集群和超级计算机.

Lustre体系

Lustre的主要组件包括: 元数据服务器（元数据服务器，MDS），对象存储服务器（对象存储服务器，OSS）和客户端. 其中，MDS提供元数据服务，MGS管理服务器提供Lustre文件系统配置信息，OSS对象存储服务器公开块设备提供数据.

Luster文件系统针对大型文件读取和写入进行了优化，可以提高IO功能的性能；在独立存储源数据，快速恢复服务和网络故障分布式存储硬件架构，基于意图的分布式锁定管理以及快速的系统配置方面表现出色.

本文来自电脑杂谈，转载请注明本文网址：
https://www.pc-fly.com/a/jisuanjixue/article-260189-1.html