非结构化存储方案.docx

非结构化数据存储方案
一、存储类型体系：
1．1　存储类型体系结构图
1．2 存储类型体系描述
SCＳI/SＡS或ＦC ＳＡＮ与存储服务器连接，服务器直接通过SCSＩ/SAS或FCＤAＳ和ＳAN两种存储方式。对比如下图：
分布式文件存储:文件存储以标准文件系统接口形式向应用系统提供海量非结构化数据存储空间。分布式文件系统把分布在局域网内各个计算机上的共享文件夹集合成一个虚拟共享文件夹，，提供用户方便的管理资源的手段和统一的访问接口。主要包括NAＳ和ＨDFＳ两种存储方式。
网络附加存储NＡS结构如图：
ﻬ
HDFS分布式文件系统存储结构如图：
对象存储：对象存储为海量非结构化数据提供Key—Vaｌue这种通过键-值查找数据文件的存储模式，提供了基于对象的访问接口,有效地合并了
NAS和SAＮ的存储结构优势，通过高层次的抽象具有NAS的跨平台共享数据优点,支持直接访问具有SANsｗift和cｅｐh两种实现形式。
Ｓｗift，ＯpｅnStacｋ Objeｃt　Stｏrage（Swiｆt）是OｐenStａｃk项目的子项目之一,被称为对象存储。它构建在比较便宜的标准硬件存储基础设施之上，无需采用RAIＤ(磁盘冗余阵列）,通过在软件层面引入一致性散列技术和数据冗余性，牺牲一定程度的数据一致性来达到高可用性和可伸缩性，支持多租户模式、容器和对象读写操作，适合解决非结构化数据存储问题。
cｅph，Liｎuｘ下PB级分布式文件系统,可轻松扩展PＢ容量,提供了对多种工作负载的高性能和高可靠性。它大致分为四部分:客户端（数据用户),元数据服务器（缓存和同步分布式元数据),一个对象存储集群(包括数据和元数据），以及最后的集群监视器(执行监视功能）。
ﻬ
二、非结构化大数据分布式存储架构
非结构化PB基于OpenＳtack子项目ｓwift的分布式大数据存储方案,另一种是基于ｃeph的分布式大数据存储方案
基于openStａck子项目swiｆt的大数据分布式存储
Swift集群部署架构图：
实现原理：用户上传文件PUT DAＴＡ和下载文件G