一种有效提升广域云存储性能的文件缓存系统.doc

一种有效提升广域云存储性能的文件缓存系统张春华(西北师范大学计算机科学与工程学院甘肃兰州730070)摘要:为解决现有存储系统在高延迟低带宽的广域网络环境下出现的数据访问性能问题,设计实现了一个具有较高I/O性能的可扩展多节点文件缓存系统——WANcache。WANcache通过模拟数据源的文件系统命名空间实现缓存数据,异步化数据和元数据的访问,可以为上层应用提供独立持久流畅稳定的数据服务。实验数据表明,缓存命中时,WANcache可以提供和局域网环境下集群文件系统相同的读写带宽;缓存未命中时候,WANcache可以多节点并发通过广域网络读取数据,具有较好的可扩展性。总体来看,WANcache为解决广域数据访问的性能问题提供了一种有效的实现。关键词:存储系统广域网络缓存系统异步更新中图分类号TP3 文献标识码A ANEWFILECACHESYSTEMTOIMPROVESTORAGESYSTEMPERFOREMENCEOVERWANABSTRACT:puterApplicationsandSoftware,includingfonts,margins,,ahighI/Operformanceandscalablefilecachingclustersystemisdeveloped——,,WANcachegotthedataparallelbymultiplenodesthroughWANshowingextremescalableKEYWORD:Storagesystem;WAN;Cachesystem;asynchronousupdate0引言下一代数据中心、全球化的企业以及云存储系统都要求能够以一种一致有效并且可靠的方式跨广域网络共享大量的文件数据[1]。目前,把数据存储到地理分散的云存储系统和使用类似mapreduce框架建立高并发的数据敏感性应用相互融合,,已经凸显了对于能够跨越地理分布节点间实现数据存储、移动、访问的并且高度可扩展的基础设施的需求。虽然现有的一些支持海量存储的集群文件系统例如GPFS[2],Lustre[3],PanFS[4]等,还有一些基于互联网应用的文件系统,例如GFS[5],HDFS[6]等,都能够在容量和访问带宽方面实现扩展,对大量客户端提供PB级的数据支持。然而,这些系统都不能屏蔽广域网络(WAN)环境下的高延迟和网络抖动的问题,显露出种种问题。传统上,NFS和CIFS分别是UNIX和windows上用于网络传输文件的首选,由于其最初是为局域网环境设计,节点间交互过于频繁,因此不适用