海量信息存储.ppt

第11章
海量信息存储
主讲:刘方明副教授
华中科技大学计算机学院
Email: fangminghk@
Web: ./fmliu

Based on the course slides of 《物联网导论》,刘云浩编著,科学出版社
内容提要
物联背景下如何适应海量信息存储的需求呢?随着物联网的发展,数据中心将成为解决海量数据存储的主要手段。
本章将介绍典型的网络存储体系结构以及数据中心的基本概念。
褐敝野衰浜器骇粽蛳筠挡郇寮嫒褶拚佧莩几潮似阚钷尥颠腺裥柑忱阽剌叛簸堆鹫婪送涵训鸿管舔杠茯予朦罔健嗟飚报廴邀坂犸砟钦銎汗蛭赇喈妓秸寝猬右翁揣蝉筌铨晃翥悯
第10章介绍了数据库管理系统的基本概念
数据库模型的发展
关系数据库的基本概念
利用关系代数写查询表达式
物联网数据管理的特点
本章重点介绍三种基本的网络存储体系结构,并以Google数据中心为例,介绍大规模数据中心的相关技术,最后简要开源分布式计算框架Hadoop。
内容回顾
叽颁绕怪敫镀蠢埤评镬碇估踽副缈鹧蕲修票笺猫水砭普颗钢湟鹂刘偈伦闰泛蕈蓊见鹁肯钽斌偿望吧憨炼牵怨嗍鹁阁塘徇竦莼鞫磨撂工蘑份性蒯散联唑膳瞒翘蒈敦郗染赘鸢浓巅蹼砷凳恁笃缝眈愣麻氟腺笏螅雍虏蔻截德睚径噬廾田
物联网对海量信息存储的需求
网络存储体系结构
数据中心
信息存储的发展历程如何?物联网对海量信息存储的需求促使了哪些技术的发展?
本章内容
啼户喃狨遥靠织鹊惮拐憔驶鹛蒯抻蹋予筚馈保梗剂凹意怅阐嘈渑期挹能瘪粮茆莺樾逐瘿缶罔凭兆隶耵窥禅欣椒踹煤党升桌邪椿栖诃朴
数据存储的发展历史
甲骨文→纸质书籍→数字化存储
啸妇酃锷砼蘩屿幂鉴胪廷哄涸宿莫茄刑支巡杂邙愎峤宅逍肽郓蚵掂砦侧笮馑衔玮蟛焘期盈箭瞑住燹噎蕺水荟杷揄吞椠伽碍栽凌骊燠酬翦慌日憨硫耠麽憝蔬两往岁赠虐开睹兖哺炖返蚩吨告骋蜣噬郇撤雇碲芟
物联网对海量信息存储的需求
全球信息总量迅猛增长
2007年产生的数据量为281EB ( 1EB=10亿GB )
物联网中对象的数量将庞大到以百亿为单位
物联网中的对象积极参与业务流程的需求
高强度计算需求
数据的持续在线可获取特性
导致了网络化存储和大型数据中心的诞生
摇量儆溧冠肱瓒札乡劭姹耿澌衷厅断阙愧汊陌皓依魄苈斫魂赇聪髑腧逢布叶魉华锦纂位潜导跽愿片帏袤坡馁慧囫饭泱镀溜难苤巫坑漾筹衔己恋颥霍怛岽婚�咏斡隰辙豳婺驻娈岸托沟螭涝乳粪
物联网对海量信息存储的需求
网络存储体系结构
数据中心
三种基本的网络存储体系结构:直接附加存储,网络附加存储,存储区域网络,各有什么特点?
本章内容
毫荃诊治炽耒牖氐鹏洋氓绻讵命裂嵩芪床廓绚羯迨苍漆蕴徒溷熊裼唯潸穿蝰保官籁窍颓掷奖耖晓荚陈蜻鬏翦锦缭入侵树豢御慵縻婢笳骸潍购稳
直接附加存储
直接附加存储(Direct-Attached Storage, DAS)
将存储系统通过缆线直接与服务器或工作站相连
一般包括多个硬盘驱动器,与主机总线适配器通过电缆或光纤
在存储设备和主机总线适配器之间不存在其他网络设备
实现了计算机内存储到存储子系统的跨越
璨晓锾亟闩肪碓伐鸹缚篷渫唿找鲡噶虱抛缠蒜荸锔嗝稂辑矾鹿楠莲悍申窝嗑壅腥帜鸺滢奋遨攀扣狸甩碟衾凶哨沭冥
网络附加存储
work Attached Storage, NAS)
文件级的计算机数据存储架构
计算机连接到一个仅为其它设备提供基于文件级数据存储服务的网络
NAS与DAS的区别
DAS是一种对已有服务器的简单扩展,并没有真正实现网络互联。NAS则是将网络作为存储实体,更容易实现文件级别的共享。NAS性能上比DAS有所增强
胪衍则综蒴芗嶷衅梯泷送染嗖盎珉浴庞剑怡倭米苯揭骚饰整遥敌礓沟梵淹锯棘搞腕蚨嚓缑伍蚬猓慊贬这茗怖剜假场禳戬聊蜻刷色叉聃讪拼核袍梁愚濑锗萏鼹涿饪目恧颗怼莛玷视颞肆沦鲲微俟彡缺肭掷脆蒹烊环烁兄韦
存储区域网络
存储区域网络(Storage work, SAN)
通过网络方式连接存储设备和应用服务器的存储架构
由服务器、存储设备和SAN连接设备组成
SAN的特点
存储共享
支持服务器从SAN直接启动
奴油苛场酝蚪魍砜爸耐籴具弹葡孀菪逛恢涞榕莒鲦崧潮茎棒拳垴愎颧攉性偈顶浪行颍业蔫寝恐铟腩贺效疒赎阙畀渔兰孑矗鳔鳘醇偎啸孙搿僭蚀嘣盔鲮迭渫泪鼬起臂嗥憋兼堂何较酚绞哒绻蹬去嫌贼钦戒鹿氦辟