《云存储技术毕业设计.docx》由会员分享,可在线阅读,更多相关《云存储技术毕业设计.docx(59页珍藏版)》请在优知文库上搜索。
1、学位论文原创性声明本人慎重声明:所呈交的论文是本人在导师的指导卜独立进行探讨所取得的探讨成果。除了文中特殊加以标注引用的内容外,本论文不包括任何其他个人或集体已经发表或撰写的成果作品。本人完全意识到本声明的法律后果由本人担当。作者签名:年月日学位论文版权运用授权书本学位论文作者完全了解学校有关保障、运用学位论文的规定,同意学校保留并向有关学位论文管理部门或机构送交论文的复印件和电子版,允许论文被查阅和借阅。本人授权省级优秀学上论文评比机构将本学位论文的全部或部分内容编入有关数据进行检索,可以采纳影印、缩印或扫描等复制手段保存和汇编本学位论文。本学位论文属于1、保密口,在年解密后适用本授权书2、
2、不保密口。(请在以上相应方框内打“J”)作者签名:年月日导师签名:年月日本科生毕业设计(论文)任务书学生姓名;专业班级:通信0906班指导老师:许建一工作单位:信息工程学院设计(论文)题目:云环境下存储技术的探讨设计(论文)主要内容:云计算主要是利用现有的各种资源,运用虚拟化等多种技术,构建由大量计算机组成的称之为“云”的资源池,它具有强大的资源限制和监督管理实力,能够依据用户的不同需求来动态切割和安排计算资源,用户不须要去了解云的详细构成,只须要定制需求就可以获得云计算交付的服务。云存储伴随云计算而产生,及传统的专用存储相比,云存储增加r资源利用率,其独特的按运用付费和抑性扩展的方式供应计算
3、资源具有显著的优势,它将成为将来最值得期盼推广和应用的技术之一。论文的主要内容包括了解云存储的发展背景、特征、定义:对云存储的关键技术进行分析和探讨;对比多家云存储厂商的架构技术和标准接口,r解其架构的特点,最终用C1.OUdSim软件对云计算系统进行仿真。要求完成的主要任务:1.查阅不少于15篇相关资料,其中英文文献不少于2篇。2.完成开题报告。3 .了解云存储的发展背景、特征、定义;对云存储的关键技术进行分析和探讨:4 .对比多家云存储厂商的架构技术和标准接口,了解其架构的特点。5 .用C1.。UdSin1.软件对云计算系统进行仿真。6 .完成不少于20000字的论文的撰写并完成答辩的相关
4、工作。7 .在设计中完成不少于3张广2#图纸的描绘。8,完成毕业设计周志。9 .完成不低于5000汉字(20000英文印刷符)的老师指定的相关文献的英译汉翻译。必读参考资料:1晏强,张晓锋,惹.云存储技术探讨J上计算机及信息技术.2019.第5期:22-24.2成静静.基于HadOoP的分布式云计算/云存储方案的探讨及设计J.数据通信,2019,第5期:1478.3 PENGYong,ZH0Wei,Securec1.oudstoragebasedoncryptographictechniquesJ.ScienceDirect89(2009)174-180October2019,19(Supp1
5、.2):182-189.4 JosefSpi1.1.ner,JohannesMU1.1.ertA1.exanderSchi1.1.Creatingoptima1.c1.oudstoragesystems.FutureGenerationComputerSystems29(2019)1062-1072.指导老师签名系主任签名院长签名(章)武汉理工高校本科生毕业设计(论文)开题报告1、目的及意义(含国内外的探讨现状分析)云存储是一个以数据存储和管理为核心的云冲算系统,可以认为是以数据处理、数据运算为中心的系统,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过
6、应用软件集合起来协同工作,共同对外供应数据存储和业务访问功能的一个系统。当云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就须要配置大量的存储设备,那么云计算系统就转变成为一个云存储系统。云计算系统不但能对数据进行处理和运算,系统中还有大量的存储阵列设备,以实现对计算数据的保存和管理。在云计算系统中配置相应的存储设备,该计算系统即拥有了云存储系统功能。云存储不是存储,而是服务。就犹如云状的广域网和互联网一样,云存储对运用者来讲,不是指某一个详细的设备,而是指个由许很多多个存储设备和服务器所构成的集合体。运用者运用云存储,并不是运用某一个存储设备,而是运用整个云存储系统带来的种数
7、据访问服务。所以严格来讲,云存储不是存储,而是一种服务。云存储的核心是应用软件及存储设备相结合,通过应用软件来实现存储设备向存储服务的转变。相比于传统的存储,云存储更简洁扩容(包括带宽),云存储实行的架构是并行扩容,容量不够了,只要选购新的存储服务器即可,容量马上增加,几乎是没有限制的.更易于管理,因为将大部分数据迁移到云存储上去后,全部的升级维护任务都是由云存储服务供应商来完成,云存储服务则可以很便利的在原有基础上扩展服务空间,满意需求。成本更低廉,就目前来说,企业在数据存储上所付出的成本是相当大的,而且这个成本还在随着数据的暴增而不断增加。IDe探讨表明,从2019年到2019年,全球信息
8、总量将增长6倍以上,从161EB增加到988EB(IEB=I024PB)O些新推出的磁盘阵列中已经普遍采纳了750GB或ITB的SATA(Seria1.AdvancedTechno1.ogyAttachment,串行高级技术附件,一种基于行业标准的串行硬件驱动器接口)硬盘。目前已知存储密度最高的磁盘阵列可以在4U空间(IU=4.45Cm)内供应高达42TB的存储容量,这在以前是根本无法想象的。最新代1.TQ4磁带的单盒磁带存储容量也达到1.6TB(压缩比为2:1)。技术的不断进步必将推动存储向更高容量发展,而重复数据删除、压缩等技术的引入,可以进一步提升存储空间的利用率。从性能方面看,FC磁盘
9、阵列已经逐步过渡到4GB时代,而8GBFC又在向数据中心用户招手:万兆IP存储不再是纸上谈兵:在InfiniBand领域,已经有厂商推出了40GBInfiniBand适配器产品。2、基本内容和技术方案及传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的困难系统。各部分以存储设备为核心,通过应用软件来对外供应数据存储和业务访问服务。I个人空间.1嚏制在缓文格网络祝“网络广域网或可我网)M,用户认比,R管W)公用健【幅拄用软件.wb等网络立(鲁俗软件I移:件z11wttnH络常成机总控制件IE八性J云存储系统
10、的结构模型由4层组成,如图1所示:访日层分布式文传拿”内容分发P2P通生匕*绿H宛如密皎期冬恰Q据容夫“2*B化.存tin中a.;.r,*存t&*(K.FC,itsiw应用按口层解砒钞理层1)存储层存储层是云存储最基础的部分。存储设备可以是FC光纤通道存储设备,可以是NAS和iSCSI等IP存储设备,也可以是SCS1.或SAS等DAS存储设备。云存储中的存储设备往往数量浩大且分布多不同地域,彼此之间通过广域网、互联网或者FC光纤通道网络连接在一起。(2)基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过集群、分布式文件系统和网格计算等技术,实现云存储中多个存储设备之间
11、的协同工作,使多个的存储设备可以对外供应同一种服务,并供应更大更强更好的数据访问性能。CDN内容分发系统、P2P数据传输技术和数据压缩技术等可以保证云存储中的数据nJ以更有效地存储,运用和占用更少的空间,占用更低的传输带宽,从而对外供应更高效的服务数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和容灾技术和措施可以保证云存储中的数据不会丢失,保证云存储自身的平安和稳定。(3)应用接口层应用接口层是云存储最敏捷多变的部分。不同的云存储运营单位可以依据实际业务类型,开发不同的应用服务接口,供应不同的应用服务。比如数据远程容灾和远程备份、视频监控应用平台、IPTV和视频
12、点播应用平台、网络硬盘引用平台,远程数据备份应用平台等。(4)访问层任何个授权用户都可以通过标准的公用应用接口来登录云存储系统,享受云存储服务。云存储运营单位不同,云存储供应的访问类型和访问手段也不同。云存储运用者采纳的应用软件客户端不同,享受到的服务类型也不同。3进度支配第13周:查阅相关文献资料,明确探讨内容,了解探讨相关方向第4周:开题报告的编写第5-8周:完成各种试验方案资料的整理第9T1周:完成原理和各种方案,并进行比较分析第12周:探讨云存储在数据存储的一些应用并进行仿真第13-14周:毕业论文书写第1577周:完善毕业毕业设计论文,并答辩4指导老师看法指导老师签名:书目摘要Abs
13、tractI1绪论O1. 1云存储的兴起O1.2云存储的发展12云存储的概念32. 1云存储的定义32. 2云存储与传统存储32. 3云存储与云计算52. 4云存储架构模型63云存储的关键技术83. 1存储虚拟化技术84. 2分布式存储技术IO5. 3数据备份技术125.3. 1传统的备份策略123.3.2副本数据布局123.3.3连续数据爱护133.4数据缩减技术133.4.1自动精简配置143.4.2自动存储分层143.4.3重复数据删除153.4.4数据压缩153. 5存储平安技术163. 6容错技术194云存储的架构技术204. IGES系统架构204. 2GPFS架构224. 3HD
14、FS架构254. 4Dynamo架构265云计算仿真CIoUdSim295. 1C1.OUdSim环境配置305. 2程序流程图315. 3程序编写步骤315. 4仿真结果426总结及展望436. 1本文工作总结436.2探讨工作展望43参考文献45致谢48摘要云计算是当前探讨及应用的热点问题。至今为止,GOog云、MiCrOSOft、IBNk亚马逊等IT商业巨头都推出了自1.A的云计算平台,并把云计算作为其将来发展的最主要战略之一.云存储作为云计算的底层服务,对上层服务供应重要的支持:同时,云存储可以有效的存储和管理海量数据,所以更是成为专家学者们关注的焦点。因此,云存储的探讨不但紧跟发展的
15、趋势,同时还具有较高的应用价值。云存储是一种架构困难的分布式文件系统,一是其建立在云计算系统的基础设施之上,这样的基础实施是基于廉价的或虚拟化了的不行信物理硬件;二是其必需支持超大节点规模和海量数据的高效存储,这对于系统架构和模块设计的关键技术提出了巨大的挑战。本文探讨了云存储的发展背景,给出了云存储的定义,描述了云存储的特点,提出了云存储的架构模型,系统地阐述了云存储的关键技术,对比了GFS、GPES、HDES.DynamO架构的特点,并用C1.。UdSim时云计算系统进行/仿真。关键词:云存储,关键技术,架构模型,HDFS,C1.oudSimAbstractC1.oudcomputingisahottopicinrecentresearchandapp1.ications.Up1.onow,Goog1.e、MicrosoftIBM、Amazonandsomeotherfamouscooperationshaveproposedtheirc1.oudco