分享到:

分布式数据存储与备份的研究与实现

随着企业计算机应用规模的扩大,数据量呈几何级的增长,以及分布式网络的兴起,企业将越来越多的业务分布于不同的机器、不同的操作平台上,电信、金融、社保等领域服务都是建立在海量数据存储的基础上,而且这些数据必须万无一失。因而全方位、多层次的“数据容灾备份系统”应当成为市场主流。目前主要采用主机内置或外置的磁带机对数据进行冷备份,这种方式在数据量不大,操作系统种类单一,服务器数量有限的情况下,不失为一种既经济又简明的备份手段。但是这种单机的人工冷备份方式越来越不适应当今分布式网络,存在种种弊端。特别是来自非计算机系统因素的隐患,如火灾、地震、以及9.11恐怖事件等人为灾难,对这些灾难后的系统重建和业务数据运作不能进行处理。针对这一现状,本文根据现在的分布式网络特性,提出了分布式数据备份的一种设计方法。该方法自动识别网络中加入备份的主机,得到网络的拓扑结构;然后根据该结构,按照一定数学模型,将需要备份的数据进行分片,将分片的数据备份到各个  (本文共64页) 本文目录 | 阅读全文>>

解放军信息工程大学
解放军信息工程大学

一种网络备份系统的存储优化研究与实现

随着网络技术的快速发展,计算机网络在信息化社会中正发挥越来越大的作用。备份与恢复作为保障信息安全的最后一环,在整个信息保障体系中具有重要地位。随着信息化程度的不断提高,各企事业单位、政府、军队等部门对计算机数据信息的依赖越来越强。如果这些数据由于人为或自然原因而招致破坏的话,将带来不可估量的后果。数据备份技术正得到越来越广泛的应用,在基于网络的存储备份与恢复研究中,备份和恢复数据的数据压缩是进行高效存储和备份的关键技术之一。高效率的备份数据、压缩方法对提高数据的存储与备份效率很有意义。本文的研究工作重点有两个。其一,通过对目前不同的压缩算法的分析与比较,针对备份恢复中数据集中存储的特点,将重复数据块的检测从用户端集中到备份服务器端,提出了一种新的压缩算法-基于全局的压缩算法。其二,结合压缩方式和网络备份技术,设计并实现了一种基于全局压缩算法的网络备份系统。对所提出的全局压缩算法和快速恢复算法的效率进行了验证。在系统实现上,在网络...  (本文共56页) 本文目录 | 阅读全文>>

电子科技大学
电子科技大学

海量数据存储系统的高可靠性关键技术研究与应用

随着信息技术的不断发展,数据日益成为人们日常生活中重要资源。据统计,2010年全球创建、存储和复制的数字信息总量已达到1.2ZB,2011年的数据量达到里程碑式的1.8ZB,而且这种增长还在加速,预计2015年将达到近8ZB。爆炸式增长的数据必然带来存储设备的持续增加。目前,海量数据存储环境下的现代数据中心的存储节点规模少则几万多则几十万,但在规模巨大的存储环境系统中,磁盘损毁或者存储节点失效已成为一种常态行为;与此同时,因网络连接设备或者存储节点其它元器件造成的数据不可访问或者丢失现象也时有发生。为了满足日益扩展的数据存储需求,人们对数据存储的可靠性,可用性等相关特性提出了更高的要求,传统的常规技术手段根本无法应对当前的形式,如何实现海量数据的低冗余度高可靠性存储已经成为业界面临的一个巨大挑战。因而,本文针对构建低冗余度高可靠性海量数据存储系统的关键问题,在总结了当今数据可靠性增强理论和海量数据存储系统基本架构的基础上,对高性...  (本文共165页) 本文目录 | 阅读全文>>

中国科学院研究生院(地球化学研究所)
中国科学院研究生院(地球化学研究所)

基于XML/Web Services的月球探测数据管理与集成技术研究

随着网络技术、特别是Internet技术的发展,分布式系统的高性能、高可靠性、高灵敏度、可扩展性和系统透明性使得基于分布式系统的应用越来越广泛。在分布式环境下,信息系统的集成是必须认真考虑的问题。研究如何集成和统一访问分布的、异构的数据资源,实现各种数据的转换、交流与共享;以及如何建立一个开放、可扩展和异构兼容的新一代信息管理系统成为当今网络应用的重要研究方向。本文针对建立月球探测数据管理和集成系统的数据集成与操作集成两方面的内容,重点分析和研究了数据存储管理和系统集成技术,结合月球探测数据管理的应用集成需求与特点提出了基于XML技术的数据存储与管理和基于Web Service技术的系统集成方案。并利用XML/Web Service技术基于.Net平台开发了一个月球探测数据管理与集成系统实例。研究内容主要包括以下四个方面:(1) 基于XML的数据模型与数据库存储。利用XML的自描述性、独立于平台和应用、半结构化,机器可处理、可扩...  (本文共172页) 本文目录 | 阅读全文>>

中国科学院大学(中国科学院工程管理与信息技术学院)
中国科学院大学(中国科学院工程管理与信息技术学院)

私有云存储系统中存储与访问模块的设计与实现

随着互联网传输与移动通讯两大领域的结合,网络的信息传输量呈井喷式增长,无论是企业还是个人,已经越来越习惯于依赖这些智能电子设备来管理各自的信息、数据。海量的数据管理,单纯依靠个体架构的存储系统来完成,变得越来越不现实,借助云存储技术实现海量数据的管理与存储已成为了互联网信息化发展的必然趋势。截止2015年底,中国大陆范围内云存储业务的个人用户数量一度达到了4.2亿。在国外的云存储市场上,亚马逊公司的S3,谷歌公司的GSD,微软公司的WinLive SkyDrive等产品也在短时间内占据了巨大的市场份额。以云存储技术为核心所构建的数据存储平台,可以为各类用户提供便捷、高速、可靠的数据管理服务,不需要用户们去考虑和解决整个系统的底层架构、成本开销等问题。大大节省了用户在数据管理方面所投入的时间开销和经济成本。云存储系统会提供统一的网络端接口,使用户不受时间、地点、终端设备类型的限制随时借助互联网实现数据的访问。本论文针对本单位在主要...  (本文共81页) 本文目录 | 阅读全文>>

《云南档案》2017年12期
云南档案

首批电子档案集中备份仪式在昆明举行

2017年11月23日,全省电子档案集中备份仪式在昆明举行。首批进行电子档案集中备份的昆明市档案馆、盘龙区档案馆、西山区档案馆、曲靖市档案馆、玉溪市档案馆、楚雄州档案馆、普洱市档案馆、德宏州档案馆的相关人员参加了备份仪式。在首批电子档案集中备份仪式上,省档案局副局长龙岗同志向与会同志介绍了电子异地备份工作的重要意义、全国电子档案异地备份情况、国家档案局关于电子档案备份的有关要求、云南省重要档案和电子档案异地备份库建设情况,并对备份工作提出三点要求:一是要求各州(市)、县区档案局(馆)积极向当地党委政府汇报,争取党委政府对电子档案备份工作的重视支持,将其纳入年度目...  (本文共1页) 阅读全文>>

《办公室业务》2016年24期
办公室业务

电子文件检查归档移交备份存储机研究

当今信息技术以及计算机技术的发展为档案工作提供了重要的条件与技术支持,发展形成了符合当今时代要求的档案信息化建设。而在信息化建设的过程中也提出新的要求,尤其是怎样实现电子文件的规范归档。面对档案管理的这些问题,人们发展并研制出了电子文件检查归档移交备份存储机,随着技术的不断成熟,电子文件检查归档移交备份存储机成为了档案管理中一种常用普及型的专用设备。本文就电子文件检查归档移交备份存储机的发展背景以及相关应用进行简要介绍,希望能够对电子文件检查归档移交备份存储机的研究贡献自己的力量。一、电子文件检查归档移交备份存储机简介电子文件检查归档移交备份存储机作为档案管理中的一种普及型的专用设备,对于电子文件的规范管理具有重要的意义,已经有很长的研究历史,经过国内外长期的发展研究开始进行实践应用。通过电子文件检查归档移交备份存储机可以很好地实现对电子文件以及电子档案的管理,在准确性、安全性以及可用性,甚至是安全性方面都具有重大意义。电子文件...  (本文共2页) 阅读全文>>