一种基于Winnowing分块的重复数据删除备份与恢复系统设计与实现

针对海量数据中存在的大量冗余信息,本文设计并实现了一种基于重复数据删除的文件备份与恢复系统,该系统采用改进的Winnowing动态分块算法,将文件分割成不同长度的数据块,并结合摘要算法、索引表、数据压缩等技术,确保服务器仅存储数据块唯一副本,以达到重复数据的删除目的.实验表明,该系统相比cwRsync能较更好的减少网络流量,并且相比传统的压缩技术能更进一步减少磁盘空间占用率.     

一种基于存储动态映射的多时间点备份方法

为解决异地数据容灾系统中多时间点备份对存储空间的浪费问题,提出一种基于存储动态映射的多时间点备份方法.通过元数据共享、写时动态映射实现共享数据的单实例存储和备份存储空间的按需分配,结合缓存技术,提高备份数据的局部连续性.实验结果表明,该方法可以有效降低多时间点备份对存储空间的开销,同时保证较高的恢复性能.     

SQL Server数据库的自动化远程备份

数据库备份是数据库安全的重要保证。以天财财务管理系统的后台SQL Server数据库为例,确定每天对当前账务和收费数据库进行2次自动远程备份的策略。进而提出先利用SQL Server的数据库维护计划功能将数据库备份到服务器,再利用文件同步软件Second Copy将备份文件复制到客户端计算机,并使两者的备份数据同步。     

一种远程备份数据虚拟重构方法

针对目前常用的基于写时拷贝（COW）快照方法的持续数据保护（CDP）系统在数据重构时,需要在快照物理空间存储旧数据,从而花费巨大空间和时间代价的问题,本文提出了一种远程备份数据虚拟重构方法.该方法使用偏移文件和位图文件分别记录旧数据块所在位置以及数据块是否变化,并在内核层创建虚拟块设备,自定义块设备的I/O处理函数,把对数据块的读操作重定向到镜像卷或日志卷,从而克服了快照方法造成的灾备中心时空资源浪费严重的问题.实验结果表明,相比基于快照方法的数据重构,本文方法不进行物理重构,不仅可有效地节约存储空间,而且可大幅地缩减数据重构的时间.     

基于差异的远程文件备份与恢复方法

为了构建文件备份中心，提出一种基于差异的远程文件备份与恢复方法．利用快照技术在客户端维持文件的新旧两个版本，计算出这两个版本之间的差异形成文件差异集，传输到备份中心后重放该差异集实现文件备份．通常在客户端保存有与被恢复文件内容相同或者相似的文件，在恢复时这部分文件会被利用以实现差异恢复．实验结果表明，本方法与传统的文件备份系统相比，能显著减少网络流量，大幅提升备份与恢复的效率．     

面向日志结构化数据存储的高效数据加载

近年来,随着互联网技术的快速发展,无论是互联网企业还是传统的金融机构,用户量和业务处理数据量都在快速地增长.传统的通过增加服务器并采用基于分库分表的方法来解决扩展性问题,需要大量的人工维护成本和硬件开销.为降低开销和分库分表带来的各种问题,业界通常用新型数据库系统替换原有的系统,其中,基于日志结构合并树存储的数据库系统(如OceanBase)被广泛采用,这类系统磁盘上存储数据块呈现全局有序的特征.在从传统数据库切换到新型数据库过程中,需要将大量数据加载到新数据库系统中,长时间加载的过程中可能出现数据库节点宕机.为了减少总加载时间和故障恢复时间,提出了一种负载均衡且支持高效容错的数据加载方法;为了支持负载均衡的数据加载,与预确定分区划分数据的方法不同,考虑到目标系统默认存储块大小,采用通过基于文件大小和目标系统默认存储块大小预计算分区数目,并利用分库分表的数据导出往往已经排序的特点,采用选取部分采样块和等间隔选取样本的方式确定分区之间的切分点,避免了全局采样和随机或头部样本选取方式确定切分点带来的高开销;为了加快故障恢复速度,利用日志结构合并树存储系统的多备份减少故障恢复时的数据量,提出了基本副本局部故障恢复方式,避免了完全重新加载的故障恢复方式.实验结果表明,相比采用预确定分区数目和全局选取采样块的随机或头部选取样本方法,采用预计算分区数目和部分选取采样块的等间隔选取样本确定切分点的方法,提高了数据加载的性能,并且验证了基于副本局部故障恢复方法相比完全重启加载恢复方法的高效性.     

一种数据表实时备份系统的高速缓存方法

通过分析Oracle数据表实时备份系统中本地数据的生成速度和网络速度的不匹配所引发的问题,提出了一种基于内存映射文件的高速缓存方法.该方法通过与指针访问动态内存相同的方式来访问磁盘上的文件,从而实现快速高效地读写数据.并引入了一种基于二分法的探测报文速率的带宽测量技术,使系统能动态地适应网络状态.实验表明,该方法不但能使系统具有良好的实时性,而且保证了系统在不同网络状态下具有良好的稳定性和动态适应能力.     

批量数据入库在ASP中筛选重复的处理方法——以湘西民族职业技术学院新生信息录入库为例

在建立数据库时,重复数据的判断对于数据库管理至关重要,没有准确关键词作为对比,重复数据的判断将变得非常困难.传统的哈稀技术、固定分块技术、滑动块技术、可变分块技术和数据指纹等对重复数据进行查找与删除时,占用了大量系统处理时间,且准确性较低.为提高数据处理效率,提出了ASP批量数据在入库时的查重筛选方法,实践验证了该方法的鲁棒性与可靠性,极大地减轻了操作员对数据库管理的繁重工作.     

一种基于选择性初始备份和逆向恢复机制的CDP系统

首先提出了一种选择性初始备份机制,解决了已有块级持续数据保护(CDP)系统在建立初始备份时因为镜像了目标卷的空白扇区而占用了过多存储空间的问题。还提出了一种逆向数据恢复机制,使得CDP系统在数据恢复时,无需从初始备份开始按时间顺序重做日志直到恢复时间点,而是直接从当前时刻往前逐渐把数据的状态还原到恢复时间点。逆向恢复具有更短的恢复时间和更高的效率。     

基于SQL Server的数据库备份恢复策略

数据库是一个可以存储数据的安全的地方,数据库管理器提供有效的备份和恢复能力,来确保在灾难和错误后,数据能够尽快的可以被应用所访问。数据库备份是维护数据正确,防止数据丢失的重要手段。备份点恢复策略可以让数据还原到备份点,通过触发备份的方法,可以提高备份的有效性;采用即时点备份策略,可将数据恢复到任意点,提高数据的安全性;通过性能警报监视事务日志使用情况,及时优化日志文件,可以提高系统性能。     

基于RMAN技术的ORACLE数据库备份恢复研究

介绍了采用RMAN实现ORACLE数据库备份恢复的功能特点及实现过程,探讨了RMAN备份恢复机理,描述了差异增量备份和累积增量备份工作模式,给出了备份/恢复的常见脚本.合理制定RMAN备份恢复策略,可以提高备份恢复的有效性,优化数据库性能.     

谈汇文系统中Oracle数据库的备份

数据库系统中的数据一旦发生意外可能造成灾难性的后果,而发生故障时数据库能否及时有效地恢复取决于备份的情况.Oracle数据库的三种基本的备份方法(脱机备份、联机备份、逻辑备份)各有其自身的特点,根据镇江高专图书馆的实际情况,在数据库开发与管理过程中采用脱机备份与逻辑备份相结合的备份策略实例.     

一种保证业务无中止备份系统的设计与实现

本文主要介绍了一种基于IP-SAN网络的业务无中止备份系统。该系统利用文件系统提供的Freeze机能和Snapshot技术保证业务盘在进行备份的同时不中止业务,并通过Snapshot世代管理和日志管理保证备份数据完整性和一致性;该系统基于IP-SAN网络,支持跨平台、异构网络、远程备份功能。实验证明该系统具有良好的稳定性和可靠性。     

一种对文件系统透明的网络存储系统

提出了一种基于TCP／IP协议的对文件系统透明的网络存储系统．其透明性体现在两个方面：a．对用户透明，用户象访问本地磁盘一样访问远程网络存储空间；b．文件系统对存储服务器透明，存储服务器只针对数据块进行处理，从而减轻了用户和服务器的存储管理负担．在实现单用户对多存储空间、多用户对同一存储空间技术的基础上，系统具有数据备份、共享存储的基本功能，为实现复杂的网络存储提供了一个开发平台。     

一种基于触发器技术的SQL Server数据库实时备份方案

基于触发器技术的SQLServer数据库实时备份方案使用双机备份方式，根据触发器自动执行数据备份的代码和关系数据库存储数据变化前后的状态检索、数据变化痕迹，可以快捷地实现数据恢复，具有很强的实时性和直观性。     

数据安全及其跨平台操作在数据库中的应用

根据几个数据库系统开发的实践经验 ,针对无 DSN (Date Souece Name)连接 ,数据的安全、适时传送 ,数据库的一致状态 ,客户机与服务器的时间同步和数据库的限时操作 ,跨平台数据导入 ,软、硬盘备份恢复等问题提出了几项简洁有效的实用技术。     

中小企业系统备份实用方案

规模,特点不同的企业往往会有不同的备份需求,因此,相应备份方案也大不相同。但是不论规模多小,企业的关键数据往往赖于网络的良好运转因此,对网络系统备份的需要与大型网络一样重要。在这种情况下,本文力求找出一种对网络系统合理实用的系统备份方案。     

可快速响应的虚拟三级存储系统RAT

利用SCST中间驱动层,将磁盘阵列与磁带虚拟为一种有别于虚拟磁带库的新型三级虚拟存储系统,将用户文件分割存放在阵列和磁带库上,在服务用户请求时,首先由阵列快速响应用户请求的前一部分数据,同时磁带库执行机械操作准备剩余数据,以屏蔽磁带库响应等待时间,并利用磁盘阵列数据冗余特性确保数据可靠保存,形成海量、快速、可靠的第三级存储子系统.经对比测试该系统用于备份应用时,其备份恢复操作的初始响应时间显著小于传统磁带库系统.