Oracle Bulk Binds技术分析

通过对Oracle批量绑定功能原理的分析,提出利用批量绑定技术来提高海量数据操作性能的观点;运用SQL脚本实例对比分析,验证批量绑定的强大优势,并从中研究出一种通过提高数据库缓冲区,利用分组的批量绑定方式来大幅度提高TB级数据DML性能的方法.     

PowerBuilder数据窗口几个使用难点问题的解决

数据窗口技术是PowerBuilder的核心,在开发过程中,经常会遇到一些难处理的问题．介绍了数据窗口的多表更新、导出到Excel表控制和打印控制的解决方法．     

Oracle10g表分区技术管理

随着数据库大小的增长，对数据的管理性能要求越来越高。本文详细介绍Oracle10g数据库中的分区技术及其在数据库中的应用，详细阐述了利用分区技术处理大量数据量表的方法和策略，提高数据库性能。     

ArcPy集体土地所有权确权入库方法与应用

集体土地所有权数据入库工作急需高效的数据处理方法,处理日常反复修改的数据。结合项目实际需要,使用ArcPy脚本实现批量数据检查、批量出宗地草图、界址点批量生成、导出签章信息,依据导出的属性信息重新映射组合生成的土地调查表,最终达到高效数据处理要求,满足集体土地所有权确权入库工作。该方法为同类数据处理提供了参考价值。     

采用多叉树模型数据迁移算法的设计与实现

针对目前传统关系型数据库中的历史数据向非关系型数据库迁移的低效率问题,提出利用多叉树模型对历史数据存储模式进行重构.基于4种模式迁移规则对各表节点之间的关联关系进行分析,推导算法完成传统关系型数据库中存储模式和历史数据的自动化迁移.该算法不受源数据库存储模式的限制,具有一定的通用性.数据迁移实验表明:在查询性能上,基于多叉树的迁移算法比官方迁移工具Sqoop有较大的提高.     

基于Oracle的实时数据存储访问

面对快速发展的数据分析需求,流程工业实时数据库单纯的数据存储和回溯功能已不能满足实际的应用要求.以关系数据库为介质,研究了基于Oracle的实时数据获取、处理、存储和访问技术.重点探讨了实时数据的压缩存储,并给出采用Oracle数据库内部语言PL/SQL实现数据压缩算法,由于数据的存储和访问中引进了数据压缩技术,在低频率和点数较少时,该技术可作实时数据库的替代方案.给出的方法在Oracle10g企业版中测试通过,并成功应用在某大型石化企业的丁二烯分离装置上,取得了良好的效果.     

基于Oracle Spatial 10g的GIS数据存储研究

分析了现有GIS数据存储方案存在的问题,提出了Oracle Spatial在GIS数据存储方面的优势,介绍了Oracle Spatial以及Oracle Spatial 10g的新功能,以代码形式给出了Oracle Spatial 10g中GIS数据的关键操作,以西安市道路GIS数据为例说明了GIS数据是如何在Oracle 10g中存储的。     

Oracle数据的导入和导出

指出了对于OracleDBA来说,Imp和Exp无疑是最重要的工具,Exp把数据库中的数据和结构导出,写成.dmp文件;而Imp是从这些导出的文件中把数据重新导入Oracle数据库.介绍了它们能用来做什么以及怎么做,强调了在使用中应注意的问题,并给出几点提高其效率的建议.     

基于SQL Server的中文拼音首字母转化的程序实现

利用微软数据库SQLServer,创建了拼音首字母转化函数。该方法可以实现大批量汉字的拼音首字母转化,通过汇总首字母相同的数据,采用SQLServer导入导出技术,将Excel表数据输入到SQLServer数据库中。处理后的数据可再次导出到Excel表。该研究为相关的数据处理应用提供了必要的理论依据。     

交互式数据迁移系统及其相似检测效率优化

为保证数据迁移后新系统的数据质量,把数据清理应用于数据迁移之中,提出一种集成数据清理的交互式数据迁移系统,并分析其工作原理．为了提高该系统中相似重复记录的检测效率,在相似重复记录检测中采用长度过滤等方法优化相似检测算法,避免了不必要的编辑距离计算,从而提高了整个数据迁移系统的数据迁移速度．此外,构造了合适的实验环境,作了大量的检测实验,实验结果验证了长度过滤方法的科学性．     

用友NC集团账务系统及后台数据库维护一例

为了提升大数据查询、打印及客户端业务处理的效率,同时满足新业务功能的需要,获得用友公司最新技术支持,单位决定把集中会计核算平台整体由NCv3．1版本升至NCv5．6版本。为了改善系统自身的业务功能响应效率,引进第三方中间件IBMWebsphere6．1软件。后台数据库管理系统由Oracle9i升级到Oracle1lg（64位）版本。通过软件安装,数据迁移,系统部署、测试,整体运行正常。     

重复数据删除中的无向图遍历分组预测方法

针对重复数据删除系统中存储容量受内存限制难以进行扩展的问题,提出了一种基于无向图遍历的重复数据删除分组预测方法.该方法将索引表保存在磁盘中,并在内存中维护索引表缓存,以此提高系统最大可支持的存储容量.对于索引表缓存命中率低、系统性能差的问题,采用了图遍历分组方法予以解决,根据数据块访问序列特征信息建立无向图并进行分析,基于分析结果对索引项进行分组,并以组进行缓存替换,从而提高缓存命中率和系统性能.实验结果表明,基于缓存预取原理和无向图遍历分组,在将缓存设置为索引表大小的10％时,重复数据删除存储系统最大存储容量比原有方法提高了7.5倍,缓存命中率由不进行索引项分组时的47％提高到87.6％.     

电力测控系统中的微机算法设计与应用

对电力系统运行状态进行了数学描述，并由此导出运行参数的最佳解析表达式，进而设计了微机电力测控系统中短数据窗和长数据窗的算法，使计算速度和精度达到合理平衡。     

JAVA环境下的JP数据导出方法

针对传统数据导出方法存在处理文档不统一、执行时间长、实现复杂、同步性差等问题,提出运用外观模式,把处理Word文档的JACOB包和处理Excel文档的POI包封装起来,组成一个新的JP类包,并阐述该JP类包封装的具体过程及实现代码.实验结果表明,该JP类包实现了数据导出的同步性,解决了传统的一次只能调用一种文档处理方式的情况,提高了数据导出的速度,极大方便了用户日常工作中的常用操作.     

Oracle数据库数据跨平台备份与恢复的实现

从数据备份、恢复的灵活性出发，解析Oracle数据库表结构，给出了Windows环境下通过计算机VB语言对Oracle数据库的备份及恢复的实现方法和开发实例。     

信息系统数据迁移方法研究与应用

目的研究当信息系统在数据结构、数据或数据库管理系统改变时数据自动迁移的方法和技术。方法提出一种通用的数据迁移新方法,并设计了通用数据导出格式。结果对于正在开发的信息系统和试运行的信息系统能够在保留现有数据的前提下自如地修改数据结构,对于成型的信息系统可自动生成数据结构和数据的迁移。结论所提出的方法在多个信息系统的开发中被证明是实用和有效的。     

统一存储网数据迁移系统的设计与实现

针对统一存储网数据安全的需要,根据ServerFree存储设备点到点相互直接备份数据的解决方案,利用网络通信和分级存储技术,分别建立起数据迁移源端和迁移目的端．这两端是相互独立的,各自包括一个主线程和一个处理子线程,其中主线程负责初始化、监听端口连接请求和创建处理子线程,而处理子线程则负责处理命令请求和传输数据等．通过让备份的数据在存储设备间进行直接传输,可以解脱备份对LAN的影响,使得服务器在备份命令提交后不必再进行数据的读写控制,释放了服务器的CPU周期,提高了传输速度,从而实现了一个新的基于统一存储网的数据迁移系统．测试表明,在相同的网络环境下对同等大小的数据进行传输,采用统一存储网数据迁移系统的数据传输速度比采用samba技术的数据传输速度快20％．     

基于强类型DataSet的批量数据导入的优化算法

针对使用强类型DataSet批量数据导入效率低下的问题, 提出了一种优化算法。在兼顾强类型DataSet节省开发时间特性的同时, 在分析强类型DataSet内部方法的工作原理基础上, 对数据库连接的状态加以控制, 使对离线数据集中的所有数据操作处于一个连接中, 从而避免了数据库连接的频繁开关操作。 实验结果表明, 数据的提取所耗费的时间远小于数据导入所用时间, 有效提高了批量数据导入效率。     

键值数据库中弱数据一致性改进技术研究

当前数据库中弱数据一致性维护方法存在读写性能低、集群性能差的问题,为此,提出一种键值数据库中弱数据一致性改进方法。采用数学归纳法建立hash值空间的上下限,利用哈希函数对数据库中的冗余数据进行优化;在此基础之上,通过建立未知弱数据和己知弱数据之间的回归预测模型,同时利用BP网络算法对数据迁移中的缺失数据进行采集,以保证数据的一致性。实验结果显示,与传统方法相比,采用本文方法读写性能更好,且对数据块越大,吞吐量成倍提升。     

表空间数据移动的实现

Oracle数据库的数据逻辑上分属于不同表空间,经常需要以表空间为单位进行大范围的数据移动,如何有效实现表空间的移动,已成为数据库管理中面临的重要问题.本文以Oracle 11g数据库管理系统为平台,通过Rman技术阐述表空间数据移动的实现方法.