MIS的数据调查_分析及其存储设计

本文在深入分析MIS数据体系的基础上,阐述了MIS数据调查、分析及其存储设计的任务、关系和方法,并结合作者的实践,总结了在掌握传统方法的同时,如何抓住数据载体调查与数据库文件组织的关键,把数据调查、分析与数据存储设计做好的经验和体会.     

基于流数据的动态存储技术

对比了传统的数据与流数据的存储方法，并总结了现有流数据存储方式的优缺点，在继承了双向流的优点基础上，针对多数据源、多查询及多级存储建立了一个新的流数据处理系统模型，给出了解决历史数据存储的几种方案，更加突出了“实时性与历史性结合”的特点，同时满足了历史数据查询的需要，实现了流数据的动态存储策略。     

采用MapReduce模型的甚长基线干涉测量并行处理方法

针对传统甚长基线干涉测量(very long baseline interferometry,VLBI)并行处理方法存在逻辑复杂、数据存储和计算扩展性较差等缺点,基于MapReduce模型设计了一种VLBI观测数据相关的并行处理方法。该方法采用模型周期作为数据并行处理基本单元,构建数据关联算法分割观测数据使各台站同一模型周期数据对齐到同一波前,设计实现数据相关计算的Map过程,使用Reduce对各模型周期结果进行综合处理以得到最终结果。实验结果表明:该方法在积分周期包含的模型周期数量大于节点CPU核数时性能比传统方式低25%左右,在积分周期包含的模型周期数量小于节点CPU核数时通常能提供更高的计算效率,并且能简化VLBI并行相关处理的复杂度,具有更好的数据存储和计算可扩展性。     

面向电子档案大数据的可视化组织与分析

电子档案发展至今已经积累到大数据状态,数据可视化成为解决电子档案管理问题的主要方法。根据以上描述,提出面向电子档案大数据的可视化组织与分析新方法。所提新方法将瓦片模型用于进行电子档案大数据可视化组织工作,借助瓦片图层的金字塔结构与矢量特征建立可视化组织结构。讨论了电子档案大数据编码方法与矢量瓦片可视化绘图流程,提高了可视化组织工作的准确性与效率。依次通过可视化图层捕获、非关系数据存储、数据流处理、已处理数据读取、分析结果显示以及图层更新,进行电子档案大数据可视化分析。实验结果显示,所提新方法的可视化效果优异,大数据读取效率较高。     

借助修复软件恢复分区表受损硬盘数据

一般硬盘分成主引导扇区、操作系统引导扇区、FAT表、DIR主目录区和Data数据区等五部分。DIR主目录区之后的Data数据区，才是真正意义上的数据存储区，其他几个部分存储分区信息、文件且录结构和存储位置等信息。这些信息就像Data数据区存储数据的地图，操作系统通过这些信息才能知道一个文件的数据存储在Data数据区的什么位置，有哪几部分组成     

基于面向对象的大数据存储模型研究

随着大数据存储需求的不断扩大,网络存储技术面临如何存储并管理海量数据的问题.通过对现有各种大数据存储模型进行了对比分析,针对现有存储模型存储的局限性和大数据存储的特点,提出了一种基于数据特征的面向对象存储思想.采用虚拟类技术设计并实现了一种基于面向对象的大数据存储模型.在仿真环境中,对该模型的分类关键模块与非结构化数据存储性能进行了测试与分析,实验结果表明该模型分类模块误差较小,读写效率较高,而且随着数据的增大,非结构化存储性能保持稳定.     

面向Hadoop的大数据取证研究

大数据解决方案的分布式架构、海量数据存储、内存数据存储等特点给针对Hadoop的电子数据取证带来了巨大的挑战。概述了传统计算机取证的流程、要点以及在大数据取证过程中的局限性。以Hadoop为例,从Hadoop取证生态系统角度介绍了大数据解决方案的架构,分析了大数据取证的数据源、方法、流程、工具等,为调查人员进行大数据调查取证时提供参考。     

组态软件中数据存储与查询的缺陷与改进

数据存储与查询是组态软件中的重要组成部分,但是传统的方法效率低,因此对其进行改进,提高查询效率对于组态软件有着重要的意义。融合了数据库索引思想的新方法,不仅减小了存储文件的大小,而且大大提高了查询的效率。     

基于NoSQL数据库的地学大数据高效存储方法

为解决传统的关系型数据库在海量数据的存储和访问效率中存在的瓶颈问题, 提出了一种基于非关系型（NoSQL： Not only SQL）数据库的地学大数据高效存储方法。同时以MongoDB为代表, 通过C#语言编写测试程序, 与SQL Server在地学大数据的存储、 查询等方面进行了性能对比。结果表明, 与传统关系型数据库相比, NoSQL数据库的增、 删和查询耗时明显降低, 尤其是针对海量的非结构化、 半结构化数据, 其性能优势更加明显。     

XML数据存储方法的研究

分析了当前已有的XML数据存储方法，指出了这些方法存在的不足。对如何存储和查询XML数据等问题做了详细的探讨，提出了一种基于对象一关系数据库的XML数据存储方法。实验结果表明，与传统的方法相比，本方法生成的关系表较少且所需的存储空间小，基于本方法的查询所需的联结较少，因此能有效地存储XML数据并提高查询的效率。     

基于数据仓库的销售分析系统的设计和实现

数据仓库是信息处理领域近几年出现的面向分析和决策的新技术 .介绍了数据仓库中数据模型的特点和设计方法 ,并通过一个销售分析系统的实例 ,详细阐述了数据仓库的数据建模、数据抽取和更新、多维数据模型的实现、数据呈现 4个过程 ,给出了一种基于数据仓库技术的决策分析系统的设计和实现方法     

基于数据挖掘技术的市场营销智能决策支持系统的研究

随着数据仓库技术的发展,数据挖掘技术和联机处理成为建立决策支持系统的重要工具,本文探讨了数据挖掘技术在市场营销决策支持系统中应用的方法、算法和建立知识库管理系统的策略,提出了建立ＩＤＳＳ系统的结构、功能和步骤。     

一种与基于Lotus—Domino的办公自动化系统进行数据交换的方法一种与基于Lotus—Domino的办公自动化系统进行数据交换的方法

基于Lotus—Domino开发的办公自动化系统应用十分广泛,但是它与其他应用系统进行数据交换和共享非常困难．本文提出了利用目前流行的JAVA技术,与Lotus—Domino办公自动化系统进行数据交换的一种方法．     

环境保护管理信息系统的设计与实现

设计与开发环境保护管理信息系统是一项非常重要的课题,本文主要介绍基于计算机网络的通用型环境保护管理信息系统的功能和实现方法。     

数据挖掘及数据库技术在故障诊断专家系统中的应用

分析了数据挖掘技术应用于专家系统的可能性,用粗集理论和集对分析理论解决专家系统中规则的抽取和过滤问题,提出了一种新的规则提取方法.结合开发智能故障诊断系统的经验,讨论了数据库及其相关技术在推理机设计方面的应用.     

基于数据挖掘的入侵检测系统

入侵检测技术已经成为网络安全领域的热点,笔者介绍了如何将数据挖掘方法更好的用于入侵检测系统中,并具体说明了一种基于数据挖掘的入侵检测系统的构建。     

计算机数据采集与处理系统在实验中的应用

本文针对现有ＳＧ１１５Ｍ型水力测功机在作发动机台架试验时数据采集与处理繁琐．费时、准确度差，采样点数少等一系列问题，研制开发了一套计算机数据采集与处理系统，使得数据采集与处理省时准确且精度高，同步性好．解决了上述问题，提高了工作效率．     

基于遗传算法的蜜罐系统

入侵诱骗系统作为一种网络安全工具,其价值在于被扫描、攻击和入侵时,通过创建一个高度可控的攻击环境,从而捕获尽可能多的入侵信息.基于这些信息,分析入侵行为,预防更多的恶意破坏,从而更有效的保护网络.介绍一种基于遗传算法的蜜罐系统,其关键技术包括隐蔽的数据捕捉和基于遗传算法的行为分析技术.实验证明,该系统能有效捕捉恶意行为,防御多种新型攻击.     

主—从微处理器数据采集系统

本文介绍了作者根据多微处理器系统的原理设计的一个主从微处理器数据采集系统。论述了双μP共享存贮器的原理、实现方法及8031单片机控制的数据采集系统。并简要说明了软件系统的设计方法。     

基于差异数据的块级数据库备份系统

针对传统数据库备份系统中备份方法存在的重复数据过多、磁盘存储空间利用率低等问题,本文提出了一种基于块差异数据的数据库备份系统.该系统通过实现基于rsync算法的块差异备份,将备份文件划分固定大小的块并利用索引表对块进行排序,Hash表对块进行标识,检测相邻时间点备份文件间及备份文件内部的重复数据,并利用块差异数据备份文件和块差异指示文件实现备份数据的差异传输.实验结果表明,与传统数据库备份系统的备份方法相比,该系统的块差异备份方法消除了各时间点备份数据中的重复数据,从而有效地提高了存储空间的利用率.