重复数据删除专利技术综述

互联网使地球"平坦化",也将世界引领到一个信息爆炸的时代。随着数据量的迅猛增长,存储成本不断攀高,如何降低存储使用量成为当代计算机领域的一个热点研究课题和一个亟待解决的关键技术问题。重复数据删除Deduplication是存储系统中一种流行的数据压缩策略,它能够消除重复数据,达到数据压缩进而减少存储量的效果,尤其适用于备份数据的压缩管理。本文主要对重复数据删除的技术发展路线和专利技术申请综述。     

数据存储技术在电力系统中的应用

<正>信息技术的核心在于信息的处理与存储。随着数据量的剧增,数据存储技术面临巨大挑战。当我们每天关注于CPU主频的不断提高、操作系统版本不断升级时,不应该忽略这样一个事实,即无论信息处理技术多么的先进,都必须将信息存储于一定的介质之上,信息和信息技术本身都需要依托于一定的存储介质而存在。     

大数据时代信息服务的创新研究

通信技术和网络技术的不断提高,为大数据时代的发展提供了新的契机,大数据是现代信息服务得以实现的基础,对整个信息服务系统起着决定性的作用,大数据时代的信息服务达到了世界范围内资源共享的目的,创新是发展的动力和永恒的主题,对大数据时代信息服务进行创新是社会发展的必然要求。本论文首先通过对大数据时代以及信息服务的基本概念进行阐述,进一步分析了大数据时代信息服务所面临的挑战,最后重点探讨了大数据时代信息服务的创新研究。     

浅析大数据背景下的计算机网络信息安全与防护措施

近年来,我国社会经济快速发展,计算机网络信息技术不断革新,其在我国得到广泛应用。随着功能的不断开放,计算机网络信息技术应用程序面临诸多安全问题,这引起人们的广泛关注。因此,要充分发挥计算机技术的优势,提高技术应用效率。大数据时代,必须按照时代要求,做好计算机信息安全工作,采取有效的保障措施,切实提高计算机网络系统的安全性。     

大数据时代图书馆信息服务研究

随着互联网技术的不断发展,数据的产生呈现出爆炸式增长,一系列信息数据的出现意味着大数据时代的来临。如何从海量的数据中提取具有价值的信息,再将这些有用的信息反馈给用户,已成为未来图书馆信息服务发展的趋势。大数据时代为图书馆带来了更多的发展机遇,同时也对图书馆的信息服务管理提出了一些挑战。只有抓住机遇,并找出解决问题的途径,才能更好地服务读者,从而增强图书馆的竞争力和影响力。     

基于大数据的MADDER系统

大规模的数据密集型计算引起了研究界和工业界的大量关注。现有的用于大数据分析的系统在不断提高,同时,新的系统在不断的出现。本文首先对大数据时代进行了分析,阐述了大数据分析系统向MADDER系统的演变,然后讲述了调优MADDER系统所面临的挑战,最后就MADDER系统的调优方法进行了概述。     

大数据时代计算机信息处理技术研究

大数据的大量化、多样化、数据流的快速化以及数据的低价值密度,使大数据的信息处理存在一定困难。本文介绍了大数据时代与计算机信息处理技术的基本概念,论述了目前计算机信息处理的核心技术,并对其发展进行了展望。     

省级交通大数据平台中数据资源规划设计

【目的】目前，交通运输行业各个系统间的信息孤岛问题严重。通过数据资源规划和数据库设计，建设大数据平台数据资源体系，从而实现对交通运输行业数据资源的统一规划、组织、管理、存储和深度利用，加强各类信息间的分析及服务，解决交通运输行业信息资源缺乏整合共享的问题。【方法】交通运输行业数据体系设计主要包括数据资源规划、数据资源体系设计、数据治理和数据交换这四部分内容，数据资源体系是在数据资源规划的基础上，根据数据的属性和用途的不同，将其归纳形成服务于各业务应用系统的基础数据库、业务数据库、主题数据库和共享数据库，从而明确不同数据资源间的组织和管理方式。【结果】数据治理是通过对公路、水路交通运输行业数据资源进行综合管控，保障数据的准确性、一致性、完整性、可用性和安全性。【结论】数据交换负责行业内不同层级部门之间跨部门数据交换，解决跨部门、跨业务的数据共享问题。     

内存映射技术在大数据实时存储中的应用

大数据的高速实时存储是某图像采集设备研发过程中所要面对的一项问题,为了解决数据吞吐量大、系统并行处理任务多等问题,不进行数据缓冲存储以及文件I/O操作的内存映射文件正是解决多个进程间数据共享的最有效方法。结合某测控设备的实际研发,对内存映射技术的运行机制和具体实现流程进行进一步的研究,并针对实际情况进行特殊处理,以保证数据存储的实时性和稳定性。最后经过测控设备的实际测试,内存映射技术表现出良好的性能,满足系统数据存储方面的要求,而且相比较其他方式占用极少的物理资源,不会影响系统的性能。     

数据存储技术在电力系统中的应用

信息技术的核心在于信息的处理与存储.随着数据量的剧增,数据存储技术面临巨大挑战.当我们每天关注于CPU主频的不断提高、操作系统版本不断升级时,不应该忽略这样一个事实,即无论信息处理技术多么的先进,都必须将信息存储于一定的介质之上,信息和信息技术本身都需要依托于一定的存储介质而存在.     

水文资料的整编工作研究

完善的水文资料对我国城市建设工作和经济发展都很重要,也会对我国水利工程的建设和水资源开发等一系列的项目提供科学的指导作用。本文分析我国的水文资料整编工作现状,并提出相应建议,从而确保水文资料的整编工作的顺利进行。     

论机读分类数据标引

本文论述了机读分类数据标引的作用、规划和方法。     

基于差异化聚类的分级隐私保护数据发布方法

在大量涉及到个人及机构隐私的数据发布过程中,对各类数据保护的需求层次存在不同,其中绝大多数不需要进行保护,仅部分需要保护;保护的需求也存在差异.该方法通过先将不需要保护的元组先行聚类成簇,而后对需要保护的元组依据它们保护度的要求不同及距离簇的远近,将其泛化到符合要求的最近簇中进行保护.最后,通过试验证明该方法能够达到比较好的分级隐私保护效果.     

大数据背景下的信息安全研究

大数据的快速发展如一柄双刃剑,在给人们提供巨大机遇的同时,也带来了更多的安全风险,严重威胁着国家信息安全、公共信息安全和个人隐私安全。基于此,主要介绍大数据相关的一些特征、大数据环境下将要面临的信息安全挑战以及一些保护信息安全的对策。     

非电量电子测量数据的非线性校正

本文简要地阐述了非电量电子测量数据的非线性问题,根据测量准确度要求及三种电子测量仪器的特点提出并详细讨论了非线性校正的几种实用方法.     

面向大数据的计算框架研究

随着大数据、云计算的到来,各种业务也开始依赖大数据,包括各互联网公司也对数据有了前所未有的重视,目前的数据处理系统主要包括批处理系统和实时处理系统,而且这些业务越来越要求实时性,客户使用云服务可以避免复杂的系统设计和设备的多次购买费用。本文主要分析了当前的计算框架,以此构建基于云服务的大数据分析系统,使其具有良好的扩展性、兼容性及大数据处理引擎的自适应性选择。     

基于GIS技术的GDP空间化处理方法

利用基于LANDSAT TM信息获取的1∶10万比例尺的土地利用/覆盖数据,建立与统计型GDP数据的多元相关关系模型,计算各种土地利用类型中的GDP系数,在GIS支持下计算出西部12省区1 km2格网GDP空间分布数据.     

大数据技术在互联网中的应用

随着新一代信息技术的融合发展,现在社会迈进了大数据时代。本文从大数据的概念、应用领域、来源、特征和所面临的问题等方面对大数据技术在互联网中的应用进行研究,以期让科技更好地服务于人们的生活。     

地理专家系统的知识化数据模式研究

介绍了地理专家系统的知识化数据模式的设计原理与实现方法,采用知识表示的框架网络结构描述地理环境的实体单元,将各级专家知识的表示以指针链接,形成了由知识到语义的框架网络.采用了基于知识的扩展R-F关系数据模式进行专家知识的表示,并讨论了系统知识库的组织结构和推理机的设计原理.该数据结构可以实现地理实体及其相互关系的完整性描述,并使系统知识库的操作简便易行,保证了推理机的实现.并以乌鲁木齐河流域为试验区,阐述了流域土地合理利用规划决策专家知识的表示方法,以及专家知识表示的基本规则和系统专家知识的组织方式.此外,还讨论了系统推理机推理规则的设计原理与组织方法及推理算法.     

基于数据降维的复杂属性大数据分类方法研究

针对数据的多维度、非线性、不稳定性等特有的复杂属性,在传统数据分类方法的基础上,本研究将高维大数据进行降维处理,结合SVM分类方法和多元SVM-REF分类方法,提出一种基于数据降维的复杂属性大数据分类方法。试验证明,与传统数据分类方法相比,本设计方法能够有效地提升复杂属性大数据的分类效率,也为后续对高维数据分类和数据复杂波动规律分析的深入研究提供依据。