数据仓库数据加载技术

数据仓库中的数据不是传统数据库中数据的简单堆积，其数据的组织必须方便基于数据仓库基础之上的数据挖掘和商业智能工作，为决策者提供访问、分析及共享信息的能力，从而发挥数据仓库的真正功效。成功构造一个数据仓库的关键在于自始至终理解用户需要，紧紧围绕用户目标这一主题进行数据的搜集和存储。首先分析数据仓库的特点及拥有的数据类别及组成，重点介绍如何从现有数据库中有效地将数据引导至数据仓库的方法和策略，具体给出了数据仓库中5种不同类别数据的加载方法。     

谈谈数据仓库及数据挖掘工具

本文从数据仓库的组成入手,系统的分析了数据仓库的整个体系结构;着重地介绍了在数据仓库的设计过程中必须注意三个关键的问题:选择数据仓库的目标数据库、数据抽取和转换工具及前端数据访问和分析工具。     

数据仓库在酒店CRM系统中的应用研究

在酒店客户关系管理系统中,要实现对大量客户数据的有效分析和利用,需要建立一个面向分析的多维数据仓库模型,实现从多个角度显示和分析客户数据,为进行数据挖掘提供基础。本文中根据酒店CRM系统的需求,设计了数据仓库的事实表和各维度表,并采用星型和雪花型相结合的多维数据模式构建了酒店CRM系统的数据仓库模型。     

基于经济景气分析数据仓库的设计与实现

在进行宏观经济分析和预测中需要大量的宏观经济、行业经济及财务统计数据信息.为适应经济指标繁多,数据量大的特点,给出了一个应用于经济景气分析领域中的数据仓库设计方法,并按照数据仓库技术原理,结合经济景气分析需求,通过确定主题、定义维度、分析粒度和分割数据,实现了数据仓库的逻辑模型设计;应用Microsoft Access,创建了数据仓库的物理结构;使用VC .NET语言工具,开发了数据仓库管理系统.该系统功能安全、可靠,处理数据准确、快捷.例如,其中的截面数据装载功能,可在3 rain内,将565个企业的近4万个数据,通过Excel存人仓库中对应指标序列的相应位置上,从而为景气分析决策支持系统提供了良好的数据环境.这一数据仓库管理系统已经过了国务院国有资产监督管理委员会业务考核局和国家信息中心等有关部门的实际应用,并检验了它的设计合理性和功能的可靠性.     

浅析提升电信企业数据仓库中数据质量的方法

本文通过对当前国内电信市场中数据仓库规划和应用的分析和探讨,得出数据仓库中数据质量问题的来源,并且对此提出了一系列的解决方法,以提升数据仓库中的数据质量。     

数据仓库在高校决策支持中的应用研究

以校园一卡通系统中的交易数据为研究对象,构建了雪花模型的校园一卡通数据仓库架构,从数据仓库中集成的数据出发,构建了面向分析的多维数据模型,通过对其中的数据进行聚类分析,为高校领导决策提供了有用的参考信息。     

基于数据挖掘的白酒企业决策支持系统研究

以数据仓库,联机分析处理(OLAP)和数据挖掘技术构建白酒企业决策支持系统.系统通过数据仓库对来自不同数据源、历史的数据进行存储;采用联机分析处理技术对数据仓库中的数据进行多角度、多层次等分析;通过数据挖掘,从数据仓库中识别和提取隐含的知识,为企业决策人员提供强有力的决策辅助支持.     

基于数据仓库的销售分析系统的设计和实现

数据仓库是信息处理领域近几年出现的面向分析和决策的新技术 .介绍了数据仓库中数据模型的特点和设计方法 ,并通过一个销售分析系统的实例 ,详细阐述了数据仓库的数据建模、数据抽取和更新、多维数据模型的实现、数据呈现 4个过程 ,给出了一种基于数据仓库技术的决策分析系统的设计和实现方法     

科技创新大数据清洗框架研究

河北省科技创新大数据公共平台是以海量数据资源为基础,基于数据仓库与数据挖掘技术构建,面向管理部门开展决策服务,面向社会公众开展信息服务的网络信息平台。但是,在构建数据仓库的过程中,存在各种各样的数据质量问题,最终产生各种错误的分析结果,所以,在进入数据仓库前,必须对数据进行清洗,从而保证进入数据仓库的数据质量。根据河北省科技攻关项目科技大数据标准化处理与应用系统,提出科技创新大数据清洗框架,在框架的基础上,定义清洗规则,改进清洗算法,在真实数据集上进行实验,解决了进入数据仓库的数据质量问题,从而保证了数据在数据仓库中的一致性和正确性,为后期的分析和处理提供了坚实的数据基础。     

构筑更有效率的数据仓库--数据仓库索引技术一览

数据仓库是近年来信息领域中迅速发展起来的数据库新技术,而索引技术对数据仓库庞大的数据量尤为重要.本文在介绍数据仓库中数据的存储特点和数据仓库系统的查询特点的基础上,对目前流行的数据仓库索引技术的基本原理进行探讨,结合当前应用状况,分析了其特点和适用类型,为建设中的数据仓库项目提供参考.     

基于数据仓库技术的大坝资料分析与安全决策系统研究

在现有基于数据库技术的大坝安全监测系统研究的基础上,结合工程项目的具体情况以及大坝监测数据分析的特点,设计及构建了大坝安全监测数据仓库系统,为监测资料的分析查询、信息挖掘和综合评判提供了良好的数据环境.利用联机分析处理(OLAP)与数据挖掘(DM)技术对监测数据仓库中的数据进行了分析和挖掘,使安全监控资料的作用得到了进一步的发挥,为安全监控评判和决策的深化提供新的途径.     

基于并行数据仓库的数据分布调整策略

并行数据仓库系统的性能与数据在多处理机之间的分布密切相关.本文根据并行数据仓库系统的体系框架,提出了全新的并行数据仓库数据三层模式结构,并在此模式基础上,根据用户查询的变化设计了动态多维数据分布和调整策略,通过改变数据分布模式和数据物理存放的方式来保证系统数据分布均匀和工作负载均衡.实验结果证明,此算法能有效地缩短OLAP平均查询响应时间,提升系统的整体性能.     

大坝监测数据的灰色系统动态检验模型

通过对大坝安全监测数据粗差产生原因的分析，提出了一种基于灰色系统理论的监测数据伪位检验方法和检验模型，它无需长序列样本，并可随着环境量的变化调整模型参数。该方法计算量小，速度快，对于监测点较多的自动化系统非常适用。     

统计数据仓库体系中数据分析系统及其研究

数据仓库最重要的特征就是实现数据的集成与共享.基于统计数据仓库的数据分析系统众多,因此首先对统计数据仓库体系进行研究,然后对联机分析、决策支持及数据挖掘这3类分析工具进行对比研究,并通过介绍"万峰统计数据仓库"中数据分析部分的功能及划分,为统计数据仓库数据分析系统的研发提供了理论基础和实践依据.     

数据仓库的数据流分析

通过分析数据仓库的系统结构 ,对数据仓库系统中的数据流进行分类 ,给出各类数据流在数据仓库系统中的实现功能 ,使数据仓库系统能更方便地管理数据和进行数据仓库管理系统的模块化设计 .     

基于数据仓库的决策支持系统的体系结构

传统决策支持系统由于其功能的不足,不能满足现代企业的决策需求,而数据仓库技术是解决该问题的有效途径之一.文章分析了数据仓库技术在决策支持系统中的应用现状,提出了一种基于数据仓库的决策支持系统的体系结构,详细讨论了该体系结构中的数据仓库系统的结构,并简要介绍了相关的联机分析处理与数据挖掘技术.     

基于OLAP查询的数据集市系统的研究

研究了通过对数据仓库视图进行水平分割来建立数据集市系统，提高OLAP查询效率的方法和技术。提出了根据OLAP查询中的选择谓词构造其最小项谓词，选择数据仓库立方体视图进行水平分割，利用视图分割后的裂片建立的数据集市来回答查询，达到减少访问的视图元组数和加快查询响应时间，从而提高OLAP查询效率，削减维护费用。     

一种改进的数据仓库模型

数据仓库被看作是海量数据仓储,准确及时反映源数据库的改变对数据仓库查询响应的正确性至关重要。文章提出一种改进的数据仓库体系结构,在数据仓库中添加一个辅助结构作为接收和存储更新数据的暂存库,直到数据仓库获得空闲周期,加入新的数据和更新必要的视图;通过试验模拟2种数据仓库结构,验证了新的模型在设计和性能上的优越性。     

数据仓库及其设计规范化

在严格数据仓库概念基础上,说明了数据仓库与多维数据库之间关系及数据仓库的特性和优势,重点讨论并给出一种规范化的数据仓库设计和粒度模型设计方法,粒度设计在数据仓库建模中十分重要,实质上,它在数据仓库模型设计的一些重要指标间提供了一项交换技术,以保证数据仓库系统结构稳定、存储与访问性能良好,但粒度设计往往凭经验调试完成,根据专家系统技术,提出一种动态粒度划分方法,很好地解决了数据仓库的粒度设计问题。     

数据仓库中可视化决策支持系统模型构建

在构建“税务纳税评估数据仓库”模型的数据分析阶段,通过对可视化决策支持系统模型的研究和设计,采用面向对象的方法,将可视化决策支持系统分为方法层、模型层和应用层三个层次,通过对各层次定义和功能介绍,为数据仓库体系中可视化决策支持系统模型的建立提供了理论基础和实践依据.通过对可视化决策支持模型的构建,提供给用户一个分析界面可视、可互动地分析展示数据仓库可视化的分析决策系统,以便更好地利用现有的税务联机事务处理系统的数据进行复杂访问、报告和分析、决策,充分体现税务数据仓库所蕴涵的价值.