化工数据预处理及其在建模中的应用

对化工数据预处理问题进行了研究,阐述了化工数据智能建模中辅助变量选择、数据采集、数据校正、输入数据降维等各种数据预处理的思路与方法。仿真实验表明:对数据进行有效的预处理,可以改善模型的精确度。     

一种基于相关分析的数据预处理方法

传统预处理数据的方法没有很好利用数据之间的相互信息，所得到的预处理结果难免会出现失真、不能准确反映数据之间的更多信息，利用相关分析中的相关系数概念以及相关的思想和构造方程的方法，给出了一种相关分析方法及其体算法用于对娄据源中的缺损数据进行修补，并通过大量实例数据演算验证，该方法分利用已有数据给出的因素之间的数据表现，进行数据驱动来填补未知的数据，且可用于解决仅有当期数据，而无历史数据的数据预处理问题。     

数据预处理在商业企业数据仓库的应用

数据预处理是数据挖掘过程中重要环节 ,对数据预处理技术进行研究具有现实意义。文章在介绍数据预处理方法的基础上 ,结合大型商业营销企业数据仓库数据的特点和数据挖掘过程中对数据的要求 ,详细论述了数据预处理技术在大型商业营销企业数据仓库中的应用 ,提出改善数据质量是预处理技术的关键。     

数据挖掘中的数据预处理技术

阐述了数据集成的预处理技术及必要性，讨论了不完整数据、含噪声数据、不一致数据的清理方法。     

利用动态信息识别汉字

随着办公自动化程度的提高，越来越需要一种更自然的方式让信息输入到计算机系统中去。一种方法是有杉一个在线系统，该系统能在文字输入时，通过动态信息识别它们。该识别系统的应用范围为手写的汉字。这些汉字有生成的规律。文字写在一个数据图形输入装置，先通过预处理增强有用信息、消除噪声、然后进行特征提取。牲包括笔划的方向、长度、次序、曲率、倾斜度以及停笔与落笔的提示信息。接着同一训练模块各部分的分类。     

供应链管理中的数据预处理技术

数据挖掘技术在供应链管理中起着非常重要的作用，由于数据常常出现噪声、缺失等情况，因此数据预处理成为数据挖掘过程中非常重要的一个步骤。结合供应链管理中的数据挖掘对各种数据预处理技术进行了介绍，并讨论了适合在供应链管理数据挖掘中应用的数据预处理技术。     

数据挖掘技术在统计预处理中的应用

目前统计分析面临的数据大多不再是预先设定的样本数据，而是杂乱、不规范的大规模的海量数据，所以统计分析之前进行数据预处理是非常必要的。采用数据挖掘技术，对存在空缺值、噪声数据等不规范的数据集进行清理，对海量数据进行维规约和自动产生概念分层处理，以缩小数据集的规模。经过预处理的数据集能更好地适应原有统计方法，并提高了统计质量。     

智能数据预处理在浮选过程中的应用

针对反浮选过程的被控对象复杂、数学模型不确定以及控制要求高等特点，提出一种基于主元分析和模糊聚类的数据预处理算法。采用模糊C均值聚类算法得到聚类中心，进行线形回归从而对过程变量数据进行了预处理。主元分析法则用采进行辅助变量的选取和输入高维向量的降维简化．针对主元变量采用径向基函数网络建立了系统经济技术指标的预测模型。根据工业实际生产数据进行的模型校验和误差分析表明，能够满足浮选过程控制的精度要求。     

基于代理的网格环境下数据管理设计

数据网格是针对于数据密集型运算提出的，本文从分析网格系统中的相关概念入手，分析了数据网格目前所面临的问题和应具备的功能，提出了基于代理的网格环境下的数据管理系统的设计过程和执行过程以及所涉及的关键技术。     

数据开采技术在反洗钱系统中的应用

提出反洗钱系统的实现框架，结合反洗钱系统的要求，同时介绍了数据预处理的几个关键环节，包括数据清理、数据集成，同时介绍了反洗钱系统中用到的几个关键数据开采技术，包括数据集成、数据分类、分联分析、聚类分析和可视化技术。     

存在镜面反射时的双目立体匹配

传统的立体匹配方法建立在Lambertian的漫反射模型之上,漫反射模型的立体匹配在一个图像的大多部分是有效的,但是在处理图像中包含镜面反射的部分时结果会产生严重的匹配错误。笔者利用漫反射和镜面反射在灰度和最大色度上的不同,分离出镜面反射的像素,然后采用一种针对镜面反射的匹配测度,在图像中漫反射部分和镜面反射部分都能匹配得到正确的视差。结果证明了方法的有效性。     

一种无需先验信息的抗多点源干扰方法

针对存在主瓣干扰在内的多点源干扰情况,现有的阻塞矩阵预处理和特征投影预处理都取得了一定的抗干扰效果,其主要思想都是先通过预处理消除主瓣干扰,再进行常规自适应波束形成,实现对主瓣干扰的抑制,但是这2种方法需要期望和干扰的先验信息来构造预处理矩阵。为解决实际运用当中先验信息无法直接获取的问题,采用强弱信号波达方向估计方法和估计出期望信号方向和干扰方向,再结合基于伪协方差矩阵的特征投影预处理的主瓣抗干扰方法,得到一种无需先验信息的抗多点源干扰算法。仿真实验结果表明,所提方法在不知道角度先验信息的条件下于多点源干扰处形成了大于60 dB的空陷,且相比于其他方法,波形保持好,受快拍数的影响小,取得了较好的抗多点源干扰效果。     

基于支持向量机的车型分类的设计

基于支持向量机的车型分类的设计思路是通过视频采集获得车辆图像,对车辆图像进行图像预处理和特征提取后,得到分类器所需数据特征,而后采用支持向量机和二元决策树对车型分类。采用三个支持向量机的分类器和二元决策树相结合对特征数据进行分类识别,最终实现了车型分类。通过利用Libsvm(SVM模式识别与回归的软件)进行实验,取得了较好的分类效果。     

Web使用挖掘中数据预处理算法的设计与实现

指出了数据预处理在Web使用挖掘中的重要性,详细分析了Web使用挖掘数据预处理过程,在每个数据预处理的每个阶段给出了一些规则并针对这些规则设计和实现了相应的预处理算法.实验结果证明这些算法是有效的.     

基于TCM-KNN算法的数据预处理问题研究

就基于数据预处理的入侵检测系统进行了研究,并针对数据预处理子系统,提出了一种有效的预处理方法,即将对数据源的基本处理和基于TCM-KNN算法的数据预处理聚类器相结合。实验证明,经过预处理的数据,不仅使不完整信息数量和攻击数据数量大大减少,而且使入侵检测系统的检测率得到了进一步的提高,误报率得到了进一步的降低。     

一种高效的Verilog预处理工具的实现

使用Perl语言,采用面向对象的编程(OOP)方法,讨论了一种Verilog预处理工具的设计.这种设计,使该预处理工具能支持多进程预处理,允许同时处理多个文件,从而提高了预处理的效率.本设计由多个函数构成,并且采用Package形式对预处理工具进行封装,外界环境通过调用Package里面的函数进行预处理,以及间接访问Package的内部数据结构.实验结果表明,该预处理工具能完全实现Verilog预处理的功能,与非OOP设计的预处理工具比较,OOP方法明显提高了预处理工具的效率.     

双峰数据分布的模拟

双峰数据是我们现实生活中存在的一种数据类型,双峰分布是由两个分布混合而成的.本文先讨论由两个正态分布混合而成的双峰分布.包括双峰数据的预处理,参数的确定,模型的建立及优化,并将这种动态模拟的方法应用于美国黄石公园老忠实泉的喷发时间和等待时间数据的统计分析.     

冷轧带肋钢筋混凝土双向密肋夹心楼盖与双向平板的对比性试验研究

对冷轧带肋钢筋混凝土双向密肋夹心楼盖的结构形式、受力性能及计算方法进行阐述 ,并且通过与一块平面尺寸相同、活荷载相同的实心双向板设计对比 ,论述了推广冷轧带肋钢筋双向密肋夹心楼盖的意义     

数据融合中系统误差估计的病态性及改善方法

数据融合系统中,传统系统误差估计算法在某些特定物理场景中表现出显著的病态性,估计结果不收敛。为了解决这个问题,该文首先深入分析产生算法病态性的物理场景并将其分为传感器密集型和目标密集型2类,然后将系统误差分解成相对方位系统误差和剩余系统误差2部分分别估计。理论分析和仿真实验表明:该方法在估计相对方位系统误差部分不存在算法病态性;在传感器密集型物理场景中,该方法在估计剩余系统误差部分对病态性进行有效控制;在某些物理场景中,该方法的算法条件数可缩减为传统方法的1%,方位系统误差估计样本方差可缩减为传统方法的1/5。