科技创新大数据清洗框架研究

河北省科技创新大数据公共平台是以海量数据资源为基础,基于数据仓库与数据挖掘技术构建,面向管理部门开展决策服务,面向社会公众开展信息服务的网络信息平台。但是,在构建数据仓库的过程中,存在各种各样的数据质量问题,最终产生各种错误的分析结果,所以,在进入数据仓库前,必须对数据进行清洗,从而保证进入数据仓库的数据质量。根据河北省科技攻关项目科技大数据标准化处理与应用系统,提出科技创新大数据清洗框架,在框架的基础上,定义清洗规则,改进清洗算法,在真实数据集上进行实验,解决了进入数据仓库的数据质量问题,从而保证了数据在数据仓库中的一致性和正确性,为后期的分析和处理提供了坚实的数据基础。     

大数据的应用及其发展趋势

近几年来大数据之风已由欧美、日本等国进入中国,2013年被世界称为"大数据年"。介绍了大数据的基本概念及其特点,简述了大数据在金融行业应用的丰硕成果,展望了大数据的发展趋势。     

如何利用大数据推进计算机审计

大数据时代已经来临,各行各业都在努力跟上大数据的步伐,进入数据处理的高效时代。本文先论述了大数据对计算机审计的机遇与挑战,然后论述如何利用大数据推进计算机审计,以期利用大数据的规模效应来推进计算机审计的发展。     

基于FPGA的高分辨率贝尔CFA插值算法的设计与实现

实现了基于FPGA的双线性CFA插值算法。该算法的处理对象是每个像素为8 bit的XGA@15 Hz的Bayer模板数据,目的是能得到每个像素是24 bit的XGA@15 Hz的彩色图像数据。输入的数据先进入缓存模块,缓存模块是由FPGA内部的双口的RAM构成,从缓存中输出的数据被分成奇行组和偶行组,然后奇行组的数据经选择器进入奇行奇列运算块和奇行偶列运算块,偶行组的数据经选择器进入偶行奇列运算块和偶行偶列运算块,最后在插值控制模块的作用下,各运算块处理的数据经输出选择器输出。     

基于FPGA的高分辨率贝尔CFA插值算法的设计与实现

实现了基于FPGA的双线性CFA插值算法。该算法的处理对象是每个像素为8 bit的XGA@15 Hz的Bayer模板数据,目的是能得到每个像素是24 bit的XGA@15 Hz的彩色图像数据。输入的数据先进入缓存模块,缓存模块是由FPGA内部的双口的RAM构成,从缓存中输出的数据被分成奇行组和偶行组,然后奇行组的数据经选择器进入奇行奇列运算块和奇行偶列运算块,偶行组的数据经选择器进入偶行奇列运算块和偶行偶列运算块,最后在插值控制模块的作用下,各运算块处理的数据经输出选择器输出。     

“互联网+大数据”养老的实现路径

 进入21世纪以来,中国正加速进入老龄社会。互联网是老龄社会的重要空间载体,大数据是老龄社会的重要技术手段,"互联网+大数据"养老对于中国老龄问题的解决和老龄社会健康发展具有重大意义。本文通过文献资料收集和案例比较分析,梳理"互联网+大数据"养老的特征与内涵,系统构造依托于互联网和大数据技术,由基础设施、数据资源、服务平台、应用系统、交互展现5个部分组成,以标准规范评价体系和信息安全保障体系为支撑的"互联网+大数据"养老体系,使中国老年人"老有所养、老有所医、老有所为、老有所学、老有所乐"。     

大数据环境下的图书馆服务创新思考

当前已经进入了大数据时代,大数据正在改变人们的信息使用偏好与习惯,给图书馆的数据存储、信息服务、网络架构等带来了巨大的挑战。本文在分析大数据对图书馆的影响的基础上,就图书馆如何创新服务以适应大数据环境图书馆发展进行了深入思考。     

嫦娥三号科学数据公开发布

<正>嫦娥三号着陆器和巡视器分别于2014年1月15日和2014年3月17日完成在轨测试,进入长管期。目前,在轨测试结束已达12个月,根据《探月工程科学数据发布管理办法》数据发布进入公开发布期。地面应用系统汇总整理了嫦娥三号任务有效载荷2级科学数据,数据总量约2TB,向普通用户公开发布。2015年4月8日,探月工程地面应用系统数据发布系统正式对外提供嫦娥三号科学数据发布服务。全球范围内的用户和社会公众     

大数据时代——课堂教学将迎来真正的变革

随着信息技术的不断发展以及信息技术软硬件应用频度与深度的加大,将形成海量的数据,我们也进入了大数据时代.文中对何为大数据时代以及大数据时代对数据应用的典型案例进行了介绍,并从教师与学生两个角度分析大数据时代课堂教学为什么会发生变革,最终阐述了课堂教学变革需要为大数据时代做好的相应准备.     

预热“大数据”产业上海率先推进政府数据开放

随着信息化发展进入移动互联网和大数据时代,数据的价值愈发凸现,开放数据运动在全球迅速兴起.自2009年美国开通政府数据服务网以来,全球已有63个国家和地区推进政府数据开放,而通过开放政府数据促进社会转型,带动大数据产业的发展,已经成为全球普遍共识.     

财务共享平台数据资产的管理与应用

随着大数据技术的应用,数据资产进入了企业管理的范围,各个企业都在依赖数据资产做出数据分析和有效决策,并通过数据资产提供更好的产品和服务、降低成本、控制风险。就企业大数据发展过程中,财务共享平台如何加强数据资产的管理与应用进行了探讨。     

大数据时代下的企业财务管理模式创新

在信息技术的快速发展推动下,我们已进入大数据时代.未来数据资源将成为企业的一项核心资产,深刻影响企业经营模式和管理成效.大数据时代给财务管理转型提出了新要求,作为财务工作者,当前亟需培养数据思维,并在数据收集、存储、分析、应用上加强探索创新,以数据可视化的信息呈现方式,为企业经营管理决策提供信息支持.     

测绘数据加密插件技术研究

随着遥感,遥测,GPS测量和移动测量等新技术新方法在测绘数据生产中的应用,测绘数据生产进入了数字化时代。数据获取手段更加多样化,获取的效率更高。但同时也带来以下问题：在数据获取和管理过程中,如何保护这些数据不被窃取和泄漏？本文从技术角度对这一问题进行了探讨,为测绘数据生产及应用提供了安全保障。     

迎接大数据时代的来临

进入2012年,大数据(big data)一词越来越多地被提及,人们用它来描述和定义信息爆炸时代产生的海量数据,并命名与之相关的技术发展与创新。它已经上过《纽约时报》《华尔街日报》的专栏封面,进入美国白宫官网的新闻,现身在国内一些互联网主题的讲座沙龙中,甚至被嗅觉灵敏的国金证券、国泰君安、银河证券等写进了投资推荐报告。     

热扩散模型解释氡浓度随温度变化

论述热扩散理论比压力驱动理论是氡进入居室的更为主要因素,并应用热扩散理论解释氡浓度随温度变化的原因,通过实测数据加以说明理论合理性,有可能在实践上和经济上提出更为合理的降低居室氡进入措施.     

基于数据驱动的大学生科学数据素养教育体系研究

科学研究进入大数据时代,"大数据驱动科学发现"已成为科学研究的第四范式,研究从宏观的社会知识层转向微观的数据层,这对大学生科学数据素养教育提出了新的要求.以科学数据素养内涵为主线,选取江苏省部分高校,调研科学数据素养教育的实施现状以及大学生的需求情况,在此基础上构建出基于数据驱动的高校图书馆科学数据素养教育框架,以增强大学生的核心竞争力.     

统计数据与大数据源的融合应用

[目的]通过统计数据和大数据融合来扩大统计基础数据库数据资源的广度和深度.[方法]首先,将数据库分成多源异构资源装载的数据湖、大数据资源管理、为多元数据服务的大数据应用3部分,将多元异构原始数据导出成csv数据文件,根据文件中每列的内容进入元数据编辑工具录入DataFiles对象信息,使DataFiles中的varia...     

河海大学“环境/生态学”学科进入ESI全球排名前1%

正据美国ESI(Essential Science Indicators,基本科学指标)数据库2016年1月最新数据显示,河海大学"环境/生态学"学科继"工程学"学科之后首次进入ESI世界排名前1%行列。至此,河海大学进入ESI世界前1%的学科增至2个。根据最新一期的ESI数据统计结果,河海大学"环境/生态学"学科共发表SCI论文666篇,总被引3 354篇次,篇均被引5.04次,"总被引次数"在全球所有进入该学科ESI排名前1%的     

高校信息系统数据归档研究

中国高校信息化建设正在进入全面、快速的发展阶段,随着高校信息化建设的深入,信息系统积累的数据越来越多,如何将历史数据进行归档,确保生产系统高效率的运行已成为高校信息化建设的一个重要问题.对数据归档技术、数据库数据归档的方案和步骤进行了分析讨论.     

国内外大数据产业发展现状与趋势研究

进入21世纪以来,随着物联网、电子商务、社会化网络的快速发展,数据体量迎来了爆炸式的增长,大数据正在成为世界上最重要的土壤和基础。根据IDC（互联网数据中心）预测,2020年的数据增长量将是2010年的44倍,达到35ZB。世界经济论坛报告称,“大数据为新财富,价值堪比石油”。