基于大数据架构的智能交通可视化平台设计

利用大数据技术、地理信息技术、数据可视化技术等,构建智能交通可视化平台,给出平台的总体架构、技术架构,并对平台的功能进行了设计.文章基于地理信息系统的大数据可视化、多源异构海量数据融合、地理信息专用引擎、大数据引擎、多源数据分析等技术深入的研究,对利用交通管理大数据、时空大数据建立分析研判模型进行了设计,可为公安机关建...     

多源异构教育大数据挖掘与应用平台

为解决校园不同信息、应用系统间不能互通互联、共享数据等问题,利用数据整合技术将多源教育数据进行融合,搭建一套多源异构教育大数据挖掘与应用平台。该平台利用人工智能模型的输出以及多源异构教育大数据挖掘引擎的输入,基于大数据挖掘技术对学生档案、教学资源和社交行为等多源信息进行分析处理,实现教学体征诊断、学习状态智能对比、教学影响因素分析、潜在问题挖掘、教学质量趋势预测等功能。为科学提升校园个性化教学服务质量,客观评价教学个体及团队教学水平,辅助分析教学个体及团队长板、短板,科学指导决策者管理教学体系提供有力支撑。     

喀斯特石漠化大数据平台架构和技术初探

喀斯特石漠化数据多源异构、涉及面广,石漠化成因问题复杂。为更好地揭示喀斯特石漠化的发生发展及其变化规律,解决石漠化治理中的科技难点,将大数据技术引入喀斯特石漠化领域。厘清喀斯特石漠化大数据定义,结合喀斯特石漠化大数据要求,从大数据平台、基础设施平台、技术平台、应用服务平台、运维平台5方面构建喀斯特石漠化大数据平台,旨在为喀斯特地区石漠化综合治理、监测预警、生态修复和生态产业发展提供新的技术手段和决策支持。     

基于深度整合的科技资源系统的设计与实现

为解决科技资源“信息孤岛”问题,以异构数据的深度整合应用分析为目标;以多视角用户对科技资源的应用需求为导向,分析多源异构的科技资源的元数据特征,采用关联聚合方法和知识组织工具进行异构数据整合设计,建立多种类型科技资源之间的关联整合;以吉林省科技文献信息服务平台(简称“平台”)的科技资源元数据进行应用实证,最终实现了平台的多源异构数据的元数据仓储共享服务,增强了科技资源的共享服务程度和效果。     

云计算下多源异构大数据跨源调度算法研究

针对云计算下的多源异构大数据,需要耗费大量时间对其进行传输,当前调度算法大多通过启发式算法实现大数据调度,加速比和吞吐量较低,负载均衡性不佳。为此,提出一种新的云计算下多源异构大数据跨源调度算法,为了降低计算开销,在调度前首先进行预取操作。在此基础上,对全部变量进行更新处理,将所有待调度多源异构子流的质量看作子流权重进行排列,从传输窗口中还存在剩余待调度多源异构子流中选择质量最佳的子流传输数据,直至全部待调度多源异构子流均被处理过。实验结果表明,所提算法加速比和吞吐量高,且负载均衡性好。     

教育大数据智能分析平台研究与实践

中国教育资源虽丰富但数据分散、数据收集与分析手段落后,为此,研究了教育大数据智能分析平台及关键技术。提出多源异构教育大数据的集成和融合方案,搭建教育大数据智能分析平台以打破教育信息孤岛,实现信息共享。研究结果可为后续教育质量综合分析、教育质量预警和教育决策支持等提供参考,从而推进教育现代化发展。     

基于数据挖掘的异构网络多源目标数据融合跟踪方法研究

为了提高对异构网络多源目标数据的检测和识别能力,提出基于数据挖掘的异构网络多源目标数据融合跟踪方法。构建异构网络多源目标数据的分布式存储结构模型,采用相空间重构方法构建数据融合跟踪的网格分布结构模型,实现多源目标数据的可视化调度和自动监测;根据特征提取结果分析异构网络多源目标数据的统计特征,结合模糊层析性分析方法进行多源目标数据的多层次融合和自适应挖掘,提取其中的关联特征量,实现对数据的融合跟踪。仿真实验结果表明,采用该方法进行异构网络多源目标数据融合跟踪的自适应性较好、抗干扰能力较强,同时还提高了数据融合跟踪过程中的跟踪准确度。     

面向多源异构数据的跨模态存储与检索系统

制造业在设计、生产、销售和服务环节中产生了文本、图像、音视频等海量多源异构数据，高效地管理与利用这些数据资源为制造业再生产创造价值是当前制造企业面临的重大难题.传统的数据存储与检索系统将多模态数据按不同形式或模态进行分类并单独处理，导致不同模态的数据之间缺乏语义关联（文本、图像、音视频数据之间无法互检），无法支持制造企业的设计、服务等业务流程的智能化.设计并实现了一种面向文本、图片等多源异构数据的跨模态存储与检索系统，实现智能制造多源异构数据的高效管理与检索.具体地，该系统将制造企业生产运营过程中产生的多源异构数据投影到统一的高维语义空间进行表示产生语义向量，并按不同的查询需求将数据存储到不同的模式中；其次，该系统设计了三级结构+分层联通朴素构图算法的高效检索方法，将多源异构数据按照语义向量进行索引，以满足制造业用户的语义查询需求.在flickr30k数据集上进行了实验，实验结果表明：（1）该系统可支持百万级别的跨模态数据存储与检索；（2）百万级别数据下系统检索速率为毫秒级；（3）检索的正确率比现有的向量检索方法更高.     

江西省湿地云平台设计与应用研究

随着江西省湿地保护管理工作的持续推进,湿地信息化应用需求不断扩大,传统的信息系统建设在海量异构湿地资源数据的存储、应用和共享等方面已难以胜任。采用分层架构设计思想研究面向湿地保护管理的云平台的设计与应用,利用大数据技术和混合型数据存储方式构建湿地大数据中心,统一管理湿地资源数据,通过GIS平台和大数据服务平台为应用系统提供统一的数据服务、功能服务和知识服务,从而支撑湿地生态环境监测预警、湿地保护成效评估、野外巡护监管等应用建设,为湿地合理开发利用及保护管理提供决策支持。     

统计数据与大数据源的融合应用

[目的]通过统计数据和大数据融合来扩大统计基础数据库数据资源的广度和深度.[方法]首先,将数据库分成多源异构资源装载的数据湖、大数据资源管理、为多元数据服务的大数据应用3部分,将多元异构原始数据导出成csv数据文件,根据文件中每列的内容进入元数据编辑工具录入DataFiles对象信息,使DataFiles中的varia...     

基于多源数据融合的遗址古地层重建与应用研究

面向考古遗址三维重建,以安徽凌家滩遗址为例,提出了多源数据融合方法和基于融合结果的古地层三维建模方法.根据无人机航拍数据、大范围钻探数据、基础地理数据、田野考古图及文本资料,着重研究解决这些多源异构时空数据在空间基准、时空尺度和数据结构等方面的差异问题,进而构建了该遗址古地表三维模型.并在此模型基础上,初步探讨了面向考古遗址时空分析的地理空间统计、空间关系和最优路径分析等应用研究方法.实践证明,本文提出的方法为考古研究提供了直观科学的可视化平台,有助于进一步分析大范围遗址中各类遗迹的时空关系,为推演古人类的生存环境和历史发展规律提供依据.本研究深化了地理学与考古学的交叉应用,为数字考古提供新的思路,也拓展了历史地理研究新方向.     

融合多源数据的股指预测研究

金融市场中股票价格的变动受到多方面因素的影响,如何更好地利用更多的大数据为投资决策进行服务始终是各方研究的重点。本研究以沪深300指数为研究对象,采用图像化处理的方式融合财经新闻、市场交易数据和技术指标等多源异构数据,建立了卷积神经网络模型,对未来不同时间长度的股指图像数据进行涨跌预测。通过对模型结构的稳健性检验,使用60天融合新闻情绪、技术指标与股价三类图片的三层图片预测模型,预测股指未来5天后的涨跌样本外准确率可达65.2%。融合多源数据后的图片数据能够丰富单一的股价数据,从而提升了模型的预测准确率。通过与传统的线形模型、LSTM循环神经网络模型及其他经典卷积神经网络模型比较,本研究构建的预测模型在样本外预测效果最佳,表明本研究构建的基于多源异构数据的图片预测模型在股指预测中具有可行性和一定优势。     

面向道路交通监控网的异构大数据语义融合方法

为解决广域网分布式环境下异构车辆轨迹大数据的语义融合问题,基于MapReduce和ACO算法提出可在广域网环境分布式并行执行的异构大数据语义聚类融合DPACO方法.该方法在数据源端节点并行完成聚类运算中复杂度最高的部分,将所得结果合并为数据量较小的中间结果,然后将中间结果传送到中心节点并自适应地生成聚类中心.此外,该方法无需预设公共语义模型,通过移动计算避免移动大数据,大大提高了运算效率.实验比较了DPACO方法和已有基于MapReduce的并行化ACO方法,结果表明DPACO方法在广域网环境异构大数据语义融合中具有更好的可用性.     

基于多源大数据食品安全监测预控系统的设计与实现

传统的食品安全监测常采用人工监测,存在效率低、及时性差、数据不完整等问题。为了实现食品安全监测过程中的资源信息共享,在北京市教委科技创新平台的支持下,进行了基于多源大数据的食品安全监测预控系统的设计开发。该系统的设计主要依靠Eclipse的开发环境,基于Java EE的开发平台,采用My SQL的后台关系数据库和Java语言进行编写实现。该系统可以实现数据实时存储更新、平台实时监控、网络快速传输数据、共享数据等功能。最后以农药残留实验为例,将系统的分析光谱与Opus采集的光谱波形进行了比较分析,分析结果完全一致。实验结果表明,该系统具备简化人工劳动、提高科研效率、能够实现资源共享且访问方便等优点。     

基于构件的多源异构数据集成技术研究

为解决异构数据源共享问题,研究了基于中介器/包装器（Mediator/Wrapper）的多源异构数据的集成方法,提出了基于构件的多源异构数据集成体系结构,可以将异构数据源的查询以构件的方式实现。充分利用网构构件的自适应性,通过模块的自主组合来屏蔽底层数据源的差异,使用户可以无缝而且灵活地访问多源异构数据,有效地解决了多源异构数据共享等问题。     

多传感器数据融合研究

数据融合技术又称多传感器数据融合或分布式传感,即对多类多源和多平台传感器数据进行组合,提供有关空间信息综合态势的一种数据处理技术。数据融合可分为：信号级数据融合、像素级数据融合、特征级数据融合和符号级数据融合。本文讨论了红外图像、可见光图像、多谱图像、雷达图像等的数据融合问题以及各级数据融合的方法。     

石家庄市电梯安全大数据综合管理平台的设计与实现

为适应电梯安全管理新形势，保障群众乘梯安全，设计开发了石家庄市电梯安全大数据综合管理平台，平台融合大数据、物联网、区块链等技术，通过细化角色划分，赋予监管部门、使用单位、维保单位不同权限，使其各司其职、各尽其责，实现多方信息数据融合汇聚，规范电梯设备安全管理相关业务行为，促进电梯安全主体责任落实，保证电梯安全管理有序进行。     

广电大数据商业智能系统的研究与设计

本文讲述利用大数据分析技术,以广电互动电视网络覆盖范围内的数百万级机顶盒、数百个媒体播放服务器、运营系统、地理信息系统、广告系统等多个异构业务系统为数据来源,围绕广电的海量异构数据的获取(含用户行为、网络及内容资源、系统运行等数据)、智能分析、商业应用三方面开展技术研究,设计广电大数据商业智能系统,一方面支持公司自身的决策、运营方案制定、用户消费产品的精准定位,优化现有服务模式,提供利润及竞争力,另一方面数据成果亦可广泛应用于广电用户、运营商、广告客户、电子商务合作伙伴,创新商业模式.     

城市规划多源数据整合与数据库建设

城市规划信息是多源异构数据的集合.依据不同的划分标准,城市规划数据分类形式多样.在计算机技术、3S技术、办公自动化技术及工作流技术等关键技术的支持下,分析城市规划多源数据在不同坐标系、不同数据格式、不同数据结构、不同比例尺、不同时态数据等方面的整合.结合GIS数据库设计特点,在城市规划数据库功能框架下,探讨了城市规划空间数据库及属性数据库结构设计,总结了城市规划数据库整合流程.