大数据时代图书馆面临的挑战初探

阐述了大数据的起源和定义,分析了大数据的研究现状,探讨了大数据对图书馆的影响和挑战。     

基于面向对象的大数据存储模型研究

随着大数据存储需求的不断扩大,网络存储技术面临如何存储并管理海量数据的问题.通过对现有各种大数据存储模型进行了对比分析,针对现有存储模型存储的局限性和大数据存储的特点,提出了一种基于数据特征的面向对象存储思想.采用虚拟类技术设计并实现了一种基于面向对象的大数据存储模型.在仿真环境中,对该模型的分类关键模块与非结构化数据存储性能进行了测试与分析,实验结果表明该模型分类模块误差较小,读写效率较高,而且随着数据的增大,非结构化存储性能保持稳定.     

迎接大数据时代的来临

进入2012年,大数据(big data)一词越来越多地被提及,人们用它来描述和定义信息爆炸时代产生的海量数据,并命名与之相关的技术发展与创新。它已经上过《纽约时报》《华尔街日报》的专栏封面,进入美国白宫官网的新闻,现身在国内一些互联网主题的讲座沙龙中,甚至被嗅觉灵敏的国金证券、国泰君安、银河证券等写进了投资推荐报告。     

传感器网络数据管理系统面临的挑战

随着通信技术、嵌入式计算技术和传感器技术的飞速发展和日益成熟,具有感知能力、计算能力和通信能力的微型传感器开始在世界范围内出现。这些微型传感器构成的传感器网络引起了人们的极大关注。由于无线网络的节点移动性、低带宽和断接性等为我们带来了新的挑战。     

大数据时代数字图书馆发展浅析

大数据及其技术是当前信息领域研究的热点,在数据挖掘、数据分析、信息服务以及信息安全、隐私保护等方面给图书馆带来了挑战与机遇。随着大数据时代的到来,用户对信息资源的需求越来越高,图书馆的信息处理及服务将会发生显著的变化,从大量的非结构化数据、半结构化数据集中去分析和挖掘潜在的价值将成为图书馆的主要业务之一,图书馆的服务方式也需做出相应的改变。     

大数据互联网时代光纤通信技术的发展与挑战

随着信息通信技术及各种高速带宽业务的飞速发展,对承载这些业务的光纤传输网络在功能及网络灵活性、扩展性方面提出了更高要求,其必须在实现大容量、超高速传送的同时实现网络智能化转型.软件定义网络(software defined networking,SDN)技术被视作具有颠覆性的网络革命技术,必将促进网络技术的发展,促进网...     

无线传感器网络节点的硬件设计

IEEE802.15.4是目前国际上无线传感器网络新的通信协议,而无线传感器网络节点的核心必须是微处理器和通信协议兼容.在介绍了设计要求和功能模块的基础上,论述了网络节点的硬件设计思路和设计方法,基于JN5121无线传感器网络的硬件组成,包括微处理器的结构、性能特点、外围电路及硬件平台的设计.介绍了JN5121的软件开发环境、射频部分的组成、连接及控制、以及开发的实物产品.无线传感器网络节点硬件的应用不仅满足了设计要求,而且具有低功耗的特点.     

建设智能云数据服务平台让高校大数据“说话”:提升学校核心竞争力

高校信息化建设发展到以数据服务为核心的阶段,怎样挖掘出隐藏在大数据中的重要信息并利用这些信息更好地为师生提供服务是各个高校必须面对的问题,本文对此进行了分析并提出了一些思考.针对这些思考,提出了智能云数据服务平台的解决方案,阐述了平台的建设目标、建设原则与建设内容,探讨了平台使用的整体架构和安全体系,描述了建设过程中可能会遇到的问题并提出解决方案.最后对平台建设的预期效果进行了评估.     

基于区块链的非结构化大数据动态安全存储

当前大数据交互的不透明性以及数据文件访问形式的不合理性, 导致大数据存储存在存储延时长、 安全性较差的问题, 为此提出基于区块链的非结构化大数据动态安全存储技术。 构建多用户规则调度模型, 利用存储数据包生成独立的行向量与 n 阶矩阵, 基于列不满秩概率完成存储算法设计; 采用区块链非对称加密技术的公私钥, 实现透明与完整的数据交互, 对次要信息与数据访问形式实施记录。 引入分布式文件系统, 将其与Mongo DB 非关系型数据库有效结合, 从而使非结构化大数据得到安全存储。 仿真实验结果表明, 该方法不仅具有理想的存储速率, 而且使大数据的完整性得到了保证, 具有理想的有效性与实践性。     

Web数据挖掘系统体系结构的研究与设计

随着计算机技术和Web技术的日益发展,Web的数据量越来越大,如何从庞大的数据量中挖掘出自己需要的信息,越来越成为人们的需要。本文以此为目的,设计了一个Web数据挖掘系统的体系框架,为后续的实现打下了基础。     

他国如何与大数据“共舞”

大数据时代,通过互联网、传感器、智能终端等产生的结构化或非结构化的数据越来越多,政府作为国家和社会管理者,对这些数据拥有至高无上的所有权和使用权。     

大数据时代智谋未来

据分析,到2020年,全球以电子形式存储的数据量将达到35ZB,是2009年全球存储量的40倍。而在2010年底,根据IDC的统计,全球数据量已经达到了120万PB,或1.2ZB。如果将这些数据都刻录在DVD上,那么光把这些DVD盘片堆叠起来就可以从地球垒到月球一个来回(单程约24万英里)。     

大数据热涌背后的冷思考

什么惹眼就挂什么标签,什么有好处就往哪钻,这就是如今商家通行的招数。面对"大数据"的流行,不少传统BI厂商也禁不住"诱惑",摇身一变,都套上了"大数据"的外套。IT业从来不缺乏新概念、新名词、新技术,更新之快、推出之猛,令人目不暇接。继云计算、社交网络之后,如今大数据再度走红,似乎成为时下信息     

基于大数据的防窃电模型与方法

针对常见的窃电现象及方法,分析了窃电方法的本质特征;利用鱼骨图表示特征参量的方法建立了多维度电参量的相关特征参量集合,并构建了多维度电参量的窃电本质特征模型来揭示窃电方法、本质特征和特征参量三者的关联关系;提出了基于大数据的防窃电模型与方法,包括数据预处理、大数据的防窃电结构化模型;最后通过用电信息系统采集的数据验证了本文结构化防窃电模型与方法的有效性。本文研究成果可为解决大数据条件下窃电行为监控问题提供有效的途径和方法。     

下一代公共安全视频监控系统的大数据分析

视频监控因其可以提供丰富的、直观的以及精确的信息而成为主要的监控工具. 然而, 随着视频监控系统在世界各地的大规模建设, 由于一些诸如“有用信息和线索不能及时从视频大数据中被发现”的问题, 降低了犯罪预测和公共安全治理的检测效率. 各类公共安全信息系统被用于交通事故治理、犯罪事件和恐怖事件的预测. 但是, 大规模的系统冗余建设导致了“IT 资源”和“信息过载”的巨大浪费. 为了解决上述问题, 如大数据、云计算和虚拟化技术已被广泛应用于公共安全行业. 采用“前+后”的模式, 为下一代公安系统提出了一种新的架构.在该架构下, 介绍了云计算技术如分布式存储和计算、巨大的异构数据的检索, 并且提出了多个优化策略, 提高了资源的利用率和任务的完成效率.     

基于非均匀数据率的无线传感器网络平衡耗能算法

无线传感器网络采用多跳、多对一的数据传输方式,使得网络能量消耗不平衡,基站附近结点通信负荷过重成为"热点","热点"区域的结点往往最先死亡导致网络失效,此时其余结点仍剩余大量能量.为平衡网络的能量消耗,提出了一种基于非均匀数据率的无线传感器路由协议,其核心思想是结点根据结点与基站的距离调整数据率(单位时间内结点产生数据的速率,简称数据率),距离基站越近数据率越低,以节省能量用于通信,距离基站越远数据率越高,以充分利用节点的能量.     

大数据的大问题

从手机的GPS信号、监控摄像头拍下的视频、电力使用、交通流量,到社交媒体上貌似无穷无尽的帖子,这些及更多的数据来源促成了大数据。根据IBM的统计,每天会产生超过2.5×1018字节的信息,全球90%的数据都是在过去两年里生成的。虽然大数据提供了大机遇,推动创新,让我们的城     

基于BERT-CNN的数据标准化方法

针对复杂多源的非结构化数据,提出一种数据标准化方法,在抽取信息的同时,能将不同来源的数据转换为统一的表示形式.首先,对文本进行词性标注等预处理,提取出需要进一步识别类型的实体;其次,使用语言表征模型对文本信息进行向量表示;最后,通过基于注意力机制的卷积神经网络对抽取出的实体进行分类,以适应不同应用场景的分类标准.实验结果验证了该模型的有效性.     

大数据的价值与挑战

2012年以来,"大数据"无疑成为互联网最热门的词汇之一,它被用来描述和定义信息爆炸时代产生的海量数据。随着互联网、云计算、移动互联网和物联网的迅猛发展,市场营销活动中利用大数据分析实现商务智能的方式日渐受到重视。而它在创造巨大商业价值的同时,对众多行业企业和IT公司带来了前所未有的挑战。     

“大数据”成就“智慧营销”

十年之前,电影《天下无贼》中的经典对白"21世纪什么最贵?人才"被人们争相传颂;十年之后,这个问题的答案与时俱进地变为当前市场热点——数据!当然,此数据已非传统意义的数据,而是海量、爆发式增长的"大数据"。作为继云计算、物联网之后IT产业的又一次颠覆性技术浪潮,大数据被人们视为智慧城市的源泉、精准营销的根基,其与传统BI究竟有何区别?未来企业应该如何挖掘海量数据背后的潜在价值?