Hadoop加速比性能模型研究

MapReduce编程模型被看作是Hadoop的核心组件,一直以来都受到广泛的应用和研究,但针对Hadoop云平台的性能研究主要集中在配置调优和分布式算法等方面,缺乏对Hadoop加速比性能模型的理论研究.针对此问题提出了Hadoop云平台加速比性能模型,并分别在同构机群和异构机群架构上对该模型进行了分析.针对同构机群提出了3种I/O负载模型,并指出了其对加速比的影响;指出了异构机群不适合做Hadoop云平台的原因及异构性对Hadoop云平台造成的影响.这些研究对Hadoop云计算平台的搭建及如何提高Hadoop云平台加速比性能有很好的指导作用,提供了理论依据.     

基于OpenStack 体系的云计算基础架构研究

计算技术在降低企业信息基础设施的投资, 提高信息系统的可用性和容错性的同时, 存在平台搭建困难, 运维成本增高的问题。为简化搭建云计算平台的复杂度, 通过对云计算基础架构进行研究, 全面剖析OpenStack 系统建构, 结合网络结构、业务集成以及服务器资源规划探讨云架构的可行性及技术架构, 进而提出通用云基础设施管理平台建设方法, 简化了云计算平台搭建的复杂度, 并在云计算平台之上提出故障事件自动触发和事件跟踪流程, 提升了云计算平台运行维护的复杂度。     

云计算数据中心安全防护技术研究

随着云计算技术的大规模应用,敏感信息和数据泄漏越发普遍,传统的网络信息安全技术遭到云模式架构的挑战,诸如云计算平台自身安全问题、云计算平台的运行安全评测和监管问题、云计算机平台的安全保障问题等越来越突出.针对云计算应用虚拟化、边界模糊、多用户等特性进行分析,对基于VMware EXS虚拟化平台下可信计算基的构建技术进行研究,为运行于其上的虚拟应用服务主机构建相互独立的可信计算基从而构建新的数据安全策略和信息安全保障体系,以实现对云计算应用平台的安全保护.     

基于云计算的软件集中部署发布平台研究

作为国际新一轮信息技术竞争的关键点和制高点,云计算被业界称为第三次信息技术产业的革命。本文通过研究云计算的基本概念、分类,介绍思杰云中心的基本架构,并且介绍了如何通过Citrix XenApp构建企业的私有应用云——应用软件集中部署发布平台,最后分析了该平台的优势与面临的挑战和今后努力的方向。     

Gang调度在云计算任务迁移和饥饿处理中的性能和成本评估

基于亚马逊的弹性计算云(EC2)的架构,对云计算模型中群调度的应用进行研究.研究中整合了作业迁移和作业饥饿处理机制,并同时考虑其性能与成本.在任意时刻可用的虚拟机的数量处于动态变化中,其规模取决于正在被服务的作业的需求.通过仿真研究某些模型,以分析具有作业迁移和饥饿处理机制的群调度的性能与总体成本.结果充分显示该调度策略可被有效地部署在云端,云平台可用于高性能计算或高性能的企业应用中.     

基于云计算的高校校园网应用平台与资源平台搭建分析

云计算作为新兴IT运营模式,改变了传统的网络拓扑架构,实现了按需访问和新的网络搭建模式。云计算技术可以使终端用户不需要投入大量IT构建成本,通过访问"云"上的数据资源、存储资源来实现按需访问。该文基于云计算技术,对高校校园网应用平台和资源平台搭建进行分析研究。     

基于大数据的云计算网络协同创新平台的研究

以云计算和大数据技术为理论基础,构建了一个具有"产学研"功能的网络信息协同创新平台,对该平台的"云"架构和功能模块进行了叙述,重点阐述了Hadoop云平台的工作模式。针对大数据环境下数据的稀疏性及扩展性等问题,提出了利用用户隐性行为数据在Hadoop平台上实施协同过滤算法,实现智能推荐,从而有效的提高了算法的执行效率。     

一种可行安全的校园云计算软件架构探究

本文针对校园云计算的实现做了一个探索,通过构建第三方监管平台,提出了一种可行安全的云计算软件架构,并讨论了这种软件架构的总体设计方法和确保云架构安全性的相关策略.这是一个独特和新颖的有关云计算的探究,以给相关部门和机构未来建设校园云平台提供参考.     

试论云计算产业发展背景下的中国云数字图书馆建设

云计算的特点是通过互联网就可以提供一切服务,近年来国内云计算产业在制定规划、平台建设、实际应用等方面发展迅速。云计算下的数字图书馆具有技术上和理念上的双重革新。云数字图书馆的基本系统架构包括基础设施、运营平台、应用平台、数字资源、检索系统等,通过搜索引擎和平台网站提供一站式服务。中国云数字图书馆的建设应由国家主导,以信息服务机构为主力,从有条件的地区向全国范围推进。     

一个开放共享的云服务诊断架构

随着服务提供商在云平台上不断提供或大或小的云服务,服务数量不断增长,云计算因此也成为一种重要的服务传递的基础架构.在云服务的发展中一个重要挑战就是如何提供一种必要的故障处理机制以保证云应用在云平台上的正常有效运行.针对云服务故障处理问题,提出一种基于共享开放模式的云服务诊断架构,该架构通过将诊断模块解耦为几个部分,并在识别故障类型的基础上自动选择诊断服务、诊断信息及处理方法,实现诊断资源的共享与重用.在此基础上,构建了一个基于云共享平台的云平台诊断原型系统.     

引入资源即服务的云计算架构及其应用

提出引入资源的四层云计算构架,阐述资源在云环境中的必要性.同时从资源的角度,给出云和云计算的概念.设计云计算环境下的数据采集模型,并从数据资源的角度,设计应用广义搜索树的面向云计算的数据预处理机制.与已有的云计算构架对比,该构架更能体现出云计算技术的特性,为云计算提供了一个思考方向.     

基于生成对抗网络与深度学习的少数据云资源预测

精确的云资源预测对计算平台实现安全运行具有十分重要的意义,针对新公司的云计算资源缺乏足够数据样本而造成预测模型精度降低的问题,本文提出一种基于WasserStein生成对抗网络和双向门控循环单元网络的少样本云计算资源预测模型。通过生成对抗网络去学习原始少样本数据的分布规律,以高斯噪声作为输入生成与原始数据具有相同分布的新样本数据,实现数据增强的行为;由于传统门控单元网络无法完全利用数据的时间信息,本文采用双向门控循环单元网络对数据的前向、反向时间信息进行双向提取并预测。以Google公开数据集进行仿真,对无增强数据和增强数据后的不同机器算法模型的预测结果进行对比。实验结果表明,使用WasserStein生成对抗网络数据增强后的双向门控循环单元网络模型精度的达到98.3%,所提方法适用于少样本数据的云计算资源预测。     

云计算数据中心的虚拟资源自适应供给模型

随着云计算技术的飞速发展,云计算数据中心的规模越来越大,随之而来的资源管理、运维调度、能耗开销等问题也开始日益严峻。本文对云计算数据中心的设计思路与设计结构进行了详细的介绍,先从云计算数据中心的总体结构进行分析,随后引入虚拟资源自适应供给模型概述,通过综合分析三种不同的虚拟资源供给模型优劣,提出利用多层次网络队列方法搭建虚拟资源自适应供给模型,通过综合考量模型的平均响应时间、服务器利用率、使用成本等因素,对虚拟资源进行合理的规划与调度,最终帮助云计算数据中心配置合适数量的虚拟机,做出合理的资源调度策略,力求优化数据中心的运维调度,降低能耗开销,提高能源利用效率,推动能源发展。     

云计算--实现概念计算的方法

云理论是实现概念的定性值与数字的定量值之间自然转换的有力工具．本文在云理论的基础上，提出了实现概念计算(也叫简化计算)的云计算方法．概述了云模型与不确定推理；给出了计算的逻辑描述，将计算过程抽象成为推理过程；运用机器学习的方法，给出了计算云化的过程，并且采用不确定推理的方法，给出了云的计算过程；简单阐述了云化计算的系统实现．     

An Energy-Saving Task Scheduling Strategy Based on Vacation Queuing Theory in Cloud Computing

High energy consumption is one of the key issues of cloud computing systems. Incoming jobs in cloud computing environments have the nature of randomness, and compute nodes have to be powered on all the time to await incoming tasks. This results in a great waste of energy. An energy-saving task scheduling algorithm based on the vacation queuing model for cloud computing systems is proposed in this paper. First, we use the vacation queuing model with exhaustive service to model the task schedule of a heterogeneous cloud computing system.Next, based on the busy period and busy cycle under steady state, we analyze the expectations of task sojourn time and energy consumption of compute nodes in the heterogeneous cloud computing system. Subsequently, we propose a task scheduling algorithm based on similar tasks to reduce the energy consumption. Simulation results show that the proposed algorithm can reduce the energy consumption of the cloud computing system effectively while meeting the task performance.     

基于云计算技术的出错数据恢复技术研究

为了保证数据存储的安全和数据的完整性,研究了基于云计算技术的出错数据恢复技术。首先介绍了云数据完整性检测技术,主要介绍了完整性检测模型和动态云数据完整性检测。并在此基础上研究了云数据恢复技术,提出基于动态分级管理机制的云数据恢复技术。最后,验证了该数据恢复技术的有效性。     

基于云计算的大数据关键特征高效提取方法研究

传统特征提取方法不适于大数据特征提取,提取效率低;为此,提出一种新的基于云计算的大数据关键特征高效提取方法。介绍了云计算中的MapReduce编程模型,给出Map与Reduce两个阶段的任务执行过程,通过MapReduce编程模型对大数据关键特征提取方法进行编程和处理,在云计算中实现高效运算。通过样本局部特征对特征集合进行评价,选择大数据关键特征。通过相空间重建保证大数据特征的不变性,在此基础上,引入关联维实现大数据关键特征的提取。实验结果表明,采用所提方法对大数据关键特征进行提取,可行性和效率高,与其他方法相比有更好的性能。     

云计算环境下移动大数据合理分流方法研究

采用传统方法对移动大数据进行分流时,结果不合理,对不同处理器的分流均衡性较差。为此,提出一种新的移动大数据合理分流方法。给出云计算环境下移动大数据分流平台整体结构,在云计算环境中每个可编程交换机上安装移动大数据分流单元。将移动大数据分流问题转换成求解最优解问题,通过状态反馈实现分流。将优化分解方法与拉格朗日乘法结合在一起完成分布式计算,获取移动大数据在链路上的均衡分流模型。采用交换机分流单元获取云计算环境下网络的分流状态,求出此时收益函数的偏导数,将两者相加获取最终分流结果。对移动大数据分流延迟进行分析。实验结果表明,所提方法能够保证分流均衡性和合理性。     

云计算在企业部署模式的研究

介绍了云计算技术的特点和内涵,通过分析各种云计算技术并结合企业信息化工作的应用需求,提出了企业数据云的应用构想,给出了企业实施云计算的简单模型,并结合实际研究出适合不同企业云部署的相关方法.     

基于云计算的图书管理平台的设计

介绍了云计算的基本原理,提出了GFS的改进模型,并将云计算运用于实际工作中,设计了基于云计算的图书管理平台,讨论了实现图书管理平台的主要技术。