基于Hadoop的录波数据的存储与访问

在智能电网环境下,录波数据具有广域、全景、海量和可靠的特征,传统的存储硬件采用磁盘阵列,数据库管理软件采用关系数据库系统的方法由于系统扩展性差、成本高、可靠性低,难以适应要求。本文提出了一种基于Hadoop的录波数据分布式存储与访问的新方法,并将其与传统方法的访问速度进行了对比,证明了新方法的高效性。     

基于改进OBS的iSCSI SAN

近年来,光突发交换（OBS）作为一种在目前技术条件下承载IP数据的理想光交换方案得到了广泛的关注,同时iSCSI协议的提出则为构筑以IP传输为基础的企业级存储区域网络（SAN）提供了有力的支持。在不同于传统的基于千兆以太网的iSCSI SAN网络体系的基础上,提出了一种基于改进的OBS的iSCSI SAN体系结构,通过对OBS技术进行适应性的改进,充分利用了OBS作为承载IP数据的光交换技术的高数据吞吐量的优点,以及iSCSI协议所提供的SAN与IP网络的紧密结合技术,为构筑企业级高性能IP SAN开辟了     

面向无人飞行器集群协同的分布式存储技术研究

近年来,随着无人飞行器集群在各个领域的广泛应用,集群上所搭载的算法也越来越复杂,这对数据存储系统提出了更高的要求。现有研究没有考虑无人飞行器集群运行环境的特殊性,无法适应战场上通信间歇弱连接和节点易战损的环境。因此本文基于分布式存储技术设计了一套面向无人飞行器集群协同的分布式存储方案,通过动态自适应存储策略选择存储节点,提升了存储速度和资源的利用效率;同时,本文设计了基于RS码的数据备份与恢复方案,采用客户端与存储节点的交互模式降低了数据备份对于通信资源的占用,并且能够在多节点同时战损时恢复损失数据,提升了数据存储系统的稳定性和可靠性。     

基于Ceph的分布式存储系统跨机架修复技术分析

详细介绍了Ceph分布式存储系统的应用性质与层次结构,通过专业的研究与分析,将该类存储系统引入跨机架修复工作中,与修复技术充分融合。实践运用过程包括设计分级解码算法、优化纠删码、修复系统数据、验证试验方案和明确跨机架数据量等,在Ceph分布式存储系统的持续影响下,高效完成跨机架修复工作,确保各类机架使用质量。     

嵌入式系统中USB Host功能的开发

采用自下向上的设计流程,在没有嵌入式操作系统支持的条件下,自主设计和实现了嵌入式USB Host功能．以ISP1362驱动USB海量存储类设备为例,描述了嵌入式USB Host系统的框架结构和底层驱动的设计方法．实验结果表明,遵从海量存储类子协议的USB设备,都能够被系统驱动,而且数据传输速度优于PC机驱动方式．     

DNA存储中的纠错方法综述

携带有遗传信息的脱氧核糖核酸DNA,具有密度高、维护成本低以及保存时间久等特点.在数据存储需求呈指数级增长趋势的时代背景下,DNA有望成为取代传统存储设备的潜在存储介质.由于DNA存储过程会不可避免地引入一些错误,纠错是目前DNA存储面临的一个主要问题.文章分析了DNA存储信道的复杂性,系统地总结了近年来DNA存储研究...     

近似支配的NSGA-Ⅲ算法求解柔性作业车间调度问题

针对NSGA-Ⅲ算法求解多目标柔性作业车间调度问题时存在的收敛性、局部搜索和精英存储上的不足,依次设计了近似支配原则、变邻域局部搜索和精英存储策略,进而提出了一种近似支配的NSGA-Ⅲ-AD算法.结合柔性作业车间调度问题的特点,建立了多目标优化模型,设计了种群个体的初始化方法、近似支配的选择操作和变邻域的遗传操作.在仿...     

Mn:Fe:LiNbO3晶体全息存储的研究

本文用双光子记录法测试Mn:Fe:LiNbO3晶体二波耦合衍射效率.分别用绿光和红光作为记录光,紫外光作为选通光进行全息记录.用绿光作为记录光比用红光作为记录光得到的全息记录灵敏度提高约一个数量级,并且动态范围也有一定的提高.对记录光、选通光的作用和双掺杂Mn:Fe:LiNbO3晶体双光子全息存储的机理进行研究.     

基于长短期记忆网络的去重操作调度方案

数据去重的过程中,云存储系统会产生大量的计算机调度冲突.针对去重操作调度冲突问题,提出一种基于长短期记忆网络(LSTM)机器学习方法的预测模型,可根据历史操作预测服务器负载情况,由此给出操作序列建议,对服务器进程进行合理调度并实施去重操作.并与基于随机模拟仿真数据的操作调度进行了对比,实验结果表明,本方案在提高服务器去...     

VISA存储网络系统元数据管理的研究

为了提高虚拟接口存储结构(VISA)存储网络系统的性能,设计实现了基于块级的元数据管理子系统.该系统的元数据管理子系统实现了物理设备和逻辑设备的块地址空间之间的映射,支持动态地址映射、动态块重分配和热块冗余技术,可以对I/O请求的路径和数据传输的路径完全控制,从而有效地改善了VISA存储网络系统的I/O性能,使数据布局更加合理,提高了存储管理的灵活性,初步实现了负载均衡,并且使VISA存储网络系统具备了容错能力和节点的动态增加能力.测试结果表明:在加入了基于块级的元数据管理功能带来相应开销的情况下,VISA存储网络系统原型与传统存储网络系统iSCSI Linux MD相比,传输延迟减少了8.2%～21.0%,传输吞吐率提高了8.7%～11.9%.