基于语义的自主式存储中介文件系统及其访问策略

自主式存储中介系统(ASAS)是一个联系用户或应用程序与海量存储系统(可同时采用DAS、NAS、SAN等多种存储技术)的中间平台.ASAS能够自主地发现存储系统中所使用的存储设备的种类和可利用的各种资源;针对传统语义文件系统的主要缺点,即无法得到质量较高的文件属性,利用用户访问的模式捕捉用户状态,将直接文件属性设置与间接属性设置方法结合起来,实现基于语义的ASAS文件系统;通过ASAS文件系统扩展元数据的帮助,增加文件属性的数量,提高文件的可分类性;使ASAS能够自动收集用户的应用信息和需求,便于用户合理地存储数据并高效地进行访问.     

基于iSCSI的虚拟化存储系统引擎设计

利用iSCSI存储技术标准设计了一个虚拟存储系统引擎VSSE(Virtual Storage System Engine).采用分层结构模型处理远程主机对存储区域网络中存储设备的I/O访问请求.实现基于快速以太网的存储区域网络中存储设备的虚拟化和透明访问,并取得了较好的I/O请求响应速度与I/O传输速度.     

一种包含两级元数据服务器的机群文件系统

本文提出了一种两级元数据服务器机群文件系统,高级元服务器实现任务分配功能,依据与二级元服务器性能最密切相关的负载信息将任务快速分配给二级元服务器,同时在存储文件时,提出了一种文件热量模型,能正确反映各存储节点I/O流量和存储量的方法,并依据文件热量值对待存文件进行了合理的分配存储。实验结果表明,本策略提高了系统的性能,缩短了任务执行时间,取得了较好的效果。     

基于分布式FTP的二进制大对象存取算法

为提升二进制大对象(BLOB)存储系统的可靠性和存储效率,设计了一种新的BLOB存取算法.通过建立分布式BLOB存储模型,设计了基于多列等候队列的存储结构,证明了适当增加等候队列数量,可改善存储系统性能.系统采用混合型数据放置策略,分布地存储BLOB数据于FTP群集中各个结点,并将其属性存储于元数据服务器.结果表明,随着系统容量的不断增长,各结点存储性能稳定,数据完整性良好.     

基于I/O通道的存储系统性能模型

基于数据存储I/O通道,为“服务器存储”和“数据中心”两种典型存储结构建立排队模型,利用模型对比分析两种结构的性能特点。结果表明:与服务器存储相比,数据中心的“用户绕过服务器直接访问存储设备”结构,避免了服务器成为系统瓶颈,提高了存储设备利用率,使系统总吞吐量有较大幅度增长。实验证明:该模型可有效地反映实际存储系统的性能变化趋势,并给出大致性能评价。     

一种基于混合索引的HDFS小文件存储策略

Hadoop分布式文件系统(hadoop distributed file system,HDFS)因其稳定高效、低成本等优势,已被很多大型企业广泛使用.针对HDFS海量小文件存储时元数据服务器节点内存开销过大,合并文件中小文件访问效率不高的问题,提出一种改进的基于混合索引的小文件存储策略,应用分类器分类标记小文件,并在元数据服务器建立H-B+树索引,在存储节点根据小文件大小建立不同的块内索引,达到提高小文件访问效率的目标.实现中采用缓存结构,以提高客户端访问的响应速度,同时也有利于元数据服务器节点的内存负载.实验结果表明,基于混合索引的小文件存储策略能有效提高小文件访问效率,并显著降低元数据节点内存开销.     

基于LDAP的广域网存储虚拟化目录管理

研究了广域网范围内的存储虚拟化目录管理．采用基于轻量级目录访问协议(LDAP)目录管理方案管理现有的存储资源,按目录树型结构组织用户的存储资源分布信息,提供基于多用户的存储目录视图,实现用户对资源的透明使用。     

基于ISCSI协议的SAN的改进策略

ISCSI存储系统具有容量大、高性能、扩展性好等优点,但仍然不能克服目前磁盘I/O速度普遍跟不上处理器速度和网络传输速度的问题。针对这种情况,从内存磁盘的模型和功能设计等方面进行改进,即对SAN的存储策略进行改进,尽量避免在处理请求时直接对存储设备进行读写,以提高数据的传输速率。     

基于存储局域网络的集群多媒体服务器

针对存储系统这一多媒体服务器的瓶颈,将存储局域网络(SAN)这种新兴的存储系统应用于多媒体服务器,分析了SAN的优点,指出它非常适合于多媒体服务器.并利用SAN的优点,提出了将服务器和存储系统两层集群.服务器使用复制及加权调度,使用并改进了MMPacking算法,提高了Cache的命中率.存储系统使用了窄交叉,并给出了选择交叉宽度、深度及磁盘块尺寸的方法.     

基于SQL的电子资源数据库元数据的开发与设计

根据SAN (storage area network)存储模式的分块理论,以64 M作为block分块单位,设计了分块算法的实现.重点研究了使用底层的SQL Server开发工具对数据库资源平台的元数据进行库结构调整.利用apabi元数据的标识找到了与此元数据相对应的SQL表.修改元数据就是对SQL的表进行操作.最后,使用XML语言设计出了形象直观的农业学科书评数据库的元数据信息.     

Performance Comparison of IP-Networked Storage

Dramatically increasing amounts of digital data are placing huge requirements on storage systems. IP-networked storage systems, such as the network file system (NFS)-based network-attached storage (NAS) systems and the iSCSI-storage area network (SAN) systems, have become increasingly common in today’s local area network (LAN) environments. The emergence of new storage techniques, such as object-based storage (OBS) and content aware storage (CAS), significantly improves the functionality of storage devices ...     

一种统一存储网的Cache方案

统一存储网融合了NAS和SAN的优点,但对小写数据其I／O性能不高．在客户端采用NVRAM和日志磁盘构成一个两层的Cache,可以将小写数据积累成大写数据,达到提高性能的目的;采用基于租约的Cache一致性协议可以保证网络中断或客户出错时USN的可用性和数据的一致性;实验显示Cache方案可以使USN的性能最大提高50％．     

Design and Implementation of a Fibre Channel Target Driver Supporting SCSI

Fibre channel storage area networks (FC-SAN) are effective solutions to address storage management problems caused by very large volumes of data. But the expense of fibre channel devices limits FC-SAN applications. The use of IP networks instead of fibre channel networks will reduce SAN cost, but will also reduce the performance. Therefore, small computer system interface (SCSI) devices were considered to replace FC disks to reduce the SAN cost. A driver for the FC network adapter and the FC target, designed and implemented to support this structure, obeys the SCSI protocol and works in target mode with 200 MB/s bandwidth. The FC target architecture and implementation were compared with the FC initiator.The SCSI command transfer process in the FC layer was described. The performance test results show that the maximum I/O throughput reachs 167 MB/s for read requests and 196 MB/s for write requests (FC bandwidth is 200 MB/s), verifying that the FC target is very efficient. The modularization, efficiency, and low cost of the FC target will enable SAN and fibre channel to be more widely used in applications.     

Performance analysis of an iSCSI-based unified storage network

In this paper, we introduced a novel storage architecture “Unified Storage Network“, which merges NAC( Network Attached Channel) and SAN( Storage Area Network) , and provides the file I/O services as NAS devices and provides the block I/O services as SAN. To overcome the drawbacks from FC, we employ iSCSI to implement the USN( Unified Storage Network) . To evaluate whether iSCSI is more suitable for implementing the USN, we analyze iSCSI protocol and compare it with FC protocol from several components of a network protocol which impact the performance of the network. From the analysis and comparison, we can conclude that the iSCSI is more suitable for implementing the storage network than the FC under condition of the wide-area network. At last, we designed two groups of experiments carefully.     

Design and Implementation of SCSI Target Emulator

Introduction With the explosion in the amount of information, the performance and scalability of storage systems have become critical issues along with the system cost-effectiveness. Storage area network (SAN)[1] is a new storage system model with excelle…     

电子政务基础数据库支撑平台结构分析

基础数据库建设是电子政务工程的重要组成部分,其支撑平台的方案选择直接关系到系统性价比的高低.本文推荐并论证了在IA架构的linux平台上,综合了SAN的Oracle集群方案,这一方案以其高超的业务处理能力、庞大的存储容量与高度的可靠性,可以为电子政务基础数据库提供稳定、高效的运行环境.同时,这种方案降低了成本,方便了维护,增加了系统的可用性、可扩展性和存储库的健壮性.     

VISA系统设计及性能分析

利用虚拟接口网络通信协议,设计了基于块级元数据管理、具有高性能的存储区域网VISA(virtual interface storage architecture).它利用开放式的数据块动态映射算法实现了物理设备与逻辑设备地址之间的映射,增加了系统的灵活性,同时合理地分配存储资源,改善了系统的I/O性能.利用Matlab对采集到的视频数据Trace进行了传统RAID0算法与动态映射算法之间的性能分析比较.结果表明,采用动态算法使得系统的平均响应时间减少了8%～10%.     

对象存储系统的合作缓存方案

结合对象存储系统的数据访问模式,综合设计客户端和元数据服务的缓存,构造存储系统的合作缓存方案.该方案将客户端和元数据服务器的缓存作为整体进行设计,以达到提高缓存利用率的目的;通过缓存准入策略合理选择数据传送模式,减少数据传送的通信量;同时,合作缓存方案根据数据对象的大小、访问成本和网络负载动态地调整缓存策略,提高存储系统的服务质量.实验显示,合作缓存方案能较好地适应不同的工作负载,有效提高了系统的输入输出性能.     

统一存储网的研究和设计

NAS为用户提供件I／O服务,SAN为用户提供数据块I／O服务,计算机应用的发展要求存储网络同时提供2种服务．统一存储网(USN)利用TCP／IP协议,将NAS和IP-SAN整合成单一的存储空间,同时为用户提供件I／O和数据块I／O2种服务．理论分析和实验证明这种方案是可行的。