共查询到20条相似文献,搜索用时 302 毫秒
1.
机群文件系统中一种文件迁移的客户端决策 总被引:1,自引:0,他引:1
为降低机群文件系统中文件访问的平均响应时间,提出了一种能反映机群节点上文件访问频繁程度的热量模型,在此模型的基础上给出了一种文件迁移的客户端决策,用于决定在非重负载情况下,单个文件在机群中的理想存放位置.模拟对比实验的结果显示,采用该策略,在总负载恒定的情况下,在4、8节点机群上文件访问的平均响应时间分别降低了21.6%和26.3%,在平均负载恒定的情况下,在4、8节点机群上文件访问的平均响应时间分别降低了22.2%和16.8%,结果表明该策略可以有效地降低文件访问的平均响应时间,提高系统的可扩展性,从而提高机群文件系统的性能. 相似文献
2.
提出了一个提高机群文件系统性能的方法,将元服务器分级:高级元服务器实现任务分配功能,依据与二级元服务器性能最密切相关的负载信息将任务快速分配给二级元服务器,同时在存储文件时,提出了一种能正确反映各存储节点I/O流量和存储量的策略,对待存文件进行了合理的分配存储。实验结果表明,本策略提高了系统的性能,缩短了任务执行时间,取得了较好的效果。 相似文献
3.
针对机群文件系统的个子操作出现错误会影响数据的可用性,提出了一种高可靠的消息传输机制HR-NET.将机群文件系统的网络故障分为3类:发送错误;接收错误;请求应答错误.对于前2种错误,提出了基于冗余传输路径的网络容错机制,对消息收发故障进行恢复,同时引入消息优先级调度策略,动态地调整消息的处理次序,避免请求应答类型的错误.通过分离并单独处理网络故障,HR-NET为机群文件系统提供了高可靠的通信机制,简化了上层文件语义操作的实现.测试结果表明HR-NET高可靠性机制所带来的性能损失低于9%. 相似文献
4.
考虑到网格环境下传统元数据管理系统的不足和元数据本身的特点,根据局部性原理和本体论提出一种高效实用的基于虚拟组织(virtual organization i.e.VO)完全分布的元数据系统模型,在这个模型中每个分布元数据管理系统都采用SMICC(semantic metadata intelligent cache controller)体系结构,该体系结构根据局部性原理引入了智能Cache,并利用本体论表达语义信息来对元数据系统进行管理,智能Cache可以减少远程访问的时间,提高访问效率。根据语义信息来获得对概念的统一理解形式,过滤掉无关信息以缩小查询范围,并利用概念关联进行推理以实现对查询请求泛化,由此可以提高查询过程中查全率和查准率。 相似文献
5.
普通摄像机均以模拟方式(PAL或NTSC制式)输出图像,迫使数字视频应用系统使用PC机经过采集卡实现图像的数字化.为了最大限度地减少模拟视频传输中的干扰,避免图像经过编码、模拟传输、再次解码数字化过程中导致图像细节信息的损失,提出一种采用压缩芯片和高效网络芯片,基于嵌入式Linux系统的微型嵌入式数字视频服务器,解决了大数据量音视频流的实时压缩传输问题.将图像的数字化从计算机端,前移到了摄像机端,可将数字摄像机获取的数字视频或者普通摄像机的模拟视频,压缩成MPEG流、打包并通过以太网传送. 相似文献
6.
介绍一种NovellHAServer集群容错系统在证券业中的应用实例设计方案 ,该方案具有较强的容错能力 ,它能令人满意地应用于证券业服务平台。 相似文献
7.
在总结现有的引文元数据抽取方法的基础上,针对引文的排版惯例——引文在文档内部风格一致,提出了一种新的引文元数据抽取方法。重点描述了以往研究中很少涉及的引文元数据的自动发现和分割,探讨了风格一致性在引文元数据标注中的应用。实验结果表明此方法在引文元数据发现、分割和标注方面均取得了较好的效果。 相似文献
8.
9.
10.
为有效减少云计算过程中不同元数据的工作量,本研究提出了一种全新的管理方案.通过改进的Chord算法和协同双层缓存机制使得元数据服务性能随着聚类上元数据服务器数量增加而增强;采用亲密算法控制客户端与服务器端的协作以便对元数据集进行缓存.基于以上方案能表现出较高性能和良好的可扩展元数据服务,实验表明本文提高的方案性能优于其它方案,更能体现出元数据访问性能与亲密值之间变化的关系. 相似文献
11.
LIU Yuling SONG Weiwei MA Xiaoxue 《武汉大学学报:自然科学英文版》2006,11(6):1935-1938
In this paper, we explored a load-balancing algorithm in a cluster file system contains two levels of metadata-server, primary-level server quickly distributestasks to second-level servers depending on the closest load-balancing information. At the same time, we explored a method which accurately reflect I/O traffic and storage of storage-node: computing the heat-value of file, according to which we realized a more logical storage allocation. According to the experiment result, we conclude that this new algorithm shortens the executing time of tasks and improves the system performance compared with other load algorithm. 相似文献
12.
13.
Google文件系统是一个典型的、可扩展的集群文件系统,适用于大型的、分布式的、对大量数据进行访问的应用。指出了,Google的一点不足之处,即缺乏负载控制。为实现对负载的控制,采用泊松过程对数据服务器的负载进行预测,再通过对本地CPU、内存等资源的监控对预测结果作修正。 相似文献
14.
Existing in-kernel distributed file systems cannot cope with the higher requirements in wellequipped cluster environments, especially when the system becomes larger and inevitably heterogeneous.TH-CluFS is a cluster file system designed for large heterogeneous systems. TH-CluFS is implemented completely in the user space by emulating the network file system (NFS) V2 server, and is easily portable to other portable operating system interface (POSIX)-compliant platforms with application programming/binary interface API/ABI compliance. In addition, TH-CluFS uses a serverless architecture which flexibly distributes data at file granularity and achieves a consistent file system view from distributed metadata. The global cache makes full use of the aggregated memories and disks in the cluster to optimize system performance.Experimental results suggest that although TH-CluFS is implemented as user-level components, it functions as a portable, single system image, and scalable cluster file system with acceptable performance sacrifices. 相似文献
15.
16.
根文件系统是构建一个嵌入式Linux系统的重要组成部分,文章介绍了用busybox构建嵌入式Linux的根文件系统方法,包括busybox的配置和安装,以及在嵌入式Linux环境下,构建文件系统所必需的其他一些脚本文件的编写方法。通过该种方法组建文件系统非常简单而且配置也很灵活。 相似文献
17.
FastDu is a file system service that tracks file system changes by intercepting file system calls to maintain directory summaries, which play important roles in both storage administration and improvement of user experiences for some applications. In most circumstances, directory summaries are independently harvested by applications via traversing the file system hierarchy and calling stat () on every file in each directory. For large file systems, this brute-force traverse-based approach can take many hours to complete, even if only a small percentage of the files have changed. This paper describes FastDu, which uses a pre-built database to store harvested directory summaries, and tracks the file system changes by intercepting file system calls, so that new harvesting is restricted to the small subset of directories that contain modified files. Tests using FastDu show that this approach reduces the time needed to get a directory summary by one or two orders of magnitude with almost negligible penalty to application-aware file system performance. 相似文献
18.
针对目前网络存储体系结构中存在的各个磁盘驱动器不能"主动"地进行自主工作和缺乏自动负载平衡机制的问题,文中给出了智能网络磁盘(IND)系统结构的概念,提出了一种新型的智能网络磁盘存储文件系统(INDFS)的设计方案,并详细描述了INDFS的组成结构、文件路由表、系统命令层次结构、基本操作算法和文件系统命名空间等关键技术.最后对INDFS进行了性能测试分析,发现客户端可以对IND存储系统进行文件级访问,说明INDFS是一种使用方便、扩展性好的智能网络磁盘文件系统. 相似文献
19.
分布式网络文件系统能够将文件资源有效整合,实现文件资源的存储与传输。首先对文件系统进行了需求分析,接着重点探讨了分布式网络文件系统的设计与实现,涉及到:文件存储与传输的设计、用户空间服务的实现以及文件视图终端的实现。 相似文献
20.
文件放置问题一直是分布式存储领域的研究热点。分布式文件存储系统HDFS随机选择节点完成文件放置,存在访问负载分布不均衡的缺点。研究人员提出大量基于文件访问热度信息的放置算法;但是,文件的访问热度信息是动态变化的,难以准确预测。提出一种不依赖访问热度信息的分布式文件放置算法;该算法仅使用文件的创建时间信息,利用文件已创建时间与访问热度之间的相关性,首先将时间进行区间划分,然后统计出各节点在不同时间区间内所创建文件的数据量,放置过程中保持同一时间区间的数据量在不同节点间大致相同。实验结果表明,该算法不仅可以使各节点的存储负载达到均衡,还能够提升访问负载的均衡,消除因文件访问热度不均而导致的性能瓶颈。 相似文献