首页 | 本学科首页   官方微博 | 高级检索  
     

THCAS:内容存储系统及其性能优化
引用本文:宋铭,刘川意,张悠慧,汪东升. THCAS:内容存储系统及其性能优化[J]. 清华大学学报(自然科学版), 2009, 0(7): 1032-1036
作者姓名:宋铭  刘川意  张悠慧  汪东升
作者单位:清华大学计算机科学与技术系,北京,100084;清华大学计算机科学与技术系,北京,100084;清华大学微处理器与片上系统技术研究中心,北京,100084
基金项目:国家“八六三”高技术项目(2006AA01Z111);;国家“九七三”重点基础研究计划项目(2007CB310900)
摘    要:为实现开源的基于内容存储系统及性能优化,以应对固定内容数据存储的急速增长而带来的对这种存储系统结构的广泛需求,该文设计并实现了清华大学的基于内容存储(THCAS)系统,并对系统性能进行了分析和评价,在此基础上,提出了多线程Hash和存储流水线2种基于内容存储的优化方法。在正常操作系统I/O Buffer和去掉异步I/O 2种情况下,将优化后的系统与原系统的写数据吞吐率和CPU使用率进行测试比较,优化后系统在2种情况下均提升了原系统的写数据性能,多线程Hash提高了150%,而存储流水线提高了25%。

关 键 词:基于内容存储  Hash  存储流水线

THCAS:Content-aware storage system and performance optimization
SONG Ming,LIU Chuanyi,ZHANG Youhui,,WANG Dongsheng. THCAS:Content-aware storage system and performance optimization[J]. Journal of Tsinghua University(Science and Technology), 2009, 0(7): 1032-1036
Authors:SONG Ming  LIU Chuanyi  ZHANG Youhui    WANG Dongsheng
Affiliation:1.Department of Computer Science and Technology;Tsinghua University;Beijing 100084;China;2.Microprocessor and SOC technology R&D Center;China
Abstract:The rapid increase in the amount of fixed content data is creating more needs for content-aware storage which should be designed based on an open-source implementation.This paper describes a Tsinghua University designed content-aware storage system,THCAS,that uses multi-thread Hashes and a storage pipeline to optimize the system performance.The file-writing throughput and the CPU utilization for an optimized system with and without an I/O buffer are compared with the original system. Tests demonstrate that ...
Keywords:content-aware storage  Hash  storage pipeline  
本文献已被 CNKI 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号