首页 | 本学科首页   官方微博 | 高级检索  
     

高性能文本索引系统的设计与实现
作者姓名:路炜  张宇  周美孜  刘燕兵  王春露
作者单位:中国科学院信息工程研究所;河北师范大学附属民族学院;北京邮电大学计算机学院;中国人民大学信息学院;
基金项目:国家高技术研究发展计划(863计划)资助项目(2011AA010703);国家自然科学基金资助项目(61202477);中国科学院战略性先导科技专项资助项目(XD06030602);河北省教育厅资助科研项目(QN20131164)
摘    要:针对传统文本索引技术空间消耗大、分词不准确等问题,设计并实现了高性能文本索引系统。该系统采用压缩的全文自索引算法,节省了空间开销,避免了自然语言分词方法的影响,配合通配符搜索算法扩展了模糊搜索的功能,在众核CPU高性能处理器上可实现多线程并行处理,提高了处理速度,整个系统的实现是基于Web方式的,可以跨平台运行。实验结果表明,该系统将文本索引的空间消耗降为原文本的50%左右,具有较高的实用价值。

关 键 词:计算机应用  文本索引  全文索引  自索引  通配符搜索
本文献已被 CNKI 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号