Nutch中网页更新预测研究与优化

Nutch的网页更新预测方法采用的是邻比法,相关更新参数需要人为设定,不能自适应调整,无法应对海量网页更新的差异性.为解决这个问题,提出动态选择策略对Nutch的网页更新预测方法进行改进.该策略在网页更新历史数据不足时,通过基于MapReduce的DBSCAN聚类算法来减少爬虫系统抓取网页数量,将样本网页的更新周期作为所属类其他网页的更新周期;在网页更新历史数据较多时,通过对网页更新历史数据进行泊松过程建模,较准确地预测每个网页的更新周期.最后在Hadoop分布式平台下对改进该策略测试.实验结果表明,优化后的网页更新预测方法表现更优.     

关注建筑工程质量检测工作中的标准规范的修订更新

最近几年涉及的建筑工程质量检测标准规范更新比较普遍,但是,建筑工程质量检测单位采用的步伐却跟不上标准规范的更新,这一点应引起相关检测单位的关注,适时采用新的标准规范才能适应建筑市场的需求。     

谁来填补XP的退场

正尽管是数年前早已宣布的事情,但随着4月8日的临近,Windows XP将被微软停止官方支持的消息还是引起了社会公众的关注。除了Windows XP用户的担心之外,甚至还出现了继续使用"10分钟内就会感染病毒""银行ATM机被劫持"等耸人听闻的说法。这些虽说是传言,但也反映了公众对XP"退场"     

上海方言与马凡陀的山歌

在新诗民族化与大众化潮流中,马凡陀的山歌被誉为新诗创作的一个新方向。作为被左翼批评界认可的新诗样板,它可贵之处是一方面普遍调用丰富的吴语资源,另一方面则始终以底层市民的民生为重。新诗中的山歌道路仍是敞开的,其口语化、方言化、大众化的运行轨道,以及针贬现实、为民代言的品性,对当下诗坛仍然有借鉴启示意义。     

浅谈郁闭度指标在森林经营中的应用

郁闭度是确定森林经营措施的量化指标,也是衡量森林经营水平的主要技术参数,本文简单介绍了郁闭度指标在森林经营中的应用.     

高校文化全面发展与学报建设之间的落叶效应

在时代变迁的今天，科教文已经在高校之中实现了广泛而全面的有机结合。这种结合从本质上讲，是将单纯的知识学术教育向素养素质教育拓展延伸的过程。学报在高校中临现出的角色已经渐渐得到了非学术研究人群的重视。伴随着社会教育重心趋向的变化，高校的文化发展重点也随之相应的改变。学报作为高校学术的一个重要集合体，依然属于高校文化的关键一环。而学报和高校二者的发展之间也同样存在着一种互通、互辅、互补的利弊关系。这样的关系为两者固有的包容与被包客式发展带来一种落叶效应。     

QGrid:一种空间移动对象并行索引结构

为提高空间移动对象数据更新效率和查询准确率,提出了一种空间移动对象并行索引结构.利用主索引和辅助索引支持对空间对象进行基于范围的查询和基于对象标识的查询,还通过查询索引将更新操作和可能受其影响的查询操作相连接,在满足并行操作时间片语义的同时,避免了传统方法进行范围查询时对查询范围内相关对象及相关索引结构全部进行锁定的需求.实验结果表明:高负载环境下,该索引结构不但能保证查询准确率,其处理能力也明显优于传统索引结构.该索引通过提高系统并行度,使同一范围内的更新和查询操作可以并行执行,提升了系统整体运行效率.     

基于数据仓库的库存分析应用架构

在数据仓库项目实际开发时,由于要分析的历史性数据量非常庞大,如何有效提高系统性能是关注的焦点,其中着重要解决数据增量更新与预计算之间的矛盾,此外,一般数据分析系统只能对历史性数据分析和预测,而在实际需求中可能需要对实时数据进行分析。本文以广东某集团公司信息系统建设为研究背景,以钢材库存分析为主题,提出一种高性能数据仓库架构,有效解决以上矛盾,具有较好应用价值。     

WNXD数据库存储策略的研究和实现

针对NativeXML数据存储性能不高、支持查询和更新效率低等不足,提出一种新的半结构化信息存储模型WNXD。引入动态倒排技术和数据映像机制,将记录和分页的存储模式相结合,建立3种结构化索引,用不同方法解决了结构化和动态增长的矛盾。创建了实用的存储模型,提供了从整体到局部,从元素、属性到具体值的全面覆盖访问策略,底层的数据存取,尤其是内容混杂的各类形式异构数据的有效性和完整性存取,得到了最大程度保证,查询次数减小了I/O,提高了系统处理性能。     

基于STR非平衡树结构的混合型组密钥管理方案

STR组密钥管理协议因采用非平衡二叉树结构使得密钥更新过程简化,它可以有效降低组密钥管理的通信开销,但这是以高额的计算开销为代价的.提出一种基于STR非平衡密钥树结构的混合分层组密钥管理方案,在继承STR协议低通信开销的特点的同时,该方案显著降低了组密钥管理的计算开销并提高了密钥更新效率.