结合节点计算能力的MapReduce负载均衡方法

MapReduce是大数据计算领域广泛使用的编程模型,默认的Hash分区方法易导致数据倾斜,使各计算节点负载不均衡,影响了整体计算性能并造成了大量集群资源浪费。针对这一问题,提出一种结合节点计算能力的分区方法。通过运行一个独立的抽样作业,利用Reservoir抽样算法抽取待处理数据并统计样本里关键字的位置和频次;根据关键字的统计数据制定分区策略,使各分区负载与节点计算能力达到平衡,同时优化网络开销;以全量数据为输入运行计算作业,并采用已制定的分区策略对中间数据进行分区,得出计算作业的运行结果。实验结果表明,方法使各节点负载更加均衡,可明显提升计算作业执行效率。     

基于时间反转镜的自适应聚焦仿真研究

为在水下信号检测中消除水声信道的影响,实现最佳聚焦,在分析时间反转自适应聚焦原理的基础上,研究了时间反转镜(TRM)的自适应聚焦现象.在典型的水文条件下进行了TRM自适应聚焦的仿真研究.结果表明:在随机媒质中,TRM利用水声信道的相干多途特性获得聚焦增益,聚焦效果明显优于均匀媒质;聚焦信号的峰值比均匀媒质高23%.     

太湖流域工业点源排污许可管理技术集成与应用研究

梳理了国内外排污许可制度的发展历程,分析总结了国家水体污染控制与治理科技重大专项(简称"水专项")实施初期太湖流域排污许可管理体系存在的问题和科技需求.根据对"十一五"、"十二五"水专项太湖技术成果的梳理总结,从控制单元划分、控制单元污染负荷核定、控制单元水环境容量核算、重点行业水污染控制与治理技术评估、排污许可量分配...     

关于监狱劳务产业管理提升的思考

近几年来,东南沿海省份劳务加工业在监狱经济发展中异军突起,发展迅猛,从制造业向劳务加工转移,监狱企业劳务化,大有席卷全国监狱系统,成为监狱企业未来发展方向的趋势。对于劳务加工产业监狱,如何规范劳务产业的管理和运行,促进监狱经济健康持续发展,已成为摆在监狱警察面前的一项重要任务。本人结合多年来在监狱劳务加工一线生产管理经验认为,监狱劳务产业管理提升需从质量品牌管理、规范基础管理及以人为本三个方面长期全面发展,以此夯实经济发展的管理基础。     

让教师在和谐管理中成长

在教育国际化的今天，如何应对时代的变革，迎接国际形势的挑战，是新世纪中校长们面临的一个重大的课题，而学校又关系着千家万户的利益，担负着兴国安邦之大业。教育就是要使人的各种因素真正得到和谐发展，从而实现个体与社会的和谐。作为一个教育管理者，就是要把这种教育的和谐，作为学校管理理念，让教师在和谐管理中发展。     

混合结构房屋温差裂缝的另一种形态——黄沙港养殖场平房外墙裂缝

本文以黄沙港养殖场平房外墙裂缝为例对混合结构房屋温差裂缝进行分析     

近期新疆工业废水产生量预测

新疆经济快速发展，同时工业废水及污染物产生量也迅速增加，本文采用综合指数法预测到2020年工业废水及污染物产生量，供有关部门决策提供参考，为新疆的可持续发展做出积极的贡献。     

浅析火力发电厂凝汽器铜管的腐蚀控制

凝汽器在运行中的腐蚀泄漏不仅是影响水汽品质的主要因素之一，而且它也是影响火力发电安全经济运行的一个重要因素。本文结合笔者工作经验，从多角度系统的探讨了火力发电厂凝汽器防腐蚀的措施。     

如何提高工程GPS网精度浅析

本文结合新建京石客专石家庄站站房工程西站房基坑监控量测工程基坑监测项目阐述了在建立小型工程GPS网时如何采用行之有效的方法提高其精度,保证首级控制网精度。