基于节点实时负载的开源大数据负载均衡优化算法

为保证网络访问稳定，减少资源浪费，提出了基于节点实时负载的开源大数据负载均衡优化算法。建立开源大数据节点计算能力模型，按照节点负载大小及时反馈和调整，根据该区域服务器收到的请求数量预测下一步行动，利用指数平滑方法算出每秒服务器请求数量的预测值，完善一阶指数平滑法滞后偏差问题，计算服务器综合负载。在节点上添加一个负载代理和监控器，用于平衡组块的数目和分片节点负载，并将不能删除的分片和组块放入最小单元候选名单，实现负载均衡优化。通过实验证明，所提算法能提高网络资源利用率和负载均衡性，在访问中保证网络更加稳定安全。