文档名:基于节点实时负载的开源大数据负载均衡优化算法
摘要:为保证网络访问稳定,减少资源浪费,提出了基于节点实时负载的开源大数据负载均衡优化算法.建立开源大数据节点计算能力模型,按照节点负载大小及时反馈和调整,根据该区域服务器收到的请求数量预测下一步行动,利用指数平滑方法算出每秒服务器请求数量的预测值,完善一阶指数平滑法滞后偏差问题,计算服务器综合负载.在节点上添加一个负载代理和监控器,用于平衡组块的数目和分片节点负载,并将不能删除的分片和组块放人最小单元候选名单,实现负载均衡优化.通过实验证明,所提算法能提高网络资源利用率和负载均衡性,在访问中保证网络更加稳定安全.
Abstract:Toensurestablenetworkaccessandreduceresourcewaste,anopen-sourcebigdataloadbalancingoptimizationalgorithmbasedonreal-timenodeloadisproposed.Anopen-sourcebigdatanodecomputingcapabilitymodelisestablished,timelyfeedbackandadjustmentsbasedonthesizeofnodeloadareprovided,thenextactionbasedonthenumberofrequestsreceivedbyserversintheregionispredicted,exponentialsmoothingmethodisusedtocalculatethepredictednumberofserverrequestspersecond,thelagdeviationproblemoffirst-orderexponentialsmoothingmethodisimproved,andthecomprehensiveserverloadiscalculated.Addaloadagentandloadmonitoronthenodetobalancethenumberofblocksandtheloadofshardednodes,andplaceundeletedshardsandblocksintotheminimumunitcandidatelisttoachieveloadbalancingoptimization.Throughexperiments,ithasbeenproventhattheproposedalgorithmcanimprovenetworkresourceutilizationandloadbalancing,ensuringamorestableandsecurenetworkduringaccess.
作者:滕飞 刘洋 曹芙Author:TENGFei LIUYang CAOFu
作者单位:天津市科学技术信息研究所信息技术中心,天津300038
刊名:吉林大学学报(信息科学版) ISTIC
Journal:JournalofJilinUniversity(InformationScienceEdition)
年,卷(期):2023, 41(6)
分类号:TP393
关键词:节点实时负载 开源大数据 负载均衡优化 区域服务器 节点性能
Keywords:nodereal-timeload opensourcebigdata loadbalancingoptimization regionalserver nodeperformance
机标分类号:TP393TN925.93F270.7
在线出版日期:2024年1月24日
基金项目:天津市科技政务数据安全保护与应用策略研究科技发展战略研究计划基金资助项目基于节点实时负载的开源大数据负载均衡优化算法[
期刊论文] 吉林大学学报(信息科学版)--2023, 41(6)滕飞 刘洋 曹芙为保证网络访问稳定,减少资源浪费,提出了基于节点实时负载的开源大数据负载均衡优化算法.建立开源大数据节点计算能力模型,按照节点负载大小及时反馈和调整,根据该区域服务器收到的请求数量预测下一步行动,利用指数平滑...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
基于节点实时负载的开源大数据负载均衡优化算法 Load Balancing Optimization of Open Source Big Data Based on Node Real-Time Load
基于节点实时负载的开源大数据负载均衡优化算法.pdf
- 文件大小:
- 5.64 MB
- 下载次数:
- 60
-
高速下载
|