首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 31 毫秒
1.
不断增大的数据规模给Hadoop集群处理能力带来了挑战,而合理的作业调度方式与策略能够提高集群的运行效率。通过对Hadoop MapReduce的任务调度机制进行研究,设计了节点负载能力与动态优先级的计算方式,提出了一种动态优先级的负载均衡调度算法,并搭建小型Hadoop平台进行了实验分析。结果表明,该算法在集群负载均衡方面的效果要优于传统调度算法。  相似文献   

2.
提出了一种在异构环境下负载均衡调度策略,来解决各节点执行引擎负载不平衡的问题.新的调度策略与轮询算法相比,更加能够保证各执行引擎之间负载保持平衡.此外,当多引擎之间任务调度出现不平衡的状态时,该调度算法能动态地调整各节点引擎之间的负载,使之达到平衡状态.  相似文献   

3.
提出一种新的混合遗传算法。该算法在基于传统遗传算法的基础上采用了分组和负载均衡策略。仿真实验结果表明,这种调度算法有效地实现了资源的负载均衡。它相对于传统遗传算法,收敛速度更快,能产生更好的调度结果。  相似文献   

4.
混部负载是当前业界提高数据资源利用率的重要手段,其原理是将在线负载和离线负载共同放置于同一数据中心、共享资源,在保证在线负载服务质量的前提下,将空闲资源分配给离线负载。当前针对混部负载中离线负载的资源调度采用传统的公平或者短作业优先等策略,并未考虑在线负载资源需求波动对离线负载运行的影响。为了达到进一步提升资源利用率和作业吞吐率的目的,提出基于负载完成时间预判的模拟退火资源分配策略。结果表明,该策略比公平策略和短作业优先策略在平均资源利用率上分别提高了7.8%和15.5%,在吞吐率上分别提高了38.2%和29.1%。  相似文献   

5.
随着云计算的大规模普及,负载均衡已经以用户服务的形式出现在云平台上,但传统的负载均衡算法不能利用云平台动态管理计算资源的优势。基于预测的动态负载均衡算法根据当前云平台应用负载特征使用BP神经网络对负载进行实时预测,然后根据预测的负载变化趋势提出负载均衡器后端实例调整策略。实验结果表明,基于预测的动态负载均衡算法能够在满足用户SLA的前提下,促进资源节约。  相似文献   

6.
针对现有异构任务调度算法存在负载不均衡、数据本地性问题,提出基于树结构的负载树任务调度算法。该算法通过量化节点计算能力构造节点集最小堆,利用堆排序生成计算能力逆序树,并依据节点负载率将逆序树调整为左节点优先的负载树,为任务计算包含完成时间、负载率、延迟因子的决策值,最终完成任务与树节点的匹配。实验结果表明,取不同负载率与延迟权值比时,该算法的任务执行效率均能获得一定程度提高。该算法可利用树结构的调度优势,在获得更高集群负载均衡度时,有效缩短作业集执行时间。  相似文献   

7.
为了达到最佳的负载均衡效果,将负载分给多个服务器分担,负载控制器需要根据网络流量状态和服务器资源来分配负载,这就需要应用优化的负载分配策略,达到平均分配负载的目的,本文讨论了特定流量条件下网关数目的计算模型,分布式路由策略实现负载分配的策略的方法,并研究了基于网络地址转换在Free BSD unix环境下实现负载均衡网关的方法。  相似文献   

8.
随着教育信息化的深入开展,在网络上开展的教育教学应用服务不断增多,对原有的网络数据中心提出了新的要求。本文介绍我单位在新形势下,利用多层次负载均衡策略对江苏教育资源网进行改造的实践与经验。  相似文献   

9.
随着教育信息化的深入开展,在网络上开展的教育教学应用服务不断增多,对原有的网络数据中心提出了新的要求。本文介绍我单位在新形势下,利用多层次负载均衡策略对江苏教育资源网进行改造的实践与经验。  相似文献   

10.
负载均衡是实现多台服务器协同工作和并行处理的手段,可以极大地提高服务器的性能,充分利用网络资源.在常用负载均衡调度算法的基础上,提出了根据服务器综合负载状态进行调度的设计思想,并对调度算法进行了性能分析.  相似文献   

11.
李冬 《华章》2010,(24)
随着Internet的快速发展,服务器端的访问量也在急剧增长,这就对服务器的性能提出了更高的要求.而服务器集群技术则是解决这个问题的常用方法.本文在借鉴了轮转调度和最小负载优先调度的基础上,提出了综合负载动态分组的负载均衡算法.该算法系统开销小,负载均衡效果显著.配以阀值设置和强制刷新后,能使服务器集群系统长期处于负载均衡,服务高效的状态.  相似文献   

12.
面向用户的通用云计算平台成本效用研究在通过研究云计算平台的成本和效用的可控构成元素,从硬件的Zhw资源调度和电力的Zpower的角度,采用由用户根据任务粒度从质量、成本设置云及云联盟资源方面权重,由云均衡构件发出蚂蚁群搜索云内及云间计算资源,蚁群根据路径深度、可用资源数量及质量,预设权重调整资源信息并将信息发回蚁巢,监视各个计算资源动态变化及时均衡负载,以降低云运营商成本和用户费用,提高云及云联盟的成本效用。将该优化蚁群算法应用在自主研发的云计算平台上,实验结果验证了该负载机制的可行性和优越性。  相似文献   

13.
在拥有不同计算能力的异构机群中,并行计算任务调度问题是一个NP-完全问题,现有的任务分配处理方法中.对机群任务分配与监控处理以及对机群节点计算能力和负载方面考虑较少,在实际计算中可能严重影响机群性能,降低计算效率,而在MPT中引入动态负载均衡的办法能够提高任务分配质量和计算节点工作效率,实验结果表明动态负载均衡模型能够很好地解决任务调度的问题。  相似文献   

14.
由于Kubernetes集群默认资源调度方法是静态的,随着Kubernetes中工作节点的不断运行,会出现集群负载不均衡问题.针对上述问题,设计基于Pod迁移的Kubernetes集群动态调度机制.该机制首先通过监控模块采集服务器和Pod应用资源使用情况,使用AHP对其进行负载评估;然后对滑动窗口进行定义,筛选高负载工...  相似文献   

15.
《实验技术与管理》2016,(4):235-238
清华大学仪器设备共享平台在学校提供的负载均衡硬件架构F5以及开源负载均衡软件架构shiro+ehcache+quartz的session同步、缓存同步、定时任务分布式调度管理下,综合运用各种数据库优化技术、服务端优化技术、前端优化技术提升了系统访问速度。实践证明,这套方案是有效的。  相似文献   

16.
负载均衡算法是多任务实时集群系统的一个关键技术.在分析了常见的均衡调度算法后,LOCEP算法通过对URL进行词典排序,按内容等分,依访问流量排序及分段互补等一系列方法将Web负载尽可能均匀地分布到多个后端服务器中.该算法比现有的方法具有更好的负载均衡能力.  相似文献   

17.
冯小欧 《河南电大》2011,(1):110-112
如何优化地利用网络带宽资源,是流量负载分担的关注重点。BGP(Border%Gateway%Protocol,边界网关协议)选择单条最优路径的这一特征往往会出现流量负载不均衡的流量模型,BGP流量负载均衡可从两个角度出发解决这个问题:通过BGP强大的策略控制流量的负载均衡,通过多路径选路实现负载分担。本文主要从这两个角度来展开分析BGP在流量负载分担方面的技术应用。  相似文献   

18.
如何优化地利用网络带宽资源,是流量负载分担的关注重点。BGP(Border%Gateway%Protocol,边界网关协议)选择单条最优路径的这一特征往往会出现流量负载不均衡的流量模型,BGP流量负载均衡可从两个角度出发解决这个问题:通过BGP强大的策略控制流量的负载均衡,通过多路径选路实现负载分担。本文主要从这两个角度来展开分析BGP在流量负载分担方面的技术应用。  相似文献   

19.
数据布局策略作为数据管理的重要方面,对研究多数据中心环境下的数据布局有着重要意义。针对多数据中心的数据检索、更新和全局负载均衡3个目标对数据布局方案进行求解和优化。提出一种改进的多目标遗传算法,该算法以降低多数据中心的数据检索和更新代价作为优化目标,并结合负载均衡作为约束条件。实验显示该算法不仅在数据布局方面有良好性能,而且能够获得较高的资源利用率。  相似文献   

20.
提出了负载均衡算法的组成,分析比较了几种算法各自的优点和短处。通过调度思想设计实现了一种基于Linux操作系统的服务器集群负载均衡系统。通过实际的测试数据证明了这种负载均衡模式的有效性。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号