共查询到20条相似文献，搜索用时 15 毫秒
1.
电子通信信息是当代社会运行的重要信息组成之一,提高电子通信信息存储能力对于各行业高效率处理事务意义重大。基于Hadoop集群环境设计了单节点双层Hadoop结构,分担主节点存储信息的压力;构建MapReduce信息并行计算模型分担海量存储任务,基于动态优先级负载均衡调度算法均衡存储节点的负载量,避免个别或者少数节点负担过重,延长Hadoop存储系统节点的使用寿命。测试结果显示,该方法有效均衡了海量信息存储时间,存储大规模电子通信数据的耗时较少。 相似文献
2.
随着Internet的快速发展,服务器端的访问量也在急剧增长,这就对服务器的性能提出了更高的要求.而服务器集群技术则是解决这个问题的常用方法.本文在借鉴了轮转调度和最小负载优先调度的基础上,提出了综合负载动态分组的负载均衡算法.该算法系统开销小,负载均衡效果显著.配以阀值设置和强制刷新后,能使服务器集群系统长期处于负载均衡,服务高效的状态. 相似文献
3.
何颖 《贵州教育学院学报》2013,(9):18-21
爆炸式增长的数据要求高效率地使用计算资源,Hadoop是解决大数据处理的一个方向,不过Ha-doop平台还处于发展中,很多地方还有待完善。对Hadoop自带的三种调度器的优缺点进行分析,针对希望区分和动态改变作业服务质量的情况提出了动态优先调度算法。实验结果表明动态优先调度算法能够在作业的运行中动态改变作业的优先级,在效率上也有所提升。 相似文献
4.
5.
集群系统下的动态负载均衡探究 总被引：1，自引：0，他引：1
曹英存 《和田师范专科学校学报》2006,26(2):158-159
本文主要讨论了网络负载均衡集群系统下,当前的均衡算法和动态负载均衡机制.结合加权轮询算法讨论了集群的动态负载反馈机制,给出了一个基本的动态均衡模型并加以分析. 相似文献
6.
7.
负载均衡算法是多任务实时集群系统的一个关键技术．在分析了常见的均衡调度算法后,LOCEP算法通过对URL进行词典排序,按内容等分,依访问流量排序及分段互补等一系列方法将Web负载尽可能均匀地分布到多个后端服务器中．该算法比现有的方法具有更好的负载均衡能力． 相似文献
8.
提出了负载均衡算法的组成,分析比较了几种算法各自的优点和短处。通过调度思想设计实现了一种基于Linux操作系统的服务器集群负载均衡系统。通过实际的测试数据证明了这种负载均衡模式的有效性。 相似文献
9.
为优化整个服务器集群负载,提出一种基于预测阈值的动态权值负载均衡算法。动态评估服务器性能,根据评估结果计算服务器权值,并引入反映集群负载平衡程度和状态的阈值,以避免因频繁修改权值造成服务器抖动;使用 Holt-Winters 对访问量进行预测,并通过结果预测阈值,实现复杂负载环境下的负载均衡,达到最优负载均衡。实验结果表明,预测阈值的动态权值负载均衡算法在低并发以及高并发时都有很好的性能表现,能够提升系统的最大吞吐量,减少响应时间,提高整个集群利用率。 相似文献
10.
11.
网格任务调度算法是一个复杂的算法,并且被认为是一个NP难问题,在分析该算法的基础上,指出该算法的缺点：负载不均衡,算法的经济效益比较高以及不能兼顾到任务的紧迫程度,因此,从经济效益和优先级角度改进该算法,通过建立数学模型的方法,证明了改进后的算法能够在一定程度上均衡负载,并且也降低了算法调度过程中的费用问题,还满足了优先级高的任务的需求,从总体上来说,该算法提高了算法的效率,并提高了网络的整体性能。 相似文献
12.
13.
随着各大数据中心的建立,数据中心达到成千上万台服务器的规模。计算节点之间存在差异性,传统调度算法很难满足计算中心资源调度,主机之间难免出现负载不均衡,直接影响了云平台提供服务的能力,造成资源浪费。根据数据中心的实际情况,基于现有环境下各种主流资源调度策略,针对资源分配与主机运行时动态调度两方面提出完整的资源调度策略方案,提高数据中心计算能力,避免不必要的资源浪费,显著改善数据中心服务质量,实现各种资源负载均衡。 相似文献
14.
鞠光明 《职教通讯(江苏技术师范学院学报)》2007,13(2)
负载均衡是实现多台服务器协同工作和并行处理的手段,可以极大地提高服务器的性能,充分利用网络资源.在常用负载均衡调度算法的基础上,提出了根据服务器综合负载状态进行调度的设计思想,并对调度算法进行了性能分析. 相似文献
15.
针对现有调度算法在调度时未考虑QoS等级的影响，导致节点上不同优先等级的Pod数量不均，最终造成需要终止低优先级Pod时只有高优先级Pod存在的问题，深入分析评估了Kubernetes调度器的调度算法，利用分布式系统设计思想和技术（如MapReduce思想、Etcd存储等），设计了BalancedQosPriority算法。该算法使各QoS等级的Pod在集群中尽可能分散，促使节点上各个QoS等级的Pod尽可能梯度存在，以避免无低优先级Pod可终止的窘境，从而提高集群在突发负载时的可靠性。对算法进行性能评估，结果表明，BalancedQosPriority算法在解决上述问题的同时未造成明显的性能损失。 相似文献
16.
提出了一种在异构环境下负载均衡调度策略,来解决各节点执行引擎负载不平衡的问题.新的调度策略与轮询算法相比,更加能够保证各执行引擎之间负载保持平衡.此外,当多引擎之间任务调度出现不平衡的状态时,该调度算法能动态地调整各节点引擎之间的负载,使之达到平衡状态. 相似文献
17.
18.
为解决FlexRay线控转向系统中常见的死锁问题,采用优先级置顶算法进行多任务动态调度。首先,分析FlexRay线控转向系统多任务动态调度过程中的死锁问题|然后深入研究优先级置顶算法防止死锁问题的原理|最后搭建双通道多冗余的FlexRay线控转向系统,进行重要系统参数配置。运行结果表明,未使用优先级置顶算法的FlexRay线控转向系统出现了死锁现象,使用优先级置顶算法进行动态任务调度之后,系统可正常运行,证明了算法有效性。 相似文献
19.
Hadoop是目前应用最广泛的分布式框架,作业调度是其重要环节,它直接关系到集群的性能与资源利用率。研究了作业调度流程、作业调度策略模式,对Hadoop自带的3种调度器的设计要点与配置方法进行了探讨。 相似文献
20.
负载均衡是实现集群中多台服务器协同工作的重要方法.但现有办法较多关注的是如何更好的实现均衡的问题,而没有注意到当集群中服务器变化时,会发生缓存存储发生变化的问题,给服务器造成很大的负担.对负载均衡算法进行优化,提出一种一致性哈希算法,实现负载均衡和提高集群整体性能的目的. 相似文献