首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 15 毫秒
1.
电子通信信息是当代社会运行的重要信息组成之一,提高电子通信信息存储能力对于各行业高效率处理事务意义重大。基于Hadoop集群环境设计了单节点双层Hadoop结构,分担主节点存储信息的压力;构建MapReduce信息并行计算模型分担海量存储任务,基于动态优先级负载均衡调度算法均衡存储节点的负载量,避免个别或者少数节点负担过重,延长Hadoop存储系统节点的使用寿命。测试结果显示,该方法有效均衡了海量信息存储时间,存储大规模电子通信数据的耗时较少。  相似文献   

2.
SSABC:一种基于能力的超级节点选择算法   总被引:1,自引:0,他引:1  
结合P2P和网格的特点,提出了从P2P与网格混合的分布式网络中选择超级节点的算法SSABC.算法使用网格信息监控系统(MDS)获取节点资源的动态属性信息,如可用带宽、空闲CPU、可用内存、当前连接数及在线时间等,根据以上属性计算节点的能力.当有新节点加入且超级节点均饱和时,从新节点或已加入节点中选择能力最高的作为新的超级节点.通过理论分析和仿真实验表明,基于能力选择的超级节点与随机选择的超级节点相比,提高了资源的查询成功率,缩短了平均查询跳数,并能够在超级节点饱和时均衡网络负载.当网络中节点数发生变化时,以上结论依然成立,说明了算法的可行性和稳定性.  相似文献   

3.
随着Internet的迅猛发展,Web服务器集群中的负载均衡算法备受关注。为优化Web集群负载均衡能力,提出了基于一致性哈希的负载均衡算法(DCH)。首先定义了集群中服务器各项性能指标的量化值,根据量化值计算初始虚拟节点集合,优化了由服务器性能差异导致的负载分配不均|然后细化周期内负载定义,根据量化的服务器性能值与负载值动态计算虚拟节点集合,使集群负载更均衡。实验比较分析表明,该算法能有效降低集群系统的平均响应时间,提高系统吞吐量,从整体上提升集群系统性能。  相似文献   

4.
不断增大的数据规模给Hadoop集群处理能力带来了挑战,而合理的作业调度方式与策略能够提高集群的运行效率。通过对Hadoop MapReduce的任务调度机制进行研究,设计了节点负载能力与动态优先级的计算方式,提出了一种动态优先级的负载均衡调度算法,并搭建小型Hadoop平台进行了实验分析。结果表明,该算法在集群负载均衡方面的效果要优于传统调度算法。  相似文献   

5.
针对现有异构任务调度算法存在负载不均衡、数据本地性问题,提出基于树结构的负载树任务调度算法。该算法通过量化节点计算能力构造节点集最小堆,利用堆排序生成计算能力逆序树,并依据节点负载率将逆序树调整为左节点优先的负载树,为任务计算包含完成时间、负载率、延迟因子的决策值,最终完成任务与树节点的匹配。实验结果表明,取不同负载率与延迟权值比时,该算法的任务执行效率均能获得一定程度提高。该算法可利用树结构的调度优势,在获得更高集群负载均衡度时,有效缩短作业集执行时间。  相似文献   

6.
邵芳  王勇 《教育技术导刊》2019,18(1):104-107
HBase原有负载均衡算法策略是保证每个Region Server的Region数目相同。但每个Region的访问并不均等,可能造成负载不均衡情况,产生热点数据,影响请求响应效率。部分Region会成为热点,导致一些Region Server负载过重。为提高HBase数据库整体性能,将数据热度因素考虑在内,使用预测方法设计HBase负载均衡算法,把预测数据的热度作为Region Server负载。实验表明,优化后的负载均衡算法可在一定程度上提高HBase数据库性能。  相似文献   

7.
徐焱 《教育技术导刊》2016,15(11):208-209
网络大数据是对真实社会的网络映射,蕴含着丰富的信息、知识和智慧。深度挖掘网络大数据的潜在价值给人们带来了前所未有的机遇,但是同时也给现有存储能力、计算能力等带来了巨大挑战。分析了网络大数据的特点,总结了网络大数据研究的重要意义,通过实例展示了网络大数据在现实中的成功应用,并指出了网络大数据在感知与表示、存储与管理、数据挖掘和社会计算等方面所面临的挑战。  相似文献   

8.
有限的能量资源是无线传感器网络(WSNs)广泛应用的主要限制之一。为了最大化整个网络的生存时间,需要优化无线传感器网络中节点的能量消耗。协议使用的无线传感器网络模型包含两种节点:普通节点和能量较高的高级节点。算法中综合考虑了节点当前剩余能量、网络中平均能量、簇头到基站的距离和节点类型等因素,设计了一种适合于异构无线传感器网络路由协议(HCEEC)。在该协议中,基站在对应的区域中选择能量更大、更加靠近基站的节点作为簇头来搜集本区域内的信息,簇头节点对本簇内的信息进行融合之后发送至基站节点。实验表明,该算法能够更好地综合网络中能量的负载、提高网络吞吐量和延长网络生存时间。  相似文献   

9.
为了提高数据分发效率,在发布/订阅模式下提出了一个面向负载均衡的数据分发方法 LBDD.在LBDD方法中,订阅方既接收数据,又承担数据转发工作.采用M D5算法,在发布方和订阅方间建立一棵分发树,其中发布方是根节点.给出了桶建立、目标选择以及路径修正方法,并进一步证明了数据单向分发性质.LBDD方法可保证分发树中任意一个节点的平均出度为2.针对数据分发延迟、数据分发速率和负载分布进行了实验.实验数据表明,LBDD方法能够有效地均衡发布方和订阅方的负载,分发效率高于点到点分发方式.  相似文献   

10.
采用基于反馈机制的动态负载均衡,能动态考虑不同服务节点上资源的使用状态,不断调整负载比例,避免节点的过载问题,从而提高单一集群的整体负载处理能力。提出了一种动态反馈自适应集群负载均衡算法,探讨了其原理及方法。  相似文献   

11.
因受网络通信信道干扰以及多径特征的影响,隐式IPv6网络在数据转发过程中链路均衡性差,提出隐式IPv6路由高速转发路由探测算法。构建隐式IPv6路由转发的节点定位部署模型,采用波特间隔均衡控制方法进行隐式IPv6路由转发链路信道均衡设计,提取路由高速数据转发的统计特征量;根据关联规则融合调度方法控制其能耗,在全网能量均衡约束模型下实现链路转发协议优化,根据数据转发负载均衡调度模型实现隐式IPv6路由高速转发路由探测。仿真结果表明,采用该方法进行隐式IPv6路由转发速率高、数据转发均衡性好、输出误码率低、链路均衡性好。  相似文献   

12.
为了提高社会网络隐私数据的优化传输能力,降低数据传输的误码率,提出基于SDN的社会网络隐私数据均衡调度算法。构建社会网络隐私数据传输信道模型,采用匹配滤波检测方法进行社会网络隐私数据传输的滤波干扰抑制,提取社会网络隐私数据的正相关特征量,采用SDN均衡器,根据特征分布的均衡性进行优化调度设计,实现社会网络隐私数据的均衡调度。仿真结果表明,该算法的数据传输稳态控制能力较强,输出误码率较低。  相似文献   

13.
针对现有无线传感器网络数据汇集算法延时较大这一不足,对最小延时数据汇集树和传输调度问题进行了研究。提出一种基于度约束的汇集树构建算法(DCAT)。该算法按照BFS方式遍历图,当遍历到每个节点时,通过确定哪些节点与汇点更近来确定潜在母节点集合。然后,选择图中度数最小的潜在母节点作为当前被遍历节点的母节点。此外,为了在给定的汇集树上进行高效数据汇集,文中还提出两种新的基于贪婪的TDMA传输调度算法:WIRES-G和DCAT-Greedy。利用随机生成的不同规模的传感器网络,参照当前最新算法,对本方法的性能进行了全面评估。结果表明,与当前最优算法相比,本调度算法与汇集树构建算法结合起来,可显著降低数据汇集的延时。  相似文献   

14.
为解决当前移动无线传感网恶意节点清除算法存在的挖掘效率较低、恶意节点清除困难等不足,提出了一种基于安全度序列裁决机制的移动无线传感网恶意节点清除算法。首先,基于安全度序列裁决机制,通过捕获瞬时流量与瞬时数据传输率等特征参量,动态捕捉疑似的恶意节点,增强网络捕捉恶意节点特征的能力,提高恶意节点的挖掘效率;随后,采用基于数据分割的区域清除方法,设计数据分割阈值,对网络中疑似恶意节点进行排序,优化网络监控的实时扫描质量,提高对恶意节点的监测能力。仿真实验表明:与网络联合参数判定机制(Network Joint Parameter Decision Mechanism,NJPD算法)及流量指纹判定裁决机制(Flow Fingerprint Decision and Decision Mechanism,FF2D算法)相比,所提算法具有更高的恶意节点清除效率与网络正常工作时间,以及更低的被攻击次数。  相似文献   

15.
在无线传感器网络中,基于单个基站的外部存储方法会带来通讯瓶颈和能量消耗不均衡问题,而部署多个基站又会增加网络部署成本。因此,研究适合无线传感器网络的网内数据存储与检索技术具有重要意义。概述了无线传感器网络网内数据存储与检索技术研究的必要性、存在的问题及其挑战,给出了数据存储与检索的评价指标,并对已有方案进行分类,指出了无线传感器网络网内数据存储与检索技术下一步的研究重点。  相似文献   

16.
大规模并发用户环境下的e-Learning教育应用,必然要受硬件、网络和其他资源的约束和限制,严重时可导致应用系统的整体瘫痪.以节点切割为代表的负载均衡机制,可在一定程度上缓和无限增长的并发用户给系统有限资源(硬件、软件、网络等)带来的压力,提高应用系统的可靠性、稳定性和可扩展性.本文以e-Learning Grid数据访问中间件为基础,详细讨论了节点切割的原理、步骤、实现和示范应用,给出了以负载均衡为目标的负载转移服务的完整实现策略,并通过测试实验分析了其对系统性能的提升.  相似文献   

17.
针对传统的网络控制器在大规模网络数据中容易出现负载过高、负载不平衡,路由规划不合理,进而导致网络波动影响系统整体性能的问题,提出一种基于SDN的网络通信系统均衡控制器的设计与实现方法,从而使网络流量得到合理分配及有效传输.首先,对控制器整体架构进行设计,引入软件定义网络思想,分析应用层和控制层、基础设施层,利用控制器中均衡模块采集的流量信息进行信道的合理分配;然后,根据路由流量的改变通过PID算法得出合理的路由规划路径,解决信道阻塞问题;最后,为了避免路由重新分配过程中流量中断,选择合适的流表更新算法.仿真结果表明,该设计可以明显提高系统的抗干扰能力,具有较好的信道均衡能力,传输效率高,传输时延得到了有效控制.  相似文献   

18.
基于强化学习的目标检测算法在检测过程中通常采用预定义搜索行为,其产生的候选区域形状和尺寸变化单一,导致目标检测精确度较低。为此,在基于深度强化学习的视觉目标检测算法基础上,提出联合回归与深度强化学习的目标检测算法。首先,深度强化学习agent根据初始候选区域所提取的信息决定相应搜索行动,根据行动选择下一个逼近真实目标的候选区域;然后,重复上述过程,直至agent能确定当前区域为目标区域时终止搜索过程;最后,由回归网络对当前区域坐标进行回归,达到精确定位目的。实验结果显示,在单类别目标检测中,与原算法相比其精度提高了5.4%,表明通过引入回归有效提高了目标检测精确度。  相似文献   

19.
邓芳 《培训与研究》2010,27(2):62-65
无线传感器网络拓扑控制算法对于延长网络的生存时间、减小通信干扰、提高路由协议和MAC协议的效率等具有重要的意义。根据无线传感器网络的分簇机制,有效地利用成簇算法均衡网络节点负载,降低能耗,从簇首的选择、簇组织和簇的路由三个方面系统地分析当前典型的成簇算法,对算法的特点和适用情况进行比较分析,并指出目前算法存在问题和改进措施。  相似文献   

20.
无线传感器网络拓扑控制算法对于延长网络的生存时间、减小通信干扰、提高路由协议和MAC协议的效率等具有重要的意义。根据无线传感器网络的分簇机制,有效地利用成簇算法均衡网络节点负载,降低能耗,从簇首的选择、簇组织和簇的路由三个方面系统地分析当前典型的成簇算法,对算法的特点和适用情况进行比较分析,并指出目前算法存在问题和改进措施。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号