首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 31 毫秒
1.
《柳州师专学报》2016,(3):140-143
随着位置服务的广泛应用,如何对海量位置数据进行高效的空间查询成为研究热点.结合对分布式数据库HBase存储机制与Geohash编码原理的研究,基于Geo Hash构建空间索引,设计位置数据存储模型,并在此基础上探讨一种多边形区域查询算法.通过与传统My SQL数据库的试验对比,验证了该算法具有较高的查询效率和良好的可扩展性.  相似文献   

2.
关系型数据库由于面向行存储以及无法扩展等原因,已很难满足大规模车联网传感数据的存储与查询要求。针对该问题,设计了一个基于非关系型数据库HBase存储的车联网传感数据管理系统。该系统采用Hadoop与HBase搭建分布式实验平台,采用C#语言开发Web网页端。通过与传统关系型数据库SQL Server的存储与查询效率进行对比分析,表明HBase在处理大规模车联网传感数据方面具有明显优势。  相似文献   

3.
为优化整个服务器集群负载,提出一种基于预测阈值的动态权值负载均衡算法。动态评估服务器性能,根据评估结果计算服务器权值,并引入反映集群负载平衡程度和状态的阈值,以避免因频繁修改权值造成服务器抖动;使用 Holt-Winters 对访问量进行预测,并通过结果预测阈值,实现复杂负载环境下的负载均衡,达到最优负载均衡。实验结果表明,预测阈值的动态权值负载均衡算法在低并发以及高并发时都有很好的性能表现,能够提升系统的最大吞吐量,减少响应时间,提高整个集群利用率。  相似文献   

4.
数据布局策略作为数据管理的重要方面,对研究多数据中心环境下的数据布局有着重要意义。针对多数据中心的数据检索、更新和全局负载均衡3个目标对数据布局方案进行求解和优化。提出一种改进的多目标遗传算法,该算法以降低多数据中心的数据检索和更新代价作为优化目标,并结合负载均衡作为约束条件。实验显示该算法不仅在数据布局方面有良好性能,而且能够获得较高的资源利用率。  相似文献   

5.
保证数据页读写一致性是对各种大型数据库产品的基本要求,SQL Server是当前流行的大型数据库之一,探讨了SQL Server基于扇区的数据页IO一致性检测算法原理,重点剖析SQL Server存储数据页IO一致性检测系统数据的方式及残缺页检测算法原理,并以实例给出了算法验证.  相似文献   

6.
杨毅 《教育技术导刊》2016,15(5):166-168
通过对Web大数据库的访问,提高数据库的查询和信息调度能力。传统方法采用基于信息流减法聚类和模糊C均值调度的数据库访问算法,对数据库访问过程中的稀疏度均衡能力不好。提出一种基于稀疏度均衡调度的数据库优化访问算法,分析了数据库中海量数据存储结构模型,进行数据融合和冗余信息滤除处理。采用稀疏度均衡调度方法进行特征提取和数据库访问过程中的均衡调度,提高数据查准率。仿真结果表明,利用该算法进行数据库访问的均衡性能较好,数据的查准率和查全率较高。  相似文献   

7.
数据完整性是指在同一数据库中的不同数据表中的相同数据应当保持一致性和可靠性。数据完整性是评价一个数据库设计质量的重要指标,它直接影响到整个数据库运行的性能。SQL Server在保障数据库完整方面提供了强大的机制,如何在SQL Server数据库中实现数据的完整性进行探讨。  相似文献   

8.
网络用户大幅度增加为网络发展带来机遇的同时也带来了挑战,当前使用的数据负载均衡方法节点数据分发能力较差导致网络节点吞吐量较低。因此,设计了基于深度强化学习算法的高能效数据负载均衡方法。选择隐式并行程序设计方法,设计网络数据并行程序。根据存储节点个数,设计数据分配与迁移方法。根据存储节点数据量与特征,选择深度强化学习算法,实现高能效数据负载均衡。构建仿真分析环节,经多次测试证实,深度强化学习负载均衡方法具有调节网络节点平均吞吐量的能力,且此方法的使用效果优于当前所使用的其他方法。  相似文献   

9.
王勇  尹鹏飞  李娟 《教育技术导刊》2017,16(10):146-149
健康大数据已被纳入国家大数据战略布局,如何能够收集有效的健康数据,构建高性能、高可靠性、低成本和具有良好可扩展性的健康大数据平台至关重要。传统的单纯利用Hadoop、HBase无法满足复杂的业务需求和实时查询的要求,同时性能方面也存在一些问题。分析了HBase的底层原理,对HBase的读写性能进行优化。借助Phoenix提供的SQL接口来操控HBase,可方便对集群和数据进行管理。Phoenix针对HBase也提出了一系列优化方案。利用HBase和Phoenix的特性构建高性能的健康大数据平台。实验结果表明,优化后的健康大数据系统具有更好的读写性能,能够更好地满足大数据发展需求。  相似文献   

10.
随着云计算的大规模普及,负载均衡已经以用户服务的形式出现在云平台上,但传统的负载均衡算法不能利用云平台动态管理计算资源的优势。基于预测的动态负载均衡算法根据当前云平台应用负载特征使用BP神经网络对负载进行实时预测,然后根据预测的负载变化趋势提出负载均衡器后端实例调整策略。实验结果表明,基于预测的动态负载均衡算法能够在满足用户SLA的前提下,促进资源节约。  相似文献   

11.
针对现有异构任务调度算法存在负载不均衡、数据本地性问题,提出基于树结构的负载树任务调度算法。该算法通过量化节点计算能力构造节点集最小堆,利用堆排序生成计算能力逆序树,并依据节点负载率将逆序树调整为左节点优先的负载树,为任务计算包含完成时间、负载率、延迟因子的决策值,最终完成任务与树节点的匹配。实验结果表明,取不同负载率与延迟权值比时,该算法的任务执行效率均能获得一定程度提高。该算法可利用树结构的调度优势,在获得更高集群负载均衡度时,有效缩短作业集执行时间。  相似文献   

12.
在SQL Server表上使用索引对数据操作性能非常关键,有效地设计索引可以提高SQL Serv-er系统的性能。不合理的使用索引不仅会使表的操作速度明显变慢,而且会使数据检索的速度降低。因此,要创建合适的索引以提高数据库的性能。  相似文献   

13.
优化数据库的整体性能是数据库技术的另一个研究热点。以SQL Server为基础,分析了数据库查询优化的常用方法:索引优化和SQL语句优化,证明可以提高数据库的整体性能。  相似文献   

14.
为提高压力管道数据存储性能,改善数据存储效率,增强压力管道后期的可维护性,构建一种基于Hadoop的压力管道数据存储系统.该系统利用HDFS分布式存储框架建立压力管道数据的存储模型,采用MapReduce对压力管道海量数据进行分析和处理,从而完成数据写入HBase数据库的低延迟响应.在实验中,采用压力管道数据对MySQL、Oracle、Spark SQL、MongoDB和Rasdaman进行性能对比.结果表明,在相同数据量的情况下,系统运行时间更短,占用内存更少,其在存储压力管道海量数据方面具有较好的优越性.  相似文献   

15.
随着城市的发展,传统方式存储与处理不断增多的交通数据暴露出诸多问题。为此,设计并实现了一套基于Hadoop的交通数据存储和处理平台。该平台采用HBase数据库存储数据,Mapreduce实现数据并行处理,Web端展示数据。实验结果证实,该平台在数据存取和数据处理性能方面都优于传统处理方式。  相似文献   

16.
主要研究了Bigtable和HBase两个云计算的主流数据库;从数据模型的比较可以看出它们都采用了行、列和时间戳三要素;系统的主要架构也基本相似,只是在实现中有细微的差别,表现在对列族的处理上,Bigtable采用了锁的方式,而HBase则采用了节点方式来完成数据的协同访问;在性能的比较中可以知道,Bigtable的性能明显优于HBase,尤其在如数据错误安全和数据中心间的数据复制等关键性能是HBase所不能支持的;但由于HBase的开源性,使得用户可以获得更多的自由,方便开发个性应用。  相似文献   

17.
随着Internet的迅猛发展,Web服务器集群中的负载均衡算法备受关注。为优化Web集群负载均衡能力,提出了基于一致性哈希的负载均衡算法(DCH)。首先定义了集群中服务器各项性能指标的量化值,根据量化值计算初始虚拟节点集合,优化了由服务器性能差异导致的负载分配不均|然后细化周期内负载定义,根据量化的服务器性能值与负载值动态计算虚拟节点集合,使集群负载更均衡。实验比较分析表明,该算法能有效降低集群系统的平均响应时间,提高系统吞吐量,从整体上提升集群系统性能。  相似文献   

18.
李凌  李振 《宜春学院学报》2011,33(12):66-68,174
异构数据源的移植问题是当前数据处理领域内研究的一个热点,文章提出一种以XML文件为中介、利用ADO.NET技术实现Access和SQL Server之间的数据移植的方法,设计了基于.net的关系型数据库数据转XML文件和XML文件转换关系型数据库数据的方法,为同类系统的移植提供了有益的参考。  相似文献   

19.
数据库系统负担着重要的事务处理任务,为了保证在负载过大时也可以提供事务处理能力,必须加强数据库系统,并且对其性能进行合理优化.通过DBA分析性能数据,并且优化系统是十分困难的办法,随着使用时间增长,系统负载波动与结构越来越复杂,利用数据库具备的系统进行自动优化,是解决当前问题的有效途径.本文分析了轻量数据挖掘如何优化数据库系统,并且着重研究了数据库锁表管理办法,使用性能优化数据,建立了基于锁表预测系统的神经网络预测器.经过实验证明,数据库系统可以得到16%的性能提升.  相似文献   

20.
在不均衡数据集下,SVM分类超平面的偏移,使得基于KKT条件进行样本选择的增量学习算法性能不佳,针对该问题,提出动态代价的SVM增量学习算法,该算法依据各类样本密度之间的关系动态计算类的错分代价,减少每次迭代中分类超平面偏移造成的错误累积,保证依据KKT条件选取样本的准确性,使得每次迭代选取的样本都包含当前分类器缺少的空间信息,提高最终分类器在不均衡数据集下的分类性能。最后,在UCI数据集上的仿真实验结果表明该算法能够提高不均衡数据下的分类性能。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号