首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 109 毫秒
1.
提出一种基于数据倾斜关联度的数据高效算法,首次给出数据倾斜度的概念,利用数据类间特征进行数据倾斜程度的判断,对相似数据进行类间聚类,将数据库中数据特征进行信息相似度计算,计算概念总出现次数时应累加其所有子概念的出现次数。在查询的过程中,充分考虑同一数据属性的多样性,对数据特征加入模型的数量进行约束,减少不必要的繁琐数据特征。判断符合查询条件的数据类别,根据不同的数据类别进行数据查询,实现数据结构的优化。实验结果表明,利用这种算法进行数据库查询优化,能够有效提高海量数据库信息查询的效率。  相似文献   

2.
提出一种基于时间相关性的劣质数据实时清理方法。对嵌入式系统中的数据进行过滤,将劣质的数据过滤出去,利用分布率与聚类的偏差和密集度的聚类方法对劣质数据进行聚类,利用时间相关性数据清理方法进行劣质数据的实时清理,克服了当前方法存在的弊端,对劣质的数据进行实时清理的效果较好,有效地提高了劣质数据实时清理的准确性,完成对嵌入式系统中劣质数据实时清理方法研究。实验的结果表明,利用本文方法能有效的对劣质数据进行实时清理,提高了数据清理的准确性。  相似文献   

3.
提出基于半监督混合模型的海量入侵数据检测方法。利用蚁群算法进行入侵数据的特征选择,在结合半监督的混合模型分类方法进行入侵数据的分类,利用混合模型对数据样本空间的聚类分布进行描述,利用数据函数将聚类的信息与分类算法相结合,进行数据分类时对没有标示的数据样本进行考虑,对入侵数据进行检测。克服传统方法存在的弊端,提高了分类器的泛化能力,保证数据分类的效果,提高了入侵数据检测的准确性,完成对大数据环境下网络主动入侵海量数据检测的研究。实验的结果表明,利用本文方法能有效地提高入侵数据检测的准确性。  相似文献   

4.
数据展现是人们利用数据的终端环节,对数据进行采集、加工和分析,最终得到有用的数据。数据可视化作为一门学科,它的主要作用是将数据以用户需要的方式进行展示。对表达事物间及事物的不同属性间关系的数据特征进行了分析,提出了适用于该类数据的若干可视化方法。  相似文献   

5.
利用数据挖掘技术对Demeter卫星数据进行分析从而发现异常数据已成为当前研究的重点,为了进一步提高异常数据发现的质量,本文提出了一种改进的聚类算法,对Demeter卫星电场数据进行异常检测,该算法首先将数据随机取样,引入信息熵理论,对PAM算法进行改进,并对卫星数据进行划分,以找到聚类中心,最后对改进算法进行了分析与比较,实验结果证明了算法的有效性。  相似文献   

6.
汪苗苗  焦学磊 《科技通报》2019,35(6):20-23,57
为了提高对海量数据的检测过滤能力,提出基于概率数学模型的数据过滤方法,采用描述性统计分析方法构建大数据过滤的统计特征分析模型,采用高阶累积量进行数据过滤的概率密度特征统计量设计,结合模糊数学推理进行数据过滤的检测统计量分析,在海量数据环境下根据检测统计量分布的概率密度进行回归分析,采用阈值检验和门限判决方法,实现数据过滤。数据测试结果表明,采用该方法进行大数据过滤的准确性较好,数学模型的可靠性和收敛性较好。  相似文献   

7.
传统方法对中密度纤维板施胶系统数据进行分类时,需要依据已知类别的数据进行划分,数据分类的范围和效率较低。为解决这一问题,提出一种基于模糊支持向量机的数据分类方法,依据模糊算法对未知类别数据进行划分,通过支持向量机对划分后的数据进行训练,提高了中密度纤维板施胶系统数据分类的效率。通过最终的仿真实验结果表明,本文方法模型能够快速、准确地对中密度纤维板施胶系统中的数据进行分类,取得了令人满意的效果。  相似文献   

8.
从ZN公司的实际出发,考虑到ZN公司的数据现状,从基础数据、业务数据、实时数据、指标分析类数据分别对数据进行标准化建设的思路、方法、实施步骤及后续管控等进行了分析,给出了相应的实施方案。  相似文献   

9.
随着科学技术的发展,大数据时代也顺势到来。在信息多元化的发展格局下,科学数据的有效认定得到了广泛关注,游戏领域的业务人员对数据能够进行科学有效的分析需求也逐渐加大。在游戏大数据平台工作流下,要求对数据进行精细的分析并加以综合利用。为了高效完成数据作业,本文针对游戏大数据平台的工作流引擎进行研究,通过对Zeus系统的工作流引擎进行重组构建,实现游戏大数据平台工作的有序开展。  相似文献   

10.
李文艳  赵芳萱 《科技通报》2019,35(2):178-182
为了有效提升医院绩效数据管理水平,需要对数据统计管理系统进行完善。但是采用当前应用的医院绩效管理数据统计管理系统,存在着系统响应时间过长、利用率较低、数据准确度较低的问题。为了解决这些问题,设计了一种基于自适应权重聚类的医院绩效数据统计管理系统,采用MongoDB作为医院绩效数据存储工具,将客户端连接3台应用服务器,建立医院绩效实际数据存储、配置文件存储和路由存储三个集群部署模式,将数据利用医院系统进行数据采集,通过解析、映射、标准化等方法进行处理,将处理后的医院绩效数据进行存储,引入Ward方法借助Matlab进行医院绩效数据聚类。实验结果表明,本设计方案能够有效实现医院绩效管理数据统计,具有较高的数据准确度和系统利用率,有效的提高了系统的响应时间。  相似文献   

11.
为了提高物联网海量数据的分析处理能力,采用Apriori算法对物联网数据进行规则关联处理。首先对物联网数据进行样本划分,并采用矩阵的方式存储,接着对数据样本进行标准化处理,并得到模糊相似矩阵,最后采用Apriori算法根据频繁项集进行规则关联。本文采用基于物联网的数字图书馆作为仿真对象,对用户行为数据进行数据挖掘,实验证明,该方法完成的物联网数据规则关联,置信度高,具有一定的应用价值。  相似文献   

12.
混沌映射加密算法,虽然能够对数据进行加密,防止数据泄露,但是针对具有非线性属性的隐私保护数据进行加密时性能差,导致数据泄露。为此提出了一种新的基于可撤销多重循环控制的云存储系统中隐私保护数据的抗泄露加密算法。通过分析云存储系统中的隐私保护数据的数据结构模型,进行隐私保护数据的数据编码序列分析,并设计了云存储系统中隐私保护数据的线性编码和密钥。引入可撤销多重循环控制方法,实现云存储系统中隐私保护数据的抗泄露加密算法的改进,在整个过程中保证了数据的保密性。仿真结果表明,该算法进行云存储系统中的隐私保护数据的抗泄漏加密,数据的密钥编码分布的随机性加强,降低了被破译概率,降低了数据泄露风险,提高了数据加密的隐私保护性能。  相似文献   

13.
从分析数据通信业务的成本入手,研究了数据通信业务的资费模型。在对数据通信业务用户进行分类的基础上,提出了对不同类型用户进行成本分摊的方法和按用户数或端口数计算各种数据通信业务成本的模型,以及数据通信业务资费水平和资费结构模型,并对数据通信业务的合理利润率进行了讨论。  相似文献   

14.
如今社会发展进入信息化时代,各行各业的所使用或产生的数据规模呈几何级增长。如何对大量复杂数据进行有效分类,对推进服务质量、决策制定都有积极的意义。本文主要研究运用机器学习的方法对数据进行分类的算法,从机器学习算法引入,介绍主流的数据分类算法,并比较各类算法的优势与劣势。最后提出利用机器学习进行数据分类的方法以提升分类操作中的数据运算的速率以及分类结果的可信度,并提出对大数据进行机器学习的研究展望。  相似文献   

15.
在嵌入式云信息网络平台中,物理层数据传输容易受到外界攻击变异成坏数据,威胁网络安全,传统方法采用最小延时数据聚集算法实现对该类算数据的检测,算法数据的不均匀性和时延性,检测性能不好。提出一种基于数据链距离估计和时间窗口重排的网络坏数据检测算法。进行嵌入式云信息平台构建和数据采集,采用统计信号分析方法对数据进行信息链构建,对数据链距离进行估计,采用时间窗口重排方法对坏数据的谱特征进行空间重组,提高坏数据检测性能。仿真结果表明,采用该算法进行嵌入式云信息网络平台通信传输的坏数据进行检测,准确检测概率提高34.56%,检测算法的收敛性和鲁棒性较好,保证了网络系统安全。  相似文献   

16.
通过对国内国际开放数据现状分析研究,总结出我国面临的数据权利与隐私之间、数据存储与数据获取和海量数据管理与利用的三大矛盾。通过引入智能合约技术解决开放数据运动中面临的这三大矛盾,基于智能合约技术开放数据可以推进国家数据发展战略,推动政府进行"数据治理",促进组织机构进行合作与方便公民个人生活。  相似文献   

17.
从分析数据通信业务的成本入手,研究了数据通信业务的资费模型。在对数据通信业务用户进行分类的基础上,提出了对不同类型用户进行成本分摊的方法和按用户数或端口数计算各种数据通信业务成本的模型,以及数据通信业务资费水平和资费结构模型,并对数据通信业务的合理利润率进行了讨论。  相似文献   

18.
针对级联数据库中可逆隐藏数据定位不准,访问恢复困难的问题,提出一种基于非对称补偿粒子滤波的可逆隐藏数据访问算法,实现对数据库中可逆隐藏数据准确访问。算法使用非对称粒子滤波对数据库中可逆隐藏数据的目标位置和访问信道衰减参数进行同时估计,提高可逆隐藏数据定位精度。设计非对称补偿滤波器,抑制数据访问中相干数据干扰,采用迭代方式对隐藏数据访问进程进行更新。最后采用取对数能量求倒谱的方法对数据进行恢复处理,实现对可逆隐藏数据的精准定位访问。仿真实验表明,采用该算法对大型级联数据库进行访问,能准确定位可逆隐藏数据,抗干扰能力强,无损可逆性好,数据库访问识别率和鲁棒性均有明显提高。  相似文献   

19.
大型数据库中,数据种类和数量较大,其中的强冗余数据干扰了需要查询的数据,导致数据关联属性弱化,查询数据过程中,严重干扰数据库查询的精度。提出一种基于弱匹配区域划分模型的数据库分区查询方法,在数据库中融入弱匹配区域的概念,依据数据融合属性特征,对数据属性融合差异较大的区域进行分割,获取数据弱匹配区域,在该区域中运算最大数据属性弱匹配度的相似性并进行聚类分析,实现弱匹配区域数据属性特征的过滤,利用弱匹配区域划分模型下数据库修补技术对数据进行实时关联修补,通过弱匹配区域的数据库查询优化方法,删除失效数据,缩小数据库中数据的冗余性,实现数据库中数据查询的优化。实验结果说明,采用所提方法进行弱匹配区域划分模型下数据库库查询,具有较高的查询效率和准确率。  相似文献   

20.
正随着互联网和人工智能的发展,数据的价值越来越得到广泛的重视,尤其是高校的数据价值,研究还处于初探期。本文首先对大数据国内外研究现状进行分析,其次基于高校数据研究课题进行分类分析,最后提出围绕高校数据研究建议,为更好挖掘高校数据价值提供参考。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号