共查询到20条相似文献，搜索用时 31 毫秒
1.
将NoSQL数据库在非结构化大数据应用上的优势与空间数据以及GIS相结合,能极大提高GIS对大数据的读取与查询效率。本文利用主流NoSQL数据库和GIS平台,尝试将存储在NoSQL数据库中的大数据量的非结构数据以空间数据的方式进行显示和查询。 相似文献
2.
NoSQL数据库是最近几年才逐渐兴起的,它没有严格的结构及类型方面的限制,具有良好的扩展性和灵活性,并且在海量存储及并发等方面,也远远高于我们传统使用的关系型数据库。本文作者结合在工作中的实际应用,以发电设备的技术规范结构化存储为例,介绍了在设计方面遇到的一些问题,以及基于NoSQL数据库之一的MongoDB分布式文档型数据库的解决思路。通过与传统设计方式进行比较,使用NoSQL数据库能够在满足客户需求的同时,很大程度上简化系统设计及开发等方面的工作,提高了生产效率。 相似文献
3.
大数据时代的数字图书馆异构数据集成研究 总被引：1，自引：0，他引：1
在大数据时代,数字图书馆的数据处理及服务将会发生明显的变化,将从传统的信息查询、推送等服务转向在海量的数据中分析和挖掘出潜在有价值的信息,而关系型数据库的结构和机制不能很好地适应这种变化。针对数字图书馆在大数据背景下异构数据的集成问题,提出了基于NoSQL的中间件模型的数据集成方法。该方法有利于数字图书馆存储各种结构的数据,同时能够很好地适应海量数据分布式存储。 相似文献
4.
目前关系型数据库在云计算的平台下已经成为制约整个Web架构敏捷性和扩展性的瓶颈,而NoSQL可扩展的松耦合类型数据模式,以及在易用性、高度伸缩性、支持海量数据等方面所表现出来的优点,使其在云计算领域被广泛应用。分析了NoSQL数据库技术特点,并对目前应用的几种典型NOSQL数据库进行了分析比较。 相似文献
5.
《黑龙江科技信息》2018,(29)
视频监控作为安防技术的有效手段已经被广泛应用到公共安全、家庭安全等多种场合。但是传统的视频安防技术并没有充分发掘监控视频中的所有信息,当前事后人力观察的视频处理方法无法发挥视频安防的时效性和预警特点。随着技术和安全需求的发展,视频安防技术也在快速发展,但是依然面临很多问题。视频安防产生的海量数据既是一种资源也是一种负担,围绕视频安防的海量数据有三个问题需要解决:一、海量视频数据的产生和传输,二、海量视频数据的存储,三、海量视频数据的充分利用。本文针对这三个方面总结了视频安防系统的发展和趋势,以及存在的问题。同时不惜笔墨地重点介绍了视频存储技术和最新的利用云存储作为海量视频的存储方法,基于机器学习的视频数据处理方法实现视频监控的智能化。 相似文献
6.
Hadoop中的HDFS是大数据存储处理的关键技术,HDFS在存储海量数据集中有着高效、可靠的优点。为解决图书馆传统关系型数据库在海量数据存储和访问效率中存在的瓶颈问题,本文提出了一种基于Hadoop的图书馆复合大数据存储系统。该复合大数据存储系统能够满足图书馆大数据存储需求,提高大数据存储效率,可高效保障图书馆大数据决策的需求。 相似文献
7.
随着我国社会发展进程的不断加快,各项新型技术的不断创新和研发,在实际工作开展中,也自然产生了更多的亟待处理存储数据。传统的数据库已经无法顺应,现阶段我国信息化时代的发展进程。由此本次研究展开基于NoSQL数据库的空间大数据分布式存储实现分析。经研究发现此种方法能够有效实现大数据的实时处理,相较传统数据库技术存在明显的技术优势。 相似文献
8.
《内蒙古科技与经济》2021,(9)
大数据背景下,随着信息技术和网络技术的迅猛发展,科技信息大数据呈指数式增长,对于海量数据的搜集、存储、传输、处理模式以及共享等问题的应对,成为科技情报服务工作新的挑战。基于此,分析了大数据背景下科技情报服务所面临的挑战,提出了科技情报服务工作开展的有效措施及科技情报工作的创新型服务模式。 相似文献
9.
为解决海量日志数据的存储分析问题,提出采用主流大数据Hadoop生态平台组件来进行解决以上问题;将大数据技术与高校网络日志数据存储与分析相融合,构建了一个基于大数据技术—Hadoop的校园网络日志分析平台,来进行实时监控高校学生的上网行为信息,进而辅助高校的教学管理,对高校的信息化改革具有重要意义。 相似文献
10.
薛玉倩 《内蒙古科技与经济》2019,(15)
随着科技的不断发展,科研的不断深入,科研实验的流程日异复杂,实验产生的数据巨大,对实验数据如何进行处理,获得正确的分析结果,成为亟待解决的问题。基于Hadoop的计算平台不但可以解决海量实验数据的存储处理问题,还具有较高的效率与准确性。 相似文献
11.
TGIS现状及其研究方向浅析 总被引：3，自引：0，他引：3
通过GIS技术对地球空间进行实时的管理,将是动态数字地球的目标。但在超海量数据存储和处理方面还存在许多问题,也是最新科研方向。本文纵论了TGIS的发展历史,横述了国内外最新研究概况。 相似文献
12.
13.
14.
一种基于新型存储的数字图书馆分布式大数据存储架构 总被引：1，自引：0，他引：1
图书馆数据是一种典型的大数据,大数据管理是目前图书馆面临的一个复杂问题.为了解决传统关系型数据库在海量数据存储和访问效率中存在的瓶颈问题,本文提出了一种基于新型存储的数字图书馆大数据分布式存储架构.该存储架构具有良好的可扩展性、容错性和存储性能. 相似文献
15.
16.
数字图书馆构建的关键在于海量数据的存储和管理。随着数据量和访问量的不断加大，磁盘阵列技术成为数据存储的主流技术，为了使它得到更有效的利用且具有安全性和可扩展性，先后产生了DAS、NAS、SAN三种主要的数据存储模式。 相似文献
17.
18.
伴随网络技术迅速发展与广泛应用,云计算逐渐成为对海量数据计算主要运算形式。由于数据通过高维形式储存,造成严重存储开销。文中以海量激光雷达数据为研究对象,在云计算下对存储系统进行优化设计。对于海量激光雷达数据,采用New-blocking分块策略,设定分块阈值包括最小分块因子值和最大分块因子值,利用阈值判定是否对文件分块,通过定义文件均匀度获得文件分块大小数据值;运用增加副本策略,根据文件热度判断其被访问情况,增加此文件block副本缓解负载。为进一步解决负载问题,运用数据动态平衡模型对激光数据进行监控、合并、拆分及数据移动等步骤处理,使物理节点通过迁移虚拟节点完成资源重分配,从而实现数据动态存储系统优化设计过程。实验证明,该系统能够有效存储激光雷达数据并达到系统资源使用率最大化的目的。 相似文献
19.
随着三网融合、媒体资源数字化的发展,广播电视行业的媒体资产管理的复杂性和重要性日益突出,传统的存储架构不能很好的适应海量数据的存储和处理需求。为了解决媒资数据的大容量存储、高存取速率和安全保存的问题,结合主流的存储技术分布式存储和云存储,分析在媒资存储中的应用特色,为媒资存储的更长远稳定发展提出可行性选择。 相似文献
20.
在信息资源的价值和实用性被不断挖掘并得以应用于实际工作中,大数据技术的发展迎来了高速发展期,这是由于通过信息不断的生成、更新和变化,产生了海量规模的数据信息,人们需要利用大数据的处理技术和分析能力来应对海量的数据。这在移动通信的发展领域中体现得尤为显著,人们采用了很多的具体策略来进行网络优化和改进,力求提升大数据的处理分析技术在通信网络中的应用能力,从而不断促进移动通信的进步。 相似文献