共查询到20条相似文献，搜索用时 187 毫秒
1.
具有良好质量的数据仓库是数据挖掘的先决条件，一个支持数据抽取，清洗，转换和装载的工具是实现数据仓库必不可少的因素。本文介绍了ETL的技术及相关概念，在数据仓库建设中的重要作用，提出一种流程化，组件化的ETL工具设计思路，时应各个功能在流程中设计和实现方法。 相似文献
2.
ETL(Extraction,Transformation,Load)即数据抽取、转换和加载,是构建数据仓库和数据集市的重要组成部分。ETL过程关系到数据仓库的质量,是基于数据仓库所有商业智能应用的基石。阐述了ETL设计中的各个基本步骤,并讨论分析了ETL工具的实现关键技术,对ETL设计人员提供强有力的支持。 相似文献
3.
廖飒 《贵阳学院学报(自然科学版)》2008,3(3)
数据增量更新是数据仓库应用领域的重要问题。设计增量数据的获取方式。对增量数据的冗余问题进行了重点研究,提出了预处理方法并设计了相应算法,该方法实现了增量数据的压缩,提高了增量数据的质量及ETL过程的处理效率。给出了增量ETL过程的具体实现。 相似文献
4.
5.
6.
通过对数据仓库技术和决策支持系统的研究,文章设计了校务决策支持系统体系结构.作者通过分析上海财经大学教师管理业务,设计了教师主题数据模型,特别使用缓慢变化维设计教师事实表以便跟踪历史变化数据.同时描述了使用开源ETL工具Kettle设计及实现教师事实表,并举例示意缓慢变化结果.最后用两种BI工具示范了教师主题的具体应用,体现数据仓库在高校师资队伍建设中的价值. 相似文献
7.
支持数据抽取、转换、清晰、装载的工具集ETL对任何数据仓库工程都是一个必不可少的关键部件。结合应用重点探讨了ETL技术中的数据转换技术及数据质量问题。 相似文献
8.
9.
在电信企业CRMS建设的背景下,介绍了国内外CRM的现状和趋势以及数据仓库技术和数据挖掘技术,重点阐述了电信运营数据仓库的建模和实施、ETL模块设计和联机分析处理的实现. 通过实践证明该方法是行之有效的. 相似文献
10.
针对数据分析融合平台建设中数据集成开发效率低、数据集成慢和数据网络分散等问题,提出跨网络传输的分布式ETL框架设计。通过对主流ETL工具进行分析,总结了ETL的工作原理及过程,设计了一种基于消息中间件面向数据集成的分布式ETL框架。使用该框架处理数据集成任务时,提交数据集成过程的描述文件进行数据处理。基于元模型驱动和面向切面设计思想,设计数据任务执行引擎和控制模型。基于该框架开发的工具可使数据开发人员从大量重复的数据操作中解脱出来,将更多精力放在数据的逻辑处理上。 相似文献
11.
决策支持系统构建的关键在于ETL系统的开发。文章从ETL模型设计、ETL策略及实现技术、ETL数据质量控制技术等方面进行研究设计,提出适应中小型企业数据整合需求的ETL解决方案。 相似文献
12.
数据仓库的架构模型包括了星型架构与雪花型架构等模式。数据仓库建模的一般流程一般包括确立数据分析主题、确定度量值、确定维度和数据粒度和创建事实表等环节。ETL是数据仓库实施过程中的一个重要处理环节,在数据仓库的构建中,ETL贯穿于项目始终,包括了数据清洗、整合、转换、加载等各个环节。所以ETL在整个数据仓库项目中起着十分关键的作用。 相似文献
13.
肖国荣 《广东白云学院学刊》2005,(2):54-58
作为BI／DW的核心和灵魂，ETL是按照统一的规则集成来提高数据价值，负责完成数据从数据源向目标数据仓库转化的过程，ETL是实施数据仓库的重要步骤。本文首先对肌技术作了系统的介绍，在此基础上主要研究了ETL技术在银行零售贷款风险管理与个人信用评估系统中的应用，最后简要介绍了系统的实现。 相似文献
14.
提出了一种基于数据质量进行控制的ETL技术,在传统的ETL操作流程中增加脏数据处理模块及抽样数据质量评估模块,并将数据质量控制思想融入到ETL的操作流程设计中,控制ETL过程的数据质量。实验表明,带有质量控制的ETL算法设计优化了ETL工作流程,提高了进入数据挖掘中数据的质量。 相似文献
15.
提出了一种ETL元数据管理框架．论述了元数据管理架构在税收分析系统中的应用,分析了该系统的总体架构,并论述了ETL的实现、ETL的流程图、配置方案在税收分析系统中的应用。 相似文献
16.
为提高综合治税涉税信息利用水平,实现对各类综合治税数据的整合分析与关联比对,为数据分析提供应用支撑,在分析系统业务需求的基础上,设计了基于数据仓库的综合治税数据分析系统,探讨数据自动交换、ETL、数据建模、联机分析处理等关键技术。 相似文献
17.
如何迅速从海量数据中获得准确的决策信息是现代商业企业致胜的关键。以数据仓库及OLAP Services为工具,通过建立多维数据模型和数据立方体,针对企业销售数据设计一个数据仓库管理系统,把事务数据库中原始混乱的数据集成转化变成数据仓库中规范的数据方便用户的查询,进而辅助企业决策。实际证明系统实用方便,大大提高企业信息管理效率。 相似文献
18.
汪辉 《衡阳师范学院学报》2014,35(6):57-60
以空间换时间是商务智能和数据仓库应用中的基本理念,其中可使用宽表和汇总表来实现。该文详细阐述了商务智能和数据仓库应用中的数据层次概念,以及每层的数据生成,即缓冲层、事实维度层、宽表层、汇总表层、固定报表层,提出了相应的实现数据转换的方法和工具,最后说明其可行性和实用性。 相似文献
19.
物流数据仓库必须满足物流管理中对数据处理分析的复杂性和预测性的要求。数据粒度是数据仓库设计中的核心问题之一。结合实例介绍了数据仓库中数据粒度处理的确定方法,并探讨了数据仓库在物流管理中的应用。 相似文献
20.
本文主要介绍了巢湖市地税局税务系统的系统结构和关键技术.该系统主要运用数据仓库、ETL、数据挖掘等关键技术. 相似文献