|
|||||
|
|
| 广电监管数据资产管理系统的关键技术及实现 | |
| 作者单位： | ;1.国家广播电视总局监测数据处理中心 |
| 摘 要： | 广播电视监管工作中的相关数据已经累积到相当多的程度,传统的存储和数据处理技术体系的建设维护越来越不能适应数据量增长速度和业务上的需求,在保证原有系统平稳运行的前提下,非常需要利用新的技术体系对数据进行迁移、扩容和备份,以Hadoop为代表的开源大数据处理和存储软件框架给我们提供了一套可行的方案。本文依据数据资产管理系统的实际建设经验,对其中的关键技术和建设过程进行分析和介绍。 |
| 关 键 词： | 大数据 Hadoop HDFS MapReduce MPP Kettle 数据仓库 |