元数据管理在数据仓库中的应用

随着业务系统每年收集和使用的数据飞速增长，数据体量日趋增长，数据形态多样化且不统一，多种数据源之间的采集、传播和共享遇到困难。元数据管理作为大数据治理的核心，是有效管理这些数据的基础和前提，在信息化建设中发挥着重要的作用。如何理解、管理并发挥出元数据的价值，成为迫切的任务。

一、什么是元数据

元数据（Metadata），又称中介数据、中继数据，为描述数据的数据。一组用于描述数据的数据组，该数据组的一切信息都描述了该数据的某方面特征，则该数据组即可被称为元数据。

二、什么是数据仓库

数据仓库 ，主要功能仍是将组织透过资讯系统之联机事务处理（OLTP）经年累月所累积的大量资料，透过数据仓库理论所特有的资料储存架构，做有系统的分析整理，以利各种分析方法如联机分析处理、数据挖掘（Data Mining）之进行，并进而支持如决策支持系统（DSS）、主管资讯系统（EIS）之创建，帮助决策者能快速有效的自大量资料中，分析出有价值的资讯，以利决策拟定及快速回应外在环境变动，帮助建构商业智能（BI）。

三、数据仓库的元数据管理

元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及 ETL 的任务运行状态。一般会通过元数据资料库来统一地存储和管理元数据，其主要目的是使数据仓库的设计、部署、操作和管理能达成协同和一致。元数据是数据仓库管理系统的重要组成部分，元数据管理是企业级数据仓库中的关键组件，贯穿了数据仓库的整个生命周期，使用元数据驱动数据仓库的开发，使数据仓库自动化，可视化。

四、为什么数据仓库要进行元数据管理

1、建设数据仓库所必须

数据仓库是由外部数据、业务数据以及文档资料通过某些 ETL工具得到的，如果没有一个明确、清晰的规则，根本不可能实现这个过程。

2、高效精准沟通

在与产品沟通业务或是与研发沟通接口时，可以根据业务元数据，确认彼此沟通的指标、维度含义。从而在根源上避免交流的歧义。进而提高沟通效率。

3、帮助快速理解数仓系统

数据仓库做为整个部门、公司的分析数据出口，并不仅仅对数据人员服务。DM 层对业务人员，DIM 对其他开发人员都是不可避免的。如果有清楚的元数据来说明数仓系统，就会节约双方大量的沟通时间。

4、降低数据系统建设成本

假如元数据建设完备，所以取得信息会更准确快捷，使数据系统建设不返工或少返工，减少分析工作量，加强各方的统一理解以及沟通效率，进而使开发成本最小。

5、保证数据质量

数据的每一个字段都应该有它的取值范围、业务定义等信息，元数据定义好了自然就可以应用到数据质量检测、评估等方面，进而通过数据质量管理流程真正提高企业的数据质量。

6、快速分析变更影响

因元数据被集中维护并管理引用关系，当发生变更时，可以通过元数据管理系统以实时分析出其所影响的业务功能、应用系统、涉及人员、是否涉及监管等影响信息。

五、关于睿治元数据管理平台

睿治智能数据治理平台由亿信华辰自主研发，是一款融合数据治理十大产品模块，覆盖数据全生命周期管理的应用平台，也是目前国内功能齐全的数据治理工具，助力数据标准落地，提升数据质量，实现数据资产融合。其中，元数据管理模块内置丰富的适配器，全面保障各类源头的元数据自动化采集，一键采集对接，同时可支持适配器快速扩展。支持CWM（公共仓库元模型）规范的同时，提供了一套便捷的自定义管理接口功能，可完全自定义扩展，能够满足元数据管理快速实施的需要，可适应用户在不同时期的不同管理需要。