元数据管理101:什么,为什么以及如何

发布时间:2018.12.19来源:数据治理浏览量:99次标签:数据治理

元数据管理已逐渐成为成功的数字化计划战略的最重要实践之一。随着大数据和云等分布式体系结构的兴起,可以创建孤立的系统和数据,元数据管理对于管理组织中的信息资产至关重要。那么什么是元数据呢?为什么要管理它?

元数据管理有什么作用?

虽然元数据管理有很多定义,但核心功能是使业务用户能够在基于Web的用户界面中搜索和识别关键属性的信息。

可搜索的键属性的示例可以是客户ID或成员名称。通过适当的元数据管理系统,业务用户将能够了解该属性的数据来自何处以及如何计算属性中的数据。他们将能够可视化组织中哪些企业系统使用的属性(Lineage),并且能够理解将某些内容(影响分析)更改为属性(例如属性长度)对其他系统的影响。

技术用户还需要元数据管理。通过将业务元数据与技术元数据相结合,技术用户还可以找出使用哪个ETL作业或数据库进程将数据加载到属性中。诸如数据仓库负载中的控制表之类的操作元数据也可以组合到该集成元数据模型中。这是最终用户触手可及的强大信息。元数据管理的最终结果可以是公司关键属性的元数据的另一个“数据库”的形式。此类数据库的行业术语称为数据目录,或词汇表或数据清单。

元数据管理如何运作?

元数据管理只是整体数据治理计划的一项举措,但这是处理“元数据”的唯一举措。主数据管理(MDM)或数据质量(DQ)等其他计划处理存储在各种系统中的实际“数据”。元数据管理在企业级集成元数据存储。

像Talend Metadata Manager这样的工具提供了一种自动解析和加载不同类型元数据的方法。该工具还可以基于从不同系统生成的元数据构建企业模型,例如数据仓库,数据集成工具,数据建模工具等。

用户将能够基于例如属性名称和类型来解决冲突。您还可以创建自定义元数据类型,以在两个系统之间“缝合”元数据。完全构建的元数据管理模型可以360度全方位地了解组织中不同系统的连接方式。此模型可以作为任何新数据治理计划的起点。数据建模器现在将有一个位置来查找特定属性并在其自己的数据模型中使用它。这个模型也是我们在前面部分讨论过的“数据库”的基础。与任何其他数据治理计划一样,随着各个系统中的元数据发生变化,模型需要根据SDLC方法进行更新,其中包括版本控制,工作流程和批准。


为什么我们需要管理元数据?

基本的答案是,信任。如果在系统生命周期内未管理元数据,则组织中将创建不一致元数据的孤岛,这些孤岛不满足任何团队的全部需求并提供冲突信息。用户不知道他们需要多少信任数据,因为他们不是元数据来指示数据如何以及何时到达系统以及应用了哪些业务规则。

还需要考虑成本。如果没有有效地管理元数据,每个开发项目都必须通过定义数据需求来增加成本和降低效率。为用户提供了许多创建冗余和超额成本的工具和技术,并且由于他们所寻找的数据不可用而无法提供全部投资价值。数据定义在多个系统中重复,从而带来更高的存储成本。

随着业务的成熟和越来越多的系统被添加,他们需要考虑如何管理元数据(而不仅仅是数据)。管理元数据为业务和技术用户以及整个组织带来了明显的好处。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理:医院要平衡的4个考虑因素

    数据治理:医院要平衡的4个考虑因素

    电子健康倡议基金会,一个专注于质量和安全改进的医疗保健合作,以及LexisNexis Risk Solutions的医疗保健部门,于8月……查看详情

    发布时间:2018.11.27来源:Jessica Kim Cohen浏览量:95次

  • 业务系统的数据资产管理为什么这么难?

    业务系统的数据资产管理为什么这么难?

    如果你做过BI或大数据,一定会接触数据资产管理的一些概念,比如元数据,数据字典,血统分析等等,但你会发现,要做好大数据平台的数据资产管理……查看详情

    发布时间:2019.03.25来源:亿信华辰浏览量:129次

  • 数据标准与主数据、元数据、数据质量的关系

    数据标准与主数据、元数据、数据质量的关系

    数据标准与主数据、元数据、数据质量的关系,数据治理项目的根本诉求在于提升数据质量。……查看详情

    发布时间:2020.09.24来源:知乎浏览量:256次

  • 数据治理VS数据安全治理

    数据治理VS数据安全治理

    企业信息化建设是随着企业战略、业务形态、预算等多个方面不断迭代及变化的,所以在建设过程中难免出现阶段鸿沟,跨阶段整合难的现象,当企业以数……查看详情

    发布时间:2020.06.29来源:CSDN浏览量:115次

  • 治理成熟度差距以及如何克服它

    治理成熟度差距以及如何克服它

    了解您在真正的IG成熟度方面的立场,并在自己和团队中识别变革的阻力。不要回避要求定期审核和验尸以评估进度和后续步骤。通过具体信息,您可以……查看详情

    发布时间:2019.03.13来源:亿信华辰浏览量:115次

  • 数据管理和物联网

    数据管理和物联网

    数十亿带传感器的东西环绕着人们和他们的生活。这些物联网(IoT)与人,家庭,工厂,工作场所,城市,农场和车辆互动。Gartner预测,到……查看详情

    发布时间:2019.02.20来源:亿信华辰浏览量:135次

  • 治理:如何做对

    治理:如何做对

    如果您在任何规模的组织中工作,您可能不得不与某种治理委员会打交道。这些都是出了名的狡猾。继续阅读,看看如何避免常见的陷阱。……查看详情

    发布时间:2019.03.11来源:亿信华辰浏览量:107次

  • 企业如何进行数据资产管理

    企业如何进行数据资产管理

    大数据离不开计算和存储,因此大数据建设与成本强挂钩。大数据需要耗费大量的计算存储资源,如果没有合理的资产管理,很可能在大数据还没来得及发……查看详情

    发布时间:2020.08.28来源:知乎浏览量:93次

  • 常见的主数据管理问题

    常见的主数据管理问题

    主数据管理,包括不仅仅是硬件和软件,还是将数据作为重要资产管理的思想和办法,是指一整套的用于生成和维护企业主数据的规范、技术和方案,以保……查看详情

    发布时间:2020.12.05来源:知乎浏览量:329次

  • 主数据管理对生产率改善、风险管理、成本降低等方面均有显著的好处

    主数据管理对生产率改善、风险管理、成本降低等方面均有显著的好处

    什么是MDM(Master Data Management)? 主数据管理是旨在创建和维护权威、可靠、可持续、准确、及时和安全的环境的……查看详情

    发布时间:2020.09.03来源:知乎浏览量:123次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议