元数据管理101:什么,为什么以及如何

发布时间:2018.12.19来源:数据治理浏览量:130次标签:数据治理

元数据管理已逐渐成为成功的数字化计划战略的最重要实践之一。随着大数据和云等分布式体系结构的兴起,可以创建孤立的系统和数据,元数据管理对于管理组织中的信息资产至关重要。那么什么是元数据呢?为什么要管理它?

元数据管理有什么作用?

虽然元数据管理有很多定义,但核心功能是使业务用户能够在基于Web的用户界面中搜索和识别关键属性的信息。

可搜索的键属性的示例可以是客户ID或成员名称。通过适当的元数据管理系统,业务用户将能够了解该属性的数据来自何处以及如何计算属性中的数据。他们将能够可视化组织中哪些企业系统使用的属性(Lineage),并且能够理解将某些内容(影响分析)更改为属性(例如属性长度)对其他系统的影响。

技术用户还需要元数据管理。通过将业务元数据与技术元数据相结合,技术用户还可以找出使用哪个ETL作业或数据库进程将数据加载到属性中。诸如数据仓库负载中的控制表之类的操作元数据也可以组合到该集成元数据模型中。这是最终用户触手可及的强大信息。元数据管理的最终结果可以是公司关键属性的元数据的另一个“数据库”的形式。此类数据库的行业术语称为数据目录,或词汇表或数据清单。

元数据管理如何运作?

元数据管理只是整体数据治理计划的一项举措,但这是处理“元数据”的唯一举措。主数据管理(MDM)或数据质量(DQ)等其他计划处理存储在各种系统中的实际“数据”。元数据管理在企业级集成元数据存储。

像Talend Metadata Manager这样的工具提供了一种自动解析和加载不同类型元数据的方法。该工具还可以基于从不同系统生成的元数据构建企业模型,例如数据仓库,数据集成工具,数据建模工具等。

用户将能够基于例如属性名称和类型来解决冲突。您还可以创建自定义元数据类型,以在两个系统之间“缝合”元数据。完全构建的元数据管理模型可以360度全方位地了解组织中不同系统的连接方式。此模型可以作为任何新数据治理计划的起点。数据建模器现在将有一个位置来查找特定属性并在其自己的数据模型中使用它。这个模型也是我们在前面部分讨论过的“数据库”的基础。与任何其他数据治理计划一样,随着各个系统中的元数据发生变化,模型需要根据SDLC方法进行更新,其中包括版本控制,工作流程和批准。


为什么我们需要管理元数据?

基本的答案是,信任。如果在系统生命周期内未管理元数据,则组织中将创建不一致元数据的孤岛,这些孤岛不满足任何团队的全部需求并提供冲突信息。用户不知道他们需要多少信任数据,因为他们不是元数据来指示数据如何以及何时到达系统以及应用了哪些业务规则。

还需要考虑成本。如果没有有效地管理元数据,每个开发项目都必须通过定义数据需求来增加成本和降低效率。为用户提供了许多创建冗余和超额成本的工具和技术,并且由于他们所寻找的数据不可用而无法提供全部投资价值。数据定义在多个系统中重复,从而带来更高的存储成本。

随着业务的成熟和越来越多的系统被添加,他们需要考虑如何管理元数据(而不仅仅是数据)。管理元数据为业务和技术用户以及整个组织带来了明显的好处。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 云端世界数据治理的12步指南

    云端世界数据治理的12步指南

    数据治理是任何大数据战略的关键组成部分。随着公司越来越多地转向数据来影响他们的决策,数据所有者必须了解跨越应用程序,内部部署设施和云的数……查看详情

    发布时间:2018.11.19来源:Joey Jablonski浏览量:154次

  • 外部管理数据集的政府数据可靠性

    外部管理数据集的政府数据可靠性

    当我在退伍军人事务部工作时,我联系了许多人 - 联邦政府以外的人 - 他们希望在联邦政府开放数据工作时帮助清理,使用和改进公共数据集。当……查看详情

    发布时间:2019.03.08来源:亿信华辰浏览量:137次

  • 主数据管理项目之你的主数据如何做“主”

    主数据管理项目之你的主数据如何做“主”

    主数据的定义已经被我们说了太多,今天这篇文章就不说定义,我们聊聊主数据的项目如何实施,主数据如何做“主”。一、主数据建设的术法道随着企业……查看详情

    发布时间:2020.08.28来源:知乎浏览量:188次

  • 国内数据治理平台厂商介绍

    国内数据治理平台厂商介绍

    睿治数据治理平台是北京亿信华辰软件有限责任公司完全自主研发的一站式综合数据治理整体解决方案,是一款面向全用户角色的、智能的、敏捷的数据全……查看详情

    发布时间:2019.09.19来源:知乎浏览量:211次

  • 微软收购BlueTalon以支持数据治理产品

    微软收购BlueTalon以支持数据治理产品

    微软今天宣布收购BlueTalon,这是一家总部位于加利福尼亚州雷德伍德市的跨平台数据访问控制解决方案提供商,收购金额不详。Azure ……查看详情

    发布时间:2019.08.02来源:知乎浏览量:107次

  • 2019—开启你的数据治理道路

    2019—开启你的数据治理道路

    如今,数字系统正在生产越来越多具有公认价值的数据,数据治理正变得越来越受欢迎和必要。然而,并非所有数据都被视为相同。……查看详情

    发布时间:2019.06.28来源:知乎浏览量:134次

  • 数据治理知识:怎么判断数据质量是否健康?

    数据治理知识:怎么判断数据质量是否健康?

    从数据质量检查开始:导出数据的子集并通过亿信华辰数据质量管理平台运行它 。这项软件服务可快速评估您数据的有效性、完整性和唯一性。……查看详情

    发布时间:2021.06.10来源:亿信华辰数据治理知识库浏览量:181次

  • 元数据管理流程和方法是怎样的

    元数据管理流程和方法是怎样的

    大数据环境中,如果企业不通过元数据管理把多种复杂的信息管理起来,很难做到信息的有效利用。Gartner在研究报告里明确指出,“元数据管理……查看详情

    发布时间:2022.03.21来源:小亿浏览量:580次

  • 询问数据治理教练:数据湖上的数据治理?

    询问数据治理教练:数据湖上的数据治理?

    在没有首先理解数据的情况下将数据提取到数据湖中,这只是经常发生的许多数据治理错误之一。您可以在此处下载我的免费报告,找出最常见的错误,更……查看详情

    发布时间:2019.03.22来源:亿信华辰浏览量:140次

  • 为数据管理/数据质量/问题分析提供资金

    为数据管理/数据质量/问题分析提供资金

    大多数具有正式数据治理工作的组织都对正在进行的数据管理工作给予了高度关注,解决了利益相关者之间发生自然冲突和/或数据质量工作时出现的问题……查看详情

    发布时间:2019.03.19来源:亿信华辰浏览量:146次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议