数据准备和数据映射:数据管理和数据治理之间的粘合剂,以加快洞察力并降低风险

发布时间:2019.02.13来源:亿信华辰浏览量:228次标签:数据治理


组织已经花费了大量的时间和金钱试图在不同的平台上协调数据,包括清理、上载元数据、转换代码、定义业务词汇表、跟踪数据转换等。但是,在整个企业范围内对数据进行标准化的尝试并没有产生预期的结果。如果数据管理失败,公司就无法有效地实施数据治理——记录和应用业务规则和流程,分析变更的影响并进行审计。

这个问题通常是从数据准备和映射的手动集成方法开始的。只有当公司第一次尝试手动编目和记录操作系统、流程和相关数据(无论是静态的还是动态的)时,他们才会意识到整个数据准备和映射工作是多么耗时,以及为什么这项工作肯定会因人为错误和数据质量问题而变得复杂。为了有效地促进业务转型,以及满足法规和合规要求,不存在任何意外。 很明显,要发现和合成以不同格式存在于数千个未经授权、未记录的数据库、应用程序、ETL过程和过程代码中的数据,人工道路非常具有挑战性。考虑将源系统字段(通常是源文件或数据库表)手动映射到目标系统字段(例如目标数据仓库或数据集市中的不同表)的问题。然而,随着电子表格映射数据的发展,ETL设计过程往往会受到影响,因为人为错误,电子表格映射数据没有更新,或者可能被错误地更新。因此,关于转换后的数据是否可信的问题仍然存在。

可悲的事实是,像数据科学家这样的高薪知识工作者,花费了高达80%的时间来寻找和理解源数据,并解决错误或不一致的问题,而不是将其分析为真正的价值。在查看主要数据集成项目(如数据仓库和主数据管理)时,统计数据是类似的,数据管理员面临识别和记录数据沿袭和敏感数据元素的挑战。正确地转换为业务友好的术语时,企业利益相关者如何获得准确和可操作的洞察力?组织如何掌握无缝数据发现、移动、转换以及IT和业务协作,以逆转准备与交付价值的比率。

要克服这些障碍,需要建立一个自动化、实时、高质量和元数据驱动的管道,对每个人都有用,从数据科学家到企业架构师,再到业务分析师,再到C级执行官。要做到这一点,需要有一个健全的数据管理策略和技术,以自动地及时交付符合业务需求的高质量数据。 从那里开始,他们需要一个强大的数据治理策略和技术,以自动将管理良好的数据与核心功能(用于审计、法定报告和合规性要求)链接并同步,并推动业务洞察。

创建高质量数据管道  

数据管理和数据治理是一种实时、准确的数据布局,包括数据库、数据湖和数据仓库中的“静止数据”以及与关键应用程序集成和使用的“动态数据”。而且,还可以控制这种情况,以促进洞察力和协作,并限制风险。通过元数据驱动、自动化、实时、高质量的数据管道,所有利益相关者都可以访问他们现在能够理解和信任的数据,以及他们被授权使用的数据。最后,他们可以根据可靠信息的完整库存做出战略决策。

数据管理和治理的集成还支持行业满足法规和合规要求的需求,确保审计不会因无法发现关键数据或未能将敏感数据标记为集成过程的一部分而受到影响。 数据驱动的洞察力、敏捷创新、业务转型和法规遵从性是围绕数据治理中心的数据准备/映射和企业建模(业务流程、企业架构和数据建模)的成果。ERwin Mapping Manager(MM)将数据管理和数据治理过程结合在一个自动化流程中,贯穿集成生命周期,从数据映射到协调和聚合,再到生成数据沿袭的物理体现,即事务数据和操作数据的创建、移动和转换。

它的标志是数据交付(业务词汇表将物理元数据连接到特定的业务术语和定义)和元数据管理(通过数据映射)的一致方法。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理与组织架构

    数据治理与组织架构

    数据治理实际反映的是组织问题、文化问题,这也是许多公司为了明确权责划分而建立数据治理委员会的原因。同时,还需要明确的程序与执行程序的计划……查看详情

    发布时间:2019.11.01来源:知乎浏览量:206次

  • 数据资产管理实践白皮书(2.0版)

    数据资产管理实践白皮书(2.0版)

    本白皮书版权属于中国信息通信研究院云计算与大数 据研究所,并受法律保护。转载、摘编或利用其它方式使用 本白皮书文字或者观点的,应注明……查看详情

    发布时间:2019.09.02来源:中国信息通信研究院云计算与大数据研究所浏览量:598次

  • 2021年自动化数据管理的热门用例

    2021年自动化数据管理的热门用例

    数据管理自动化将成为任何企业和行业越来越有价值的实践。这将有助于克服处理数据的挑战-从访问和存储到准备或分析数据-如果未进行优化,这些方……查看详情

    发布时间:2021.06.28来源:亿信华辰数据治理知识库浏览量:277次

  • 数据治理寻求未来:平衡数据治理和数据管理

    数据治理寻求未来:平衡数据治理和数据管理

    想要通过快速访问高质量数据,灌输信心并支持数据驱动的决策,为业务合作伙伴创造竞争优势吗?那么这篇文章你一定得看!……查看详情

    发布时间:2019.08.29来源:知乎浏览量:164次

  • 为数据管理/数据质量/问题分析提供资金

    为数据管理/数据质量/问题分析提供资金

    大多数具有正式数据治理工作的组织都对正在进行的数据管理工作给予了高度关注,解决了利益相关者之间发生自然冲突和/或数据质量工作时出现的问题……查看详情

    发布时间:2019.03.19来源:亿信华辰浏览量:205次

  • 如何制定数据标准

    如何制定数据标准

    企业的数据标准来源非常丰富,有外部的监管要求,行业的通用标准,同时也必须考虑到企业内部数据的实际情况,梳理其中的业务指标、数据项、代码等……查看详情

    发布时间:2020.11.13来源:知乎浏览量:225次

  • 数据治理是中小银行决胜数字化转型成功的关键

    数据治理是中小银行决胜数字化转型成功的关键

    未来,银行的资产不是现金等实物,而是“数据”。因此有效的数据治理是银行实现数字化转型的基础。目前,中小银行在业务发展中逐渐积累了大量的内……查看详情

    发布时间:2019.12.13来源:知乎浏览量:210次

  • 主数据管理对生产率改善、风险管理、成本降低等方面均有显著的好处

    主数据管理对生产率改善、风险管理、成本降低等方面均有显著的好处

    什么是MDM(Master Data Management)? 主数据管理是旨在创建和维护权威、可靠、可持续、准确、及时和安全的环境的……查看详情

    发布时间:2020.09.03来源:知乎浏览量:205次

  • 数据治理与分析相结合

    数据治理与分析相结合

    不到十年前,由于规模,资源和组织能力的原因,大型企业比同行业的小企业具有显着的优势。现在已不再是这样,因为数字创新和全球化的推动,加上移……查看详情

    发布时间:2018.11.23来源:数据治理浏览量:269次

  • 可以加强您的数据治理框架的五大方面

    可以加强您的数据治理框架的五大方面

    信息就是力量,您的组织每天都依靠它来做出明智的商业决策。不幸的是,组织产生的数据并没有按照应有的方式进行管理。大数据调查表明,业务和技术……查看详情

    发布时间:2019.07.04来源:知乎浏览量:259次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议