埃尔温自动化框架:在数据编制、部署和治理方面实现更快的值时
发布时间:2019.02.13来源:亿信华辰浏览量:92次标签:数据治理
数据治理对企业来说比以往任何时候都重要。它确保组织中的每个人都能发现和分析高质量的数据,从而快速提供业务价值。
它有助于成功地满足越来越严格的法规遵从性要求,如通用数据保护条例(GDPR)中的要求。它为企业绩效提供了一个清晰的衡量标准。 成熟和可持续的数据治理计划必须包括数据集成。这通常需要协调组织内的两组人员:1)关心治理和有意义地使用数据的人员;2)关心从源数据到目标数据的获取和转换,以获得可操作的见解的人员。
当治理与IT的集成实践以编程方式耦合时,数据价值链的两端都会被覆盖。这方面的工具和流程应该自动生成“pre-etl”源到目标的映射,以最小化在手动编译和解释组织中存在的大量基于Excel的数据映射时可能发生的人为错误。除了减少错误和提高数据质量外,通过自动化(包括最小化返工)获得的效率还可以将系统开发生命周期成本降低一半。
事实上,能够依赖自动化和可重复的过程可以节省高达50%的设计成本、高达70%的转换成本和高达70%的项目总交付速度。提高数据治理的成熟度始于一个中央元数据存储库(数据字典),用于控制从大量文件和数据库类型导入的元数据,以通知数据映射。它可以用于在系统开发生命周期的设计阶段自动生成受管理的设计映射和代码。正确的工具集——支持统一和底层元数据模型的工具集——将是一个设计和代码生成平台,它引入效率、可见性和治理原则,同时减少人为错误的机会。根据最佳设计实践为领先的ETL工具自动生成ETL/ELT作业符合这些原则;它根据批准的公司和行业标准运行。
自动将开发人员的Excel工作表、平面文件、Access和ETL工具中的映射导入到全面的映射库存中,并自动生成有意义的映射文档,这是一种支持治理的强大方法,同时提供对数据移动的真正洞察力,用于沿袭和影响分析。–不会中断系统开发人员的正常工作方法。例如,gdpr遵从性要求企业发现源到目标的映射以及所有相关的事务,例如存储库中的哪些业务规则应用于它,以符合审计。
整合数据管理和数据治理的法规依据。当数据移动被跟踪和版本控制后,就有可能进行数据考古学——也就是说,从ETL层中的现有XML逆向工程代码——以发现过去发生的事情,并将其合并到映射管理器中,以实现快速和准确的恢复。
这是如何以更高的灵活性和准确性高速满足数据治理需求的一个示例。erwin自动化框架是一个元数据驱动的通用代码生成器,它与erwin映射管理器(mm)携手工作,用于:
1.预ETL企业数据映射
2.数据沿袭、影响分析和业务规则存储库
3.自动代码生成
-
如今企业面临哪些数据湖管理挑战?
成功的数据治理方案涉及部署策略、标准和流程,以在整个企业中有效正确地利用高质量数据。如果你的企业具有数据湖环境,并希望从中获得高质量的分……查看详情发布时间:2020.04.02来源:知乎浏览量:110次
-
通用数据治理平台的功能模块
随着互联网与大数据技术的飞速发展,大数据已经融入到了各行各业。数据治理非常重要,已经逐渐成为了政府、企业进行智能化决策的重要手段。数据治……查看详情发布时间:2022.02.23来源:浏览量:400次
-
谈大数据时代下的数据治理
2013年被众多的IT人定义为中国的大数据元年,这一年国内的大数据项目开始在交通、电信、金融部门被广泛推动。各大银行对Hadoop的规划……查看详情发布时间:2019.01.03来源:亿信华辰浏览量:82次
-
数据治理和数据发现:实现数据监管实施
企业不断努力利用数据驱动的洞察力或竞争情报,发展组织“数据文化”的概念将获得突出地位。数据和数据分析将继续在未来的全球业务中发挥关键作用……查看详情发布时间:2019.09.20来源:知乎浏览量:99次
-
在数据智能时代企业面对庞大的数据量如何高效进行数据治理?
在数据智能时代,对企业而言,“数据驱动业务”或者“数据即是业务”的理念逐渐成为业界的一种共识。然而,数据孤岛、数据标准不统一等问题在一定……查看详情发布时间:2020.06.23来源:知乎浏览量:63次
-
数据治理的未来:平衡数据治理和数据管理
如何通过快速访问高质量数据,灌输信心并支持数据驱动的决策,为业务合作伙伴创造竞争优势?” Citizens Bank首席数据官(CDO)……查看详情发布时间:2018.11.14来源:Michelle Knight浏览量:97次