如何避免先污染后治理,浅谈数据标准管理的应用

发布时间:2019.12.13来源:亿信华辰浏览量:81次标签:数据治理

先说一个普遍现象:

近几年来,数据治理的概念越来越火,响应国家政策的号召,政企机构都开始重视自身的数据质量问题。而技术部门根据业务部门的反馈,立马就会得出结论——是数据质量出了问题,然后开始投入大量人力物力开始做数据质量的提升。但是结果往往是短期内数据质量的确得到了提升,一个时间周期过去后,该有的数据质量问题还是在那里。总是先污染后治理,成本花了很多,问题没有得到根本解决。

诚然,数据质量的提升作为数据治理环节中非常重要的一环,我们的确需要重视,但是我们知其然,还要知其所以然,从数据质量问题出发,我们还得知道到底为什么会导致这些数据质量问题,从数据问题的源头做数据质量的管控,这就不得不提到数据标准管理

数据标准并不能简单的认为就是国家或者行业内出的一些标准文档,我们认为数据标准不仅只是一套规范,而是一套由管理规范、管控流程、技术工具共同组成的体系,是通过这套体系逐步实现信息标准化的过程。数据标准化是通过一整套的数据规范、管控流程和技术工具来确保的各种重要信息,例如产品、客户、机构、账户等在全公司内外的使用和交换都是一致、准确的过程。

如何做好数据标准管理呢?

接下来就以亿信华辰睿治数据治理平台中的数据标准功能模块为参考来简述我们到底该如何去做好数据质量的把控,让我们做到“先治理,避免污染”。主要从两个方面来简述,一是数据标准的建立;二是数据标准的落地及管控。

数据标准管理

数据标准监控


数据标准管理

数据标准管理


数据标准管理

数据标准落地评估查询

提前做好数据的规范以及数据管理的规范可以有效的解决大部分数据问题,睿治数据标准提供标准发现的功能,可以快速的发现哪些字段是需要建立标准的,标准管理员可以自行进行比对和判断,是否建立该标准,然后经过不同的业务部门的评审和会签,既是对新建标准的合法性和权威性的认定,也是对各业务部门数据管理员的一次通知,进而不断地去修正不符合标准的数据,提升元数据质量。业务系统的数据管理员也可以根据监管需要或者业务需要来申请新的数据标准,通过这样两种不同的角色、不同的方式来不断完善数据标准体系。

另外除了不断完善标准体系,还会定期地做元数据的标准覆盖率分析,定期出元数据的标准覆盖率分析报告,对于不达标的系统可以通过灵活的工作流催办,提升元数据的标准覆盖率。除了标准覆盖率分析,还会进行数据标准的落地评估,定期产出数据标准评估报告,对于不达标的元数据进行通报,不能让辛苦建好的数据标准成了摆设。

双管齐下,不仅建立完善的数据标准体系,还得用好数据标准,不能让数据标准文档成为一纸空谈。形成完整的数据标准管理流程,将数据标准的建立前置,而不是等到出现数据质量问题才回头发现是因为某些元数据不符合数据标准导致的,从而避免总是先污染后治理。

写在最后:

对于很多企业而言,数据就像血液,数据健康了才能在身体内各器官很好的流转,为各器官提供能量。数据的管理也是一样,不要等数据真的被污染了,才进行数据清洗,应该要做的是建立完善的数据标准管理体系,不要让一些垃圾流入我们的血液,这样健康的数据才能发挥出应有的价值。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 大数据治理的语义方法

    大数据治理的语义方法

    正如Coyne所说:“数据治理正在成长为一套实践,软件和系统是其中不可或缺的一部分。但他们只是其中的一部分。您在更高层次上拥有的是实践和……查看详情

    发布时间:2019.03.05来源:亿信华辰浏览量:99次

  • 浅析银行业如何做数据治理

    浅析银行业如何做数据治理

    2018年5月,银保监会发布《银行业金融机构数据治理指引》,从数据治理架构、数据管理、数据质量控制、数据价值实现、监督管理等方面规范银行……查看详情

    发布时间:2019.06.14来源:亿信华辰浏览量:88次

  • 大数据管理实践在风险中受到关注

    大数据管理实践在风险中受到关注

    越来越多的情况是,数据专业也必须将这种态度带到更大的世界。……查看详情

    发布时间:2019.03.21来源:亿信华辰浏览量:78次

  • 数据治理理论

    数据治理理论

    数据治理是对数据资产的管理行使权力和控制的活劢集合(规划、监控和执行)。数据治理职能指导其他数据管理职能如何执行。……查看详情

    发布时间:2019.08.27来源:知乎浏览量:188次

  • 主数据管理从哪着手?如何进行?

    主数据管理从哪着手?如何进行?

    所有主数据必须使用同一编码规则,如果编码不同,系统永远无法打通对接。如果有国标,尽量采用国标,未来也便于对接供应链体系中上下游的供应商和……查看详情

    发布时间:2021.05.07来源:亿信数据治理知识库浏览量:166次

  • 普及元数据和主数据的联系与定义

    普及元数据和主数据的联系与定义

    在数据治理中,我们总是会听到元数据和主数据,我们今天就可以来说说什么是元数据,什么是主数据。1、元数据(metadata)描述数据的数据……查看详情

    发布时间:2020.08.31来源:CSDN浏览量:118次

  • 基础数据标准 – 从制定到落实

    基础数据标准 – 从制定到落实

    标准,是旨在一定范围内维护最佳秩序,经协商一致制定并公开颁布认定、共同遵循的一种规范性要求。……查看详情

    发布时间:2019.12.20来源:知乎浏览量:133次

  • 数据治理是一种数据管理概念-维基百科

    数据治理是一种数据管理概念-维基百科

    数据治理是一种数据管理概念,涉及使组织能够确保在数据的整个生命周期中存在高数据质量的能力。数据治理的关键重点领域包括可用性,可用性,一致……查看详情

    发布时间:2018.11.12来源:维基百科浏览量:86次

  • 数据治理为什么会重新引起关注?

    数据治理为什么会重新引起关注?

    这突出了数据治理的重要性。由数据治理研究所定义为“信息相关过程的决策权和责任系统,根据商定的模型执行,描述谁可以采取什么行动与什么信息,……查看详情

    发布时间:2019.09.04来源:知乎浏览量:103次

  • 如何成功实现数据治理

    如何成功实现数据治理

    如果你处理过大量数据,你也许听说过“数据治理”一词,你可能会想,它是什么?适不适合你?如何实施?简单来说,数据治理就是处理数据的策略——……查看详情

    发布时间:2020.03.19来源:知乎浏览量:93次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议