如何避免先污染后治理,浅谈数据标准管理的应用

发布时间:2019.12.13来源:亿信华辰浏览量:229次标签:数据治理

先说一个普遍现象:

近几年来,数据治理的概念越来越火,响应国家政策的号召,政企机构都开始重视自身的数据质量问题。而技术部门根据业务部门的反馈,立马就会得出结论——是数据质量出了问题,然后开始投入大量人力物力开始做数据质量的提升。但是结果往往是短期内数据质量的确得到了提升,一个时间周期过去后,该有的数据质量问题还是在那里。总是先污染后治理,成本花了很多,问题没有得到根本解决。

诚然,数据质量的提升作为数据治理环节中非常重要的一环,我们的确需要重视,但是我们知其然,还要知其所以然,从数据质量问题出发,我们还得知道到底为什么会导致这些数据质量问题,从数据问题的源头做数据质量的管控,这就不得不提到数据标准管理

数据标准并不能简单的认为就是国家或者行业内出的一些标准文档,我们认为数据标准不仅只是一套规范,而是一套由管理规范、管控流程、技术工具共同组成的体系,是通过这套体系逐步实现信息标准化的过程。数据标准化是通过一整套的数据规范、管控流程和技术工具来确保的各种重要信息,例如产品、客户、机构、账户等在全公司内外的使用和交换都是一致、准确的过程。

如何做好数据标准管理呢?

接下来就以亿信华辰睿治数据治理平台中的数据标准功能模块为参考来简述我们到底该如何去做好数据质量的把控,让我们做到“先治理,避免污染”。主要从两个方面来简述,一是数据标准的建立;二是数据标准的落地及管控。

数据标准管理

数据标准监控


数据标准管理

数据标准管理


数据标准管理

数据标准落地评估查询

提前做好数据的规范以及数据管理的规范可以有效的解决大部分数据问题,睿治数据标准提供标准发现的功能,可以快速的发现哪些字段是需要建立标准的,标准管理员可以自行进行比对和判断,是否建立该标准,然后经过不同的业务部门的评审和会签,既是对新建标准的合法性和权威性的认定,也是对各业务部门数据管理员的一次通知,进而不断地去修正不符合标准的数据,提升元数据质量。业务系统的数据管理员也可以根据监管需要或者业务需要来申请新的数据标准,通过这样两种不同的角色、不同的方式来不断完善数据标准体系。

另外除了不断完善标准体系,还会定期地做元数据的标准覆盖率分析,定期出元数据的标准覆盖率分析报告,对于不达标的系统可以通过灵活的工作流催办,提升元数据的标准覆盖率。除了标准覆盖率分析,还会进行数据标准的落地评估,定期产出数据标准评估报告,对于不达标的元数据进行通报,不能让辛苦建好的数据标准成了摆设。

双管齐下,不仅建立完善的数据标准体系,还得用好数据标准,不能让数据标准文档成为一纸空谈。形成完整的数据标准管理流程,将数据标准的建立前置,而不是等到出现数据质量问题才回头发现是因为某些元数据不符合数据标准导致的,从而避免总是先污染后治理。

写在最后:

对于很多企业而言,数据就像血液,数据健康了才能在身体内各器官很好的流转,为各器官提供能量。数据的管理也是一样,不要等数据真的被污染了,才进行数据清洗,应该要做的是建立完善的数据标准管理体系,不要让一些垃圾流入我们的血液,这样健康的数据才能发挥出应有的价值。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 中国地方政府数据治理机构的初步研究:现状与模式

    中国地方政府数据治理机构的初步研究:现状与模式

    立数据治理机构是中国地方政府迎接数字时代的一项重要治理创新。本文对近年来先后成立的地方政府数据治理机构的发展现状进行了详细梳理,对其隶属……查看详情

    发布时间:2019.02.25来源:电子政务网浏览量:522次

  • 做好数据标准管理对企业来说有什么意义?

    做好数据标准管理对企业来说有什么意义?

    数据标准是数据全生命周期质量控制的机制与制度保障,贯穿数据从采集到存储、治理和分析应用的全过程,只有建立一套完备的标准体系,数据标准化之……查看详情

    发布时间:2020.05.08来源:知乎浏览量:224次

  • 提高数据质量的方法

    提高数据质量的方法

    要想真正解决数据质量问题,应该从需求开始,企业往往在定义清楚业务需求后忽略对数据质量的控制,而只对已经产生的数据做检查,然后再将错误数据……查看详情

    发布时间:2019.11.15来源:知乎浏览量:303次

  • 揭开医疗保健数据治理的神秘面纱

    揭开医疗保健数据治理的神秘面纱

    医疗保健逐渐与数据治理产生紧密联系……查看详情

    发布时间:2018.12.26来源:亿信华辰浏览量:269次

  • 如今数据治理与企业密切相关

    如今数据治理与企业密切相关

    随着越来越多的企业建立并广泛应用BI系统,数据治理的话题也在最近被越来越多地提及和讨论。有专家表示,只有建立了一定的数据治理体系,用户……查看详情

    发布时间:2019.01.08来源:亿信华辰浏览量:211次

  • 数据治理到底能治什么,怎么治

    数据治理到底能治什么,怎么治

    近年来,数据治理成为挖掘数据价值的重要手段和工具。随着大数据平台和工业互联网兴起,数据治理平台主要采用数据中台技术和微服务架构初步替代传……查看详情

    发布时间:2020.03.26来源:知乎浏览量:251次

  • 企业怎样保护业务数据的质量

    企业怎样保护业务数据的质量

    企业内容的质量主要从以下三个方面体现:技术人员设计系统时逻辑严谨,符合规范;业务人员通过统一的培训,录入数据时有统一的规范;管理人员发现……查看详情

    发布时间:2019.09.10来源:知乎浏览量:269次

  • 数据质量监控

    数据质量监控

    数据质量监控可以分为数据质量的事前预防控制、事中过程控制和事后监督控制:……查看详情

    发布时间:2019.12.06来源:知乎浏览量:382次

  • 如何做好银行金融大数据治理平台建设

    如何做好银行金融大数据治理平台建设

    大数据、云计算、互联网等技术,将人类带入了一个以PB为单位的大规模生产、分享和应用数据的新时代。当治理的对象发生变化时,治理体系也应进行……查看详情

    发布时间:2019.10.15来源:知乎浏览量:430次

  • 数据治理治什么?在哪治?怎么治?

    数据治理治什么?在哪治?怎么治?

    数据是指对客观事件进行记录并可以鉴别的符号,是对客观事物的性质、状态以及相互关系等进行记载的物理符号或这些物理符号的组合。其实在我看来,……查看详情

    发布时间:2020.06.24来源:知乎浏览量:393次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议