如何避免先污染后治理,浅谈数据标准管理的应用

发布时间:2019.12.13来源:亿信华辰浏览量:69次标签:数据治理

先说一个普遍现象:

近几年来,数据治理的概念越来越火,响应国家政策的号召,政企机构都开始重视自身的数据质量问题。而技术部门根据业务部门的反馈,立马就会得出结论——是数据质量出了问题,然后开始投入大量人力物力开始做数据质量的提升。但是结果往往是短期内数据质量的确得到了提升,一个时间周期过去后,该有的数据质量问题还是在那里。总是先污染后治理,成本花了很多,问题没有得到根本解决。

诚然,数据质量的提升作为数据治理环节中非常重要的一环,我们的确需要重视,但是我们知其然,还要知其所以然,从数据质量问题出发,我们还得知道到底为什么会导致这些数据质量问题,从数据问题的源头做数据质量的管控,这就不得不提到数据标准管理

数据标准并不能简单的认为就是国家或者行业内出的一些标准文档,我们认为数据标准不仅只是一套规范,而是一套由管理规范、管控流程、技术工具共同组成的体系,是通过这套体系逐步实现信息标准化的过程。数据标准化是通过一整套的数据规范、管控流程和技术工具来确保的各种重要信息,例如产品、客户、机构、账户等在全公司内外的使用和交换都是一致、准确的过程。

如何做好数据标准管理呢?

接下来就以亿信华辰睿治数据治理平台中的数据标准功能模块为参考来简述我们到底该如何去做好数据质量的把控,让我们做到“先治理,避免污染”。主要从两个方面来简述,一是数据标准的建立;二是数据标准的落地及管控。

数据标准管理

数据标准监控


数据标准管理

数据标准管理


数据标准管理

数据标准落地评估查询

提前做好数据的规范以及数据管理的规范可以有效的解决大部分数据问题,睿治数据标准提供标准发现的功能,可以快速的发现哪些字段是需要建立标准的,标准管理员可以自行进行比对和判断,是否建立该标准,然后经过不同的业务部门的评审和会签,既是对新建标准的合法性和权威性的认定,也是对各业务部门数据管理员的一次通知,进而不断地去修正不符合标准的数据,提升元数据质量。业务系统的数据管理员也可以根据监管需要或者业务需要来申请新的数据标准,通过这样两种不同的角色、不同的方式来不断完善数据标准体系。

另外除了不断完善标准体系,还会定期地做元数据的标准覆盖率分析,定期出元数据的标准覆盖率分析报告,对于不达标的系统可以通过灵活的工作流催办,提升元数据的标准覆盖率。除了标准覆盖率分析,还会进行数据标准的落地评估,定期产出数据标准评估报告,对于不达标的元数据进行通报,不能让辛苦建好的数据标准成了摆设。

双管齐下,不仅建立完善的数据标准体系,还得用好数据标准,不能让数据标准文档成为一纸空谈。形成完整的数据标准管理流程,将数据标准的建立前置,而不是等到出现数据质量问题才回头发现是因为某些元数据不符合数据标准导致的,从而避免总是先污染后治理。

写在最后:

对于很多企业而言,数据就像血液,数据健康了才能在身体内各器官很好的流转,为各器官提供能量。数据的管理也是一样,不要等数据真的被污染了,才进行数据清洗,应该要做的是建立完善的数据标准管理体系,不要让一些垃圾流入我们的血液,这样健康的数据才能发挥出应有的价值。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理流程

    数据治理流程

    数据治理流程必须通过TSDS数据治理流程审查TEA收集的所有数据。此过程允许用户监督 TEA如何从LEA收集立法规定的数据以及为stud……查看详情

    发布时间:2018.11.27来源:数据治理浏览量:112次

  • 数据质量对于数据分析来说至关重要

    数据质量对于数据分析来说至关重要

    数据质量的关键所在包括:大致分为完整性,一致性,准确性,有效性和及时性这五个组件。……查看详情

    发布时间:2019.11.13来源:知乎浏览量:78次

  • 银行业数据治理实践难点及应对-数据治理实践

    银行业数据治理实践难点及应对-数据治理实践

    数据治理已成为在全球各国领导层面进行讨论的中心议题,其背景和目的,主要是旨在推动建立新的国际数据监管体系。在我国的金融行业中,随着互联网……查看详情

    发布时间:2019.12.20来源:知乎浏览量:69次

  • 医疗领域的领导与治理

    医疗领域的领导与治理

    医疗保健领域的董事会感受到与其他类型组织相同的监管压力。对领导力和治理的重视使医疗保健委员会围绕董事会议席表示关注,目标是采取更强有力的……查看详情

    发布时间:2019.03.14来源:亿信华辰浏览量:74次

  • 大数据时代不能没有数据治理

    大数据时代不能没有数据治理

    第一个提出大数据时代到来的是全球知名咨询公司麦肯锡,现如今大数据存在于各个行业,受到了人们的重视。现在社会科技告诉发展,信息流通快,使得……查看详情

    发布时间:2019.08.13来源:知乎浏览量:58次

  • 8 项提高数据完整性的预防性措施

    8 项提高数据完整性的预防性措施

    仅使用一种方法几乎不可能将数据完整性风险降至最低,因此使用多种策略的组合是更好的选择。降低数据完整性风险的一些最有效方法包括8点。……查看详情

    发布时间:2021.07.07来源:亿信华辰数据治理知识库浏览量:464次

  • 来自园艺的5个数据治理课程

    来自园艺的5个数据治理课程

    所有这些数据增长和收购挑战都要求我们重新考虑我们的数据治理策略。我们根本没有确保正确管理和使用数据所需的可见性。我们的首要任务是消除风险……查看详情

    发布时间:2018.12.04来源:Debi Tadd浏览量:153次

  • 数据治理:如何入门

    数据治理:如何入门

    无论是在零售业,银行业还是医疗保健业,如今最精明的商业领袖都将数据列入其顶级企业资产 - 与产品,设备,设施和员工一样有价值 - 并且他……查看详情

    发布时间:2018.11.23来源:Henry DeVries浏览量:88次

  • 数据安全的数据治理

    数据安全的数据治理

    已经为组织提供了数据安全数据治理价值的另一个提醒。……查看详情

    发布时间:2019.01.17来源:亿信华辰浏览量:98次

  • 数据治理—构建你的数据屏障

    数据治理—构建你的数据屏障

    在快速发展的技术,大数据和高级分析的时代,数据治理在每个组织中都发挥着至关重要的作用,无论规模大小或行业如何。从定义元数据管理指南,到解……查看详情

    发布时间:2019.06.28来源:知乎浏览量:72次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议