数据治理思考:数据质量如何监控

发布时间:2022.01.21来源:小亿浏览量:315次标签:数据治理

近年来,数字经济成为我国国民经济高质量发展的新动能,而数字经济能否高质量发展还取决于数据治理水平是否够高。目前的数字经济面临数字鸿沟加大和网络碎片加剧两大挑战,数据和信息孤岛问题日益严重,数据作为市场要素的潜力亟待释放。而数据治理就是解决这些问题的关键方法,提升数据质量早就应该被提上日程。

究竟数据治理有什么意义,又应该如何通过数据治理的方式提高数据质量呢?小亿今天和大家一起来探讨。

图片1.png

一、数据治理的意义

2021年9月7号清华大学互联网治理研究中心主任李晓东在首届中国数字碳中和高峰论坛上说到:“通过数据治理可以提升数据流通利用水平、优化数据治理结构,改善数字鸿沟和网络碎片的问题,助力数字经济的发展”,而数据治理的意义就包含在这一段话里。但是具体的数据治理意义,我们细细看来。

从数据在企业中的应用过程来看,数据收集之后要经过数据治理才能进行数据分析。有一个高效合理的数据治理过程能够更好的在企业的部门间打通数据,连通企业内部数据。只有把数据连接起来,它才能发挥更大的价值,消除数据孤岛。就像睿治智能数据治理平台,它由亿信华辰研发。是一款融合数据治理十大产品模块,覆盖数据全生命周期管理的应用平台,也是目前国内功能齐全的数据治理工具,助力数据标准落地,提升数据质量,实现数据资产融合,为企业打通数据,助力企业发展。

图片2.png

二、数据质量的监控方式

提高数据质量是数据治理的重要意义,其实数据质量监控主要分为两个方面,一是监,监督,数据治理检验;二是控,控制和处理。

先来看监,就是数据治理检验。根据数据质量校验的对象,可以分为离线检查和实时检查。离线检查就是指可以指离线的对一些数据集 DataSet进行检查,实时检查则是对数据处理流的检查。数据治理检验不仅要从数据源头的元数据进行,还要数在数据采集过程中将数据分为“好数据”“坏数据”,“好数据”入库,“坏数据”则反馈给源头修复,因为数据来源部门最懂这些数据,也最能在源头上把数据问题彻底修复掉。亿信数据质量管理平台以数据标准为数据检核依据,以元数据为数据检核对象,通过向导化、可视化等简易操作手段,将质量评估、质量检核、质量整改与质量报告等工作环节进行流程整合,形成完整的数据质量管理闭环,从而提高数据质量。

图片3.png

再来看控,就是控制和处理。简单的说就是当出现数据质量问题或者问题未出现时,数据质量如何控制。数据质量监控过程中,会发现两类问题,一类是源头的数据质量问题,出现了上游数据污染,这时需要及时阻塞下游任务,并处理上游任务。另一类是数据中心的数据质量问题,数据质量团队需要将这些问题及时反馈给数据仓库建设团队,从而根据这些反馈制定相应的措施和策略,对数据质量进行控制。


其实,数据质量监控是一个在快速发展的业务中最容易被牺牲和忽略的功能,但是它确实至关重要的。企业如果忽略了数据质量的重要作用,可能会导致一系列问题,所以注重数据治理不仅能够促使企业打破数据壁垒更能够让企业在数据质量方面有所提升。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理的未来:平衡数据治理和数据管理

    数据治理的未来:平衡数据治理和数据管理

    “如何通过快速访问高质量数据,灌输信心并支持数据驱动的决策,为业务合作伙伴创造竞争优势?” Citizens Bank首席数据官(CDO……查看详情

    发布时间:2019.02.21来源:亿信华辰浏览量:150次

  • 企业数据治理中的应对

    企业数据治理中的应对

    首先,数据治理的核心认识是,数据治理是一个持续并且长久的一个过程,不同的产品可以解决比如采集、传输等数据治理层面上的不同问题,但并不存在……查看详情

    发布时间:2019.11.01来源:知乎浏览量:147次

  • 大数据时代,我们将面临数据治理的新阶段

    大数据时代,我们将面临数据治理的新阶段

    目前业界并没有对其概念的统一标准定义,我们可以这么认为,数据治理从本质上看就是对一个机构(企业或政府部门)的数据从收集融合到分析管理和利……查看详情

    发布时间:2020.03.26来源:知乎浏览量:109次

  • 保险行业怎样打造数据治理闭环?

    保险行业怎样打造数据治理闭环?

    今天给大家分享一下保险行业数据治理的心得,个人认为保险行业的数据治理可以作为标杆了。根据以下3点我们来了解下保险行业是如何打造数据治理的……查看详情

    发布时间:2022.01.23来源:互联网浏览量:143次

  • 企业数据治理的重点和难点在那里?

    企业数据治理的重点和难点在那里?

    企业数据治理的重点和难点主要体现在以下4点:.需要企业高层支持,将数据治理工作放在企业重点工作中,保证对数据治理项目人力物力的投入,提高……查看详情

    发布时间:2019.09.18来源:知乎浏览量:276次

  • 企业数据中台建设过程中面临的三大挑战

    企业数据中台建设过程中面临的三大挑战

    业务挑战:如何以大数据赋能,反哺业务精耕? 越是成功的企业,业务发展的痛点越难以单点解决,需要整体思考、科学决策、集体行动,在业务的创……查看详情

    发布时间:2020.07.10来源:知乎浏览量:133次

  • 数据治理—做好这些就够了!

    数据治理—做好这些就够了!

    Gartner预测,“到2023年,75%的数据库都将位于云平台上,从而增加了数据治理和集成的复杂性 ”。随着组织收集更多数据(包括在防……查看详情

    发布时间:2019.03.14来源:亿信华辰浏览量:133次

  • 说到数据治理,我们不得不要谈到的要素和落地方法

    说到数据治理,我们不得不要谈到的要素和落地方法

    据戴尔易安信最新调查显示:全球大多数企业现已认识到数据的价值,受管理的平均数据量从2016年的1.45PB增加至2018年的9.70PB……查看详情

    发布时间:2020.06.29来源:CSDN浏览量:153次

  • 数据治理的最佳实践

    数据治理的最佳实践

    数据治理是指确保数据在输入系统时满足精确标准和业务规则的一组流程。数据治理使企业能够控制数据资产的管理。这包括使数据适合其预期目的所需的……查看详情

    发布时间:2018.12.26来源:数据治理浏览量:132次

  • 指数技术时代的数据治理

    指数技术时代的数据治理

    新兴的数据需求和数据生成技术需要两种类型的数据治理:安全性,以及整体企业级治理的需求,而不是逐个孤岛的治理。企业中出现了一个重要的新价值……查看详情

    发布时间:2019.01.02来源:亿信华辰浏览量:158次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议