数据治理思考:数据质量如何监控

发布时间:2022.01.21来源:小亿浏览量:778次标签:数据治理

近年来,数字经济成为我国国民经济高质量发展的新动能,而数字经济能否高质量发展还取决于数据治理水平是否够高。目前的数字经济面临数字鸿沟加大和网络碎片加剧两大挑战,数据和信息孤岛问题日益严重,数据作为市场要素的潜力亟待释放。而数据治理就是解决这些问题的关键方法,提升数据质量早就应该被提上日程。

究竟数据治理有什么意义,又应该如何通过数据治理的方式提高数据质量呢?小亿今天和大家一起来探讨。

图片1.png

一、数据治理的意义

2021年9月7号清华大学互联网治理研究中心主任李晓东在首届中国数字碳中和高峰论坛上说到:“通过数据治理可以提升数据流通利用水平、优化数据治理结构,改善数字鸿沟和网络碎片的问题,助力数字经济的发展”,而数据治理的意义就包含在这一段话里。但是具体的数据治理意义,我们细细看来。

从数据在企业中的应用过程来看,数据收集之后要经过数据治理才能进行数据分析。有一个高效合理的数据治理过程能够更好的在企业的部门间打通数据,连通企业内部数据。只有把数据连接起来,它才能发挥更大的价值,消除数据孤岛。就像睿治智能数据治理平台,它由亿信华辰研发。是一款融合数据治理十大产品模块,覆盖数据全生命周期管理的应用平台,也是目前国内功能齐全的数据治理工具,助力数据标准落地,提升数据质量,实现数据资产融合,为企业打通数据,助力企业发展。

图片2.png

二、数据质量的监控方式

提高数据质量是数据治理的重要意义,其实数据质量监控主要分为两个方面,一是监,监督,数据治理检验;二是控,控制和处理。

先来看监,就是数据治理检验。根据数据质量校验的对象,可以分为离线检查和实时检查。离线检查就是指可以指离线的对一些数据集 DataSet进行检查,实时检查则是对数据处理流的检查。数据治理检验不仅要从数据源头的元数据进行,还要数在数据采集过程中将数据分为“好数据”“坏数据”,“好数据”入库,“坏数据”则反馈给源头修复,因为数据来源部门最懂这些数据,也最能在源头上把数据问题彻底修复掉。亿信数据质量管理平台以数据标准为数据检核依据,以元数据为数据检核对象,通过向导化、可视化等简易操作手段,将质量评估、质量检核、质量整改与质量报告等工作环节进行流程整合,形成完整的数据质量管理闭环,从而提高数据质量。

图片3.png

再来看控,就是控制和处理。简单的说就是当出现数据质量问题或者问题未出现时,数据质量如何控制。数据质量监控过程中,会发现两类问题,一类是源头的数据质量问题,出现了上游数据污染,这时需要及时阻塞下游任务,并处理上游任务。另一类是数据中心的数据质量问题,数据质量团队需要将这些问题及时反馈给数据仓库建设团队,从而根据这些反馈制定相应的措施和策略,对数据质量进行控制。


其实,数据质量监控是一个在快速发展的业务中最容易被牺牲和忽略的功能,但是它确实至关重要的。企业如果忽略了数据质量的重要作用,可能会导致一系列问题,所以注重数据治理不仅能够促使企业打破数据壁垒更能够让企业在数据质量方面有所提升。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 预约演示
相关文章推荐
  • 形成,风暴,规范,表演 - 实现数据治理

    形成,风暴,规范,表演 - 实现数据治理

    启动数据治理计划是整个组织需要参与的重要任务。来自数据治理团队的这些见解已经在他们的旅程中取得了一些进展,这突出了团队内部和整个组织内的……查看详情

    发布时间:2019.02.25来源:亿信华辰浏览量:493次

  • 2019年数据保护政策趋势展望

    2019年数据保护政策趋势展望

    在全球数据保护法律政策中,欧美仍将扮演引领性角色。欧盟“e-PR”或带来更严格规制。美国联邦与地方隐私立法互补。……查看详情

    发布时间:2019.02.19来源:亿信华辰浏览量:384次

  • 确保数据治理正确 - 为医疗机构提供五个机会

    确保数据治理正确 - 为医疗机构提供五个机会

    医疗保健组织拥有的数据非常有价值 - 它可能是他们拥有的最有价值的资产。在个人层面,患者数据通常包含了解疾病和潜在康复的关键。从更广泛的……查看详情

    发布时间:2019.02.25来源:亿信华辰浏览量:415次

  • 政务数据治理真落地!让数据多跑路,让群众少跑腿

    政务数据治理真落地!让数据多跑路,让群众少跑腿

    DT时代,人们对“大数据”一词已不再陌生,但“数据治理是什么?数据治理和我们有什么关系?”,恐怕普通大众还是很难说清楚。实际上,现在已经……查看详情

    发布时间:2019.11.20来源:亿信华辰浏览量:529次

  • 两会各地人大代表对于大数据都关心什么?

    两会各地人大代表对于大数据都关心什么?

    两会的召开,各地人大代表针对各个领域、行业、产业纷纷提出了许多具有高价值的议题。针对不同地区的情况与发展势态,各地代表对于大数据的运用与……查看详情

    发布时间:2019.03.11来源:大数据浏览量:417次

  • 数据治理的十五个最佳实践

    数据治理的十五个最佳实践

    数据治理研究所(DGI)认为,它是一套切实可行的框架,帮助任何组织的各种数据利益相关方识别并满足其信息需求。DGI认为,企业不仅需要管理……查看详情

    发布时间:2020.07.31来源:知乎浏览量:425次

  • 谷歌的记录,gdpr罚款:避免这种命运与数据治理

    谷歌的记录,gdpr罚款:避免这种命运与数据治理

    通用数据保护条例(gdpr)第一次产生了真正的影响,因为谷歌的记录gdpr罚款主导了新闻周期。……查看详情

    发布时间:2019.02.13来源:亿信华辰浏览量:437次

  • 数据不是石油,占得多未必有用

    数据不是石油,占得多未必有用

    如果您从事数据科学或相关领域的工作,您可能之前听过这个说法:数据是新的石油资源。……查看详情

    发布时间:2019.02.14来源:亿信华辰浏览量:392次

  • 数据治理成熟度评估

    数据治理成熟度评估

    数据治理成熟度反映了组织进行数据治理所具备的条件和水平,包括元数据管理、数据质量管理、业务流程整合、主数据管理和信息生命周期管理。……查看详情

    发布时间:2020.07.17来源:知乎浏览量:854次

  • 2021年数据治理框架最佳实践方法

    2021年数据治理框架最佳实践方法

    数据治理是企业用来管理、利用和保护其数据的过程。在这种情况下,数据可以表示公司的全部数字资产和纸质资产或子集。数据治理的另一个方面是保护……查看详情

    发布时间:2021.07.14来源:亿信数据治理知识库浏览量:653次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议