数据治理思考:数据质量如何监控

发布时间:2022.01.21来源:小亿浏览量:358次标签:数据治理

近年来,数字经济成为我国国民经济高质量发展的新动能,而数字经济能否高质量发展还取决于数据治理水平是否够高。目前的数字经济面临数字鸿沟加大和网络碎片加剧两大挑战,数据和信息孤岛问题日益严重,数据作为市场要素的潜力亟待释放。而数据治理就是解决这些问题的关键方法,提升数据质量早就应该被提上日程。

究竟数据治理有什么意义,又应该如何通过数据治理的方式提高数据质量呢?小亿今天和大家一起来探讨。

图片1.png

一、数据治理的意义

2021年9月7号清华大学互联网治理研究中心主任李晓东在首届中国数字碳中和高峰论坛上说到:“通过数据治理可以提升数据流通利用水平、优化数据治理结构,改善数字鸿沟和网络碎片的问题,助力数字经济的发展”,而数据治理的意义就包含在这一段话里。但是具体的数据治理意义,我们细细看来。

从数据在企业中的应用过程来看,数据收集之后要经过数据治理才能进行数据分析。有一个高效合理的数据治理过程能够更好的在企业的部门间打通数据,连通企业内部数据。只有把数据连接起来,它才能发挥更大的价值,消除数据孤岛。就像睿治智能数据治理平台,它由亿信华辰研发。是一款融合数据治理十大产品模块,覆盖数据全生命周期管理的应用平台,也是目前国内功能齐全的数据治理工具,助力数据标准落地,提升数据质量,实现数据资产融合,为企业打通数据,助力企业发展。

图片2.png

二、数据质量的监控方式

提高数据质量是数据治理的重要意义,其实数据质量监控主要分为两个方面,一是监,监督,数据治理检验;二是控,控制和处理。

先来看监,就是数据治理检验。根据数据质量校验的对象,可以分为离线检查和实时检查。离线检查就是指可以指离线的对一些数据集 DataSet进行检查,实时检查则是对数据处理流的检查。数据治理检验不仅要从数据源头的元数据进行,还要数在数据采集过程中将数据分为“好数据”“坏数据”,“好数据”入库,“坏数据”则反馈给源头修复,因为数据来源部门最懂这些数据,也最能在源头上把数据问题彻底修复掉。亿信数据质量管理平台以数据标准为数据检核依据,以元数据为数据检核对象,通过向导化、可视化等简易操作手段,将质量评估、质量检核、质量整改与质量报告等工作环节进行流程整合,形成完整的数据质量管理闭环,从而提高数据质量。

图片3.png

再来看控,就是控制和处理。简单的说就是当出现数据质量问题或者问题未出现时,数据质量如何控制。数据质量监控过程中,会发现两类问题,一类是源头的数据质量问题,出现了上游数据污染,这时需要及时阻塞下游任务,并处理上游任务。另一类是数据中心的数据质量问题,数据质量团队需要将这些问题及时反馈给数据仓库建设团队,从而根据这些反馈制定相应的措施和策略,对数据质量进行控制。


其实,数据质量监控是一个在快速发展的业务中最容易被牺牲和忽略的功能,但是它确实至关重要的。企业如果忽略了数据质量的重要作用,可能会导致一系列问题,所以注重数据治理不仅能够促使企业打破数据壁垒更能够让企业在数据质量方面有所提升。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理的全球难题:法治化治理如何跟上技术更新步伐?

    数据治理的全球难题:法治化治理如何跟上技术更新步伐?

    随着技术的发展,需要治理的已不只是数据,人工智能算法等领域也成为治理课题。数据、互联网平台、人工智能算法应该如何治理?这在全球范围内都是……查看详情

    发布时间:2019.10.25来源:知乎浏览量:149次

  • 如何构建企业安全易用的数据资产?

    如何构建企业安全易用的数据资产?

    在数据治理架构中,数据资产管理位于底层数据和数据管理与应用之间,处于承上启下的重要地位。对上支撑数据安全管理等职能建设以价值发掘为导向的……查看详情

    发布时间:2021.06.02来源:亿信华辰数据治理知识库浏览量:265次

  • 善治:良好学校的基础

    善治:良好学校的基础

    包机行业的头号问题是什么?大卫弗兰克认为缺乏董事会治理能力。弗兰克说:“强大的董事会将改善特许学校的许多实践问题,从那些正在努力进入高绩……查看详情

    发布时间:2019.03.06来源:亿信华辰浏览量:150次

  • 你以为建设大数据平台就好了,还差这一步

    你以为建设大数据平台就好了,还差这一步

    长期以来,大家一直忽略一个问题:数据跟原来的企业应用系统一样,它是需要被管理的。企业逐渐了解数据所蕴含的价值,对数据的重视程度越来越高。……查看详情

    发布时间:2019.06.03来源:亿信华辰浏览量:146次

  • 用数据治理来拯救当今的大数据应用

    用数据治理来拯救当今的大数据应用

    当今社会,大数据的应用越来越广泛,企业和大数据的结合也越来越紧密。数据,俨然已成企业的重要资产之一。但是,大数据却并不是那么好管理,数据……查看详情

    发布时间:2019.08.15来源:知乎浏览量:145次

  • 启动数据治理框架以取得成功

    启动数据治理框架以取得成功

    许多企业坚持不懈地尝试用数据治理框架来证明自己已经取得了很大的成就。然而,定义那些“伟大的东西”绝非易事 - 因为它们中的大多数只构建了……查看详情

    发布时间:2019.02.13来源:数据治理浏览量:168次

  • 企业如何实现成功的数据治理

    企业如何实现成功的数据治理

    如今,大数据正在社会的各行各业发挥着越来越重要的作用,数据已成为企业的核心资产和重要战略资源,是重要的生产因素。但是数据中存在着各种各样……查看详情

    发布时间:2019.09.09来源:知乎浏览量:200次

  • 数据资产管理实践白皮书(2.0版)

    数据资产管理实践白皮书(2.0版)

    本白皮书版权属于中国信息通信研究院云计算与大数 据研究所,并受法律保护。转载、摘编或利用其它方式使用 本白皮书文字或者观点的,应注明……查看详情

    发布时间:2019.09.02来源:中国信息通信研究院云计算与大数据研究所浏览量:554次

  • 银行数据治理的核心问题

    银行数据治理的核心问题

    银行一直掌握着大量关于客户的数据,数据汇总,存储和分析的持续进步意味着收集的数据提供了不可估量的价值和机会。 ……查看详情

    发布时间:2019.08.14来源:简书浏览量:202次

  • 数据治理中如何做好数据清理与归档

    数据治理中如何做好数据清理与归档

    传统上,数据的清理和归档属于DBA的职责,随着企业数字化转型、数据治理工作的推进,这项工作也被纳入了数据治理工作的重要内容。数据团队定期……查看详情

    发布时间:2022.05.31来源:互联网浏览量:538次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议