数据治理思考:数据质量如何监控

发布时间:2022.01.21来源:小亿浏览量:323次标签:数据治理

近年来,数字经济成为我国国民经济高质量发展的新动能,而数字经济能否高质量发展还取决于数据治理水平是否够高。目前的数字经济面临数字鸿沟加大和网络碎片加剧两大挑战,数据和信息孤岛问题日益严重,数据作为市场要素的潜力亟待释放。而数据治理就是解决这些问题的关键方法,提升数据质量早就应该被提上日程。

究竟数据治理有什么意义,又应该如何通过数据治理的方式提高数据质量呢?小亿今天和大家一起来探讨。

图片1.png

一、数据治理的意义

2021年9月7号清华大学互联网治理研究中心主任李晓东在首届中国数字碳中和高峰论坛上说到:“通过数据治理可以提升数据流通利用水平、优化数据治理结构,改善数字鸿沟和网络碎片的问题,助力数字经济的发展”,而数据治理的意义就包含在这一段话里。但是具体的数据治理意义,我们细细看来。

从数据在企业中的应用过程来看,数据收集之后要经过数据治理才能进行数据分析。有一个高效合理的数据治理过程能够更好的在企业的部门间打通数据,连通企业内部数据。只有把数据连接起来,它才能发挥更大的价值,消除数据孤岛。就像睿治智能数据治理平台,它由亿信华辰研发。是一款融合数据治理十大产品模块,覆盖数据全生命周期管理的应用平台,也是目前国内功能齐全的数据治理工具,助力数据标准落地,提升数据质量,实现数据资产融合,为企业打通数据,助力企业发展。

图片2.png

二、数据质量的监控方式

提高数据质量是数据治理的重要意义,其实数据质量监控主要分为两个方面,一是监,监督,数据治理检验;二是控,控制和处理。

先来看监,就是数据治理检验。根据数据质量校验的对象,可以分为离线检查和实时检查。离线检查就是指可以指离线的对一些数据集 DataSet进行检查,实时检查则是对数据处理流的检查。数据治理检验不仅要从数据源头的元数据进行,还要数在数据采集过程中将数据分为“好数据”“坏数据”,“好数据”入库,“坏数据”则反馈给源头修复,因为数据来源部门最懂这些数据,也最能在源头上把数据问题彻底修复掉。亿信数据质量管理平台以数据标准为数据检核依据,以元数据为数据检核对象,通过向导化、可视化等简易操作手段,将质量评估、质量检核、质量整改与质量报告等工作环节进行流程整合,形成完整的数据质量管理闭环,从而提高数据质量。

图片3.png

再来看控,就是控制和处理。简单的说就是当出现数据质量问题或者问题未出现时,数据质量如何控制。数据质量监控过程中,会发现两类问题,一类是源头的数据质量问题,出现了上游数据污染,这时需要及时阻塞下游任务,并处理上游任务。另一类是数据中心的数据质量问题,数据质量团队需要将这些问题及时反馈给数据仓库建设团队,从而根据这些反馈制定相应的措施和策略,对数据质量进行控制。


其实,数据质量监控是一个在快速发展的业务中最容易被牺牲和忽略的功能,但是它确实至关重要的。企业如果忽略了数据质量的重要作用,可能会导致一系列问题,所以注重数据治理不仅能够促使企业打破数据壁垒更能够让企业在数据质量方面有所提升。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理如何推动医疗大数据的发展

    数据治理如何推动医疗大数据的发展

    数据治理是一种管理数据的方法,允许组织平衡两个需求:收集和保护信息的需求,同时从信息中获取价值。但它远不止于此。医疗大数据其中的健康数据……查看详情

    发布时间:2019.08.15来源:知乎浏览量:158次

  • 数据治理的全过程

    数据治理的全过程

    数据治理是指从使用零散数据变为使用统一主数据、从具有很少或没有组织和流程治理到企业范围内的综合数据治理、从尝试处理主数据混乱状况到主数据……查看详情

    发布时间:2019.08.07来源:CSDN浏览量:116次

  • 企业架构框架和元模型,指南

    企业架构框架和元模型,指南

    与任何建筑或基础设施项目需要不同的利益相关者和不同的计划视图的方式大致相同,企业架构(EA)也需要相同。……查看详情

    发布时间:2019.02.26来源:亿信华辰浏览量:221次

  • 企业数据治理所面临的挑战

    企业数据治理所面临的挑战

    每年随着数据量的增长,大数据平台需要投资扩容,但大量的存量应用依赖的数据也在同步增长,因此也需要扩容,当然这份冗余的数据会越来越大……查看详情

    发布时间:2019.10.31来源:知乎浏览量:156次

  • 企业数据标准管理价值总结

    企业数据标准管理价值总结

    一个数据一般有业务属性、技术属性和管理属性组成,例如:数据项的业务定义、业务规则、质量规则为该数据的业务属性;数据项的名称、编码、类型、……查看详情

    发布时间:2020.09.18来源:知乎浏览量:138次

  • 企业数据标准管理系统应该这样做!

    企业数据标准管理系统应该这样做!

    提到“标准”二字,我们第一时间能够想到的就是一系列的标准化文档,例如:产品设计标准、生产标准、质量检验标准、库房……查看详情

    发布时间:2020.08.31来源:CSDN浏览量:185次

  • 构建金融大数据标准体系的意义和目标

    构建金融大数据标准体系的意义和目标

    随着政府职能的逐步简政放权,标准作为辅助行业管理、规范行业发展、形成规模化效应的重要手段,将在社会治理体系中发挥更重要的作用。为顺应形势……查看详情

    发布时间:2019.12.27来源:CSDN浏览量:164次

  • 安全合作伙伴共同为云和多云合规性增强数据治理和隐私

    安全合作伙伴共同为云和多云合规性增强数据治理和隐私

    企业可以限制这些风险 - 以及手动控制错误配置,云环境政策孤岛和云锁定的潜在风险……查看详情

    发布时间:2019.01.22来源:亿信华辰浏览量:148次

  • 数据交换平台的功能结构设计与实现

    数据交换平台的功能结构设计与实现

    数据交换平台是数据中心与其它应用系统沟通的桥梁,是进行数据交换的枢纽站。数据交换平台负责从各个业务系统采集数据,对数据进行清洗与整合,按……查看详情

    发布时间:2020.08.06来源:知乎浏览量:336次

  • 数据治理和安全

    数据治理和安全

    从组织的角度来看,通过人力资源技术传递的数据需要尽可能保持清洁,一致和可转移。问题?多个系统,手动流程和其他低效率需要清理脏数据,稍后从……查看详情

    发布时间:2018.12.04来源:数据治理浏览量:225次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议