立即扫码
享受一对一服务
数据质量管理趋势
发布时间：2019.11.15来源：知乎浏览量：369次标签：数据治理
关注数据质量的同时，还要进一步关注覆盖范围更加广泛、涉及层面更加深入的信息质量，这也是数据管理需要思考的问题。苏联数学家Kolmogorov对信息的定义是：“信息是在给内数据集内的对客观事物的语义描述”。进一步信息又可分为物理信息和语义信息两类，其中物理层面的信息反映基础的数据结构；语义信息属于进阶有含义的语义数据结构，反映人类的视角。
目前数据质量管理方法中对于语义信息的关注较少，更多的是关注常规物理信息，以及可以转化为物理信息的语义信息，其原因在于信息质量更为复杂。错误的数据能导致错误的信息，物理信息容易度量，语义信息相对较难用简单的规则度量。在一个数据挖掘应用中，错误的语义信息会来源于知识发现过程中的数据集选择、模型选择、参数选择、验证方式选择，基本上所有的过程都需要加入人为的理解因素。从传统软件开发质量保障角度，也需要对语义相关的信息质量进行考虑，确保数据价值的不被曲解或者损失。在移动计算、物联网、大数据等新理念趋势下，信息质量面临的问题更加值得关注。
目前数据质量管理方法中对于语义信息的关注较少，更多的是关注常规物理信息，以及可以转化为物理信息的语义信息，其原因在于信息质量更为复杂。错误的数据能导致错误的信息，物理信息容易度量，语义信息相对较难用简单的规则度量。在一个数据挖掘应用中，错误的语义信息会来源于知识发现过程中的数据集选择、模型选择、参数选择、验证方式选择，基本上所有的过程都需要加入人为的理解因素。从传统软件开发质量保障角度，也需要对语义相关的信息质量进行考虑，确保数据价值的不被曲解或者损失。在移动计算、物联网、大数据等新理念趋势下，信息质量面临的问题更加值得关注。
从整体数据管理角度来看，语义信息的质量保障依赖于整体数据管理水平，数据治理、元数据、数据标准等活动都会发挥作用。数据治理定义数据质量相关角色、职责，元数据、数据标准为一致性的语义理解提供参考作用。近年来软件即服务（SaaS）和云计算应用（Cloud-Based）趋势日益明显，信息技术新趋势的影响也促使数据质量管理从独立的闭环机制拓展到完整的宏观数据质量管理体系。银监会于2011年发布银行监管统计数据质量管理良好标准，该标准以数据质量为目标涵盖组织、制度、系统和流程建设，是银行开展全面数据质量管理的有益参考。
（部分内容来源网络，如有侵权请联系删除）
立即免费申请产品试用
预约演示
相关文章推荐
-
2025年大数据分析发展的预测
全球每天的互联网搜索、点击、分享、喜欢和刷卡都会产生大约2 5艾字节的数据。这仅仅是由于物联网推动的。IDC公司预测，到2025年数据量……查看详情发布时间：2019.03.07来源：亿信华辰浏览量：362次
-
数据治理引领企业数字化转型
随着数字化时代的到来，数据已经成为了企业的重要资产之一。然而，如何确保数据的质量、安全性和合规性，成为了企业面临的难题。作为国内知名的数……查看详情发布时间：2023.09.26来源：互联网浏览量：516次
-
数据治理：清洁客户数据的注意事项
根据相关研究显示，超过50％的企业花在清理数据上的时间比实际使用时要多，确保数据质量对营销成功至关重要。……查看详情发布时间：2019.06.28来源：知乎浏览量：432次
-
商业银行数据治理从源头抓起 坚持数据标准先行
商业银行数据治理是一门将数据视为一项资产的学科。它涉及到银行以资产的形式对数据进行优化、保护和利用的决策权利。糟糕的数据管理意味着糟糕的……查看详情发布时间：2019.09.04来源：知乎浏览量：402次
-
面对如今的数据挑战企业如何有效地进行数据治理
数据治理是对数据资产管理行使权力和控制的活动集合，数据治理是识别、管理和解决几种不同类型数据相关问题的手段，包括数据质量问题、数据命名和……查看详情发布时间：2019.08.29来源：知乎浏览量：476次
-
-
超越法规遵从：从数据治理创造业务价值
基于模型的，基于标准的数据治理语义方法正迅速成为整个金融领域的行业规范。这方面的一些最普遍和开拓性的努力是由企业数据管理委员会（EDMC……查看详情发布时间：2019.02.28来源：亿信华辰浏览量：511次
-
主数据管理第一步——识别主数据
主数据管理的目的就是为了确保企业核心数据的准确性、一致性、稳定性，打破数据孤岛，帮助企业高效运转。然而在茫茫数据大海中识别出主数据是一项……查看详情发布时间：2019.10.24来源：亿信华辰浏览量：502次
-
2019年采用大数据发生重大变化的6个行业
如今，大数据的应用对几乎任何行业的发展都会产生积极的影响，而采用这项技术，一些行业比其他行业更有可能发生重大的变化。以下是采用大数据发生……查看详情发布时间：2019.02.14来源：亿信华辰浏览量：327次
-
数据治理和数据管理推动成功的词汇表和词典
任何数据管理员的噩梦都是运行会议，创建迂腐和无关的业务词汇表或数据词典，最终收集网络粉尘。但是，跳过构建和维护良好的业务术语表或数据字典……查看详情发布时间：2018.12.27来源：亿信华辰浏览量：449次
相关主题