立即扫码
享受一对一服务
数据质量管理趋势
发布时间：2019.11.15来源：知乎浏览量：157次标签：数据治理
关注数据质量的同时，还要进一步关注覆盖范围更加广泛、涉及层面更加深入的信息质量，这也是数据管理需要思考的问题。苏联数学家Kolmogorov对信息的定义是：“信息是在给内数据集内的对客观事物的语义描述”。进一步信息又可分为物理信息和语义信息两类，其中物理层面的信息反映基础的数据结构；语义信息属于进阶有含义的语义数据结构，反映人类的视角。
目前数据质量管理方法中对于语义信息的关注较少，更多的是关注常规物理信息，以及可以转化为物理信息的语义信息，其原因在于信息质量更为复杂。错误的数据能导致错误的信息，物理信息容易度量，语义信息相对较难用简单的规则度量。在一个数据挖掘应用中，错误的语义信息会来源于知识发现过程中的数据集选择、模型选择、参数选择、验证方式选择，基本上所有的过程都需要加入人为的理解因素。从传统软件开发质量保障角度，也需要对语义相关的信息质量进行考虑，确保数据价值的不被曲解或者损失。在移动计算、物联网、大数据等新理念趋势下，信息质量面临的问题更加值得关注。
目前数据质量管理方法中对于语义信息的关注较少，更多的是关注常规物理信息，以及可以转化为物理信息的语义信息，其原因在于信息质量更为复杂。错误的数据能导致错误的信息，物理信息容易度量，语义信息相对较难用简单的规则度量。在一个数据挖掘应用中，错误的语义信息会来源于知识发现过程中的数据集选择、模型选择、参数选择、验证方式选择，基本上所有的过程都需要加入人为的理解因素。从传统软件开发质量保障角度，也需要对语义相关的信息质量进行考虑，确保数据价值的不被曲解或者损失。在移动计算、物联网、大数据等新理念趋势下，信息质量面临的问题更加值得关注。
从整体数据管理角度来看，语义信息的质量保障依赖于整体数据管理水平，数据治理、元数据、数据标准等活动都会发挥作用。数据治理定义数据质量相关角色、职责，元数据、数据标准为一致性的语义理解提供参考作用。近年来软件即服务（SaaS）和云计算应用（Cloud-Based）趋势日益明显，信息技术新趋势的影响也促使数据质量管理从独立的闭环机制拓展到完整的宏观数据质量管理体系。银监会于2011年发布银行监管统计数据质量管理良好标准，该标准以数据质量为目标涵盖组织、制度、系统和流程建设，是银行开展全面数据质量管理的有益参考。
（部分内容来源网络，如有侵权请联系删除）
立即免费申请产品试用
免费试用
相关文章推荐
-
数据是超乎想象的商业资产 - 这就是为什么（以及在哪里）
说数据是商业资产几乎变得尴尬，应该被视为一个（信息也是如此）。 “数据是资产”或“数据是商业资产”消息并不新鲜。它可以追溯到二十年……查看详情发布时间：2018.12.20来源：数据治理浏览量：138次
-
-
企业如何提升数据质量？
在这个大数据时代，数据资产逐渐成了构成成企业核心竞争力的关键要素，然后，大数据的应用必须建立在高质量的数据上才有意义，因此提供数据质量是……查看详情发布时间：2019.07.26来源：知乎浏览量：114次
-
数据质量问题的影响因素
数据质量反映的是数据的“适用性（fitness for use）”，即数据满足使用需要的合适程度。数据质量通过完整性、一致性、准确性、及……查看详情发布时间：2020.04.09来源：百度浏览量：551次
-
企业如何成功的实现数据治理？
当下是一个大数据的时代，如果一个企业没有数据，那么在做决策时就缺乏数据的支持，但是如果企业有了数据，不对数据进行治理，那么就无法充分有效……查看详情发布时间：2019.07.18来源：知乎浏览量：144次
-
“数据治理”：重构和愿景
对于数据业者而言，数据治理（datagovernance）并不陌生。根据国际标准化组织IT服务管理与IT治理分技术委员会、国际数据治理研……查看详情发布时间：2020.06.19来源：CSDN浏览量：146次
-
当下企业数据治理有哪些重要性？
随着大数据相关技术的不断成熟，数据作为一种资产，得到了越来越多企业机构的重视，为了能够有效的利用数据资产，数据治理成了当下政府和企业重点……查看详情发布时间：2019.07.18来源：知乎浏览量：88次
-
数据治理工作的难点主要体现在那些方面？
由哪个部门主导；人员应该怎样配置；各个数据治理角色的职责分别是什么。这些一定需要明确，一个职责分工明确的团队将更好的推进数据治理工作。建……查看详情发布时间：2019.09.18来源：知乎浏览量：183次
-
面对如今的数据挑战企业如何有效地进行数据治理
数据治理是对数据资产管理行使权力和控制的活动集合，数据治理是识别、管理和解决几种不同类型数据相关问题的手段，包括数据质量问题、数据命名和……查看详情发布时间：2019.08.29来源：知乎浏览量：169次
-
您不应该进行数据治理的3个理由
今天有很多关于数据治理的讨论。但令人惊讶的是，今天“进行数据治理”的组织数量并不高。在我看来，数据治理是现代数据驱动型企业的必备条件。但……查看详情发布时间：2018.12.13来源：数据治理浏览量：124次
相关主题