大数据时代,我们将面临数据治理的新阶段
发布时间:2020.03.26来源:知乎浏览量:64次标签:数据治理
目前业界并没有对其概念的统一标准定义,我们可以这么认为,数据治理从本质上看就是对一个机构(企业或政府部门)的数据从收集融合到分析管理和利用进行评估、指导和监督(EDM)的过程, 通过提供不断创新的数据服务, 为企业创造价值。
DGI(Data Governance Institute,数据治理研究所)认为,企业不仅需要管理数据的系统,更需要一个完整的规则系统以及规章流程。数据治理基本上涵盖了企业所有与数据有关的内容,因此在整个企业范围内,包括工作流程、涉及人员和使用的技术等等,都需要经过仔细考量,以保证数据的可用性、一致性、完整性、合规性、和安全性,确保在整个数据生命周期中,都具有较高的数据质量。
总体来说,数据治理的目标就是提高数据质量,将数据价值最大化。具体而言,数据治理的任务包括以下几点:
● 构筑适配灵活、标准化、模块化的多源异构数据资源接入体系;
● 建设规范化、流程化、智能化的数据处理体系;
● 打造数据精细化治理体系、组织的数据资源融合分类体系;
● 构建统一调度、精准服务、安全可用的信息共享服务体系。
为何数据治理如此重要?
分析机构BARC在一项研究中对全球378家公司进行了调查,96%的受访企业认为,数据治理已经不可或缺,而且未来将继续在企业中发挥核心作用。调查显示,合规性(64%)、更有效地使用数据(54%),以及与业务相关的内部和外部数据的不断增加(54%)是企业制定数据治理计划的主要驱动因素。
企业如果缺乏有效的数据治理策略,最直接的,将产生大量的“劣质”数据,这些数据的存在可能会带来更大的风险,更高的管理成本,更低的工作效率等等。甚至于,在数据分析如此盛行的当下,劣质数据将对企业决策产生消极的影响——错误的数据,得到错误的结果。
制定良好的数据治理计划,所带来的优势是非常显著的,主要有:
●企业将获得更干净、质量更高的数据,为进一步的数据活动打好基础
●标准化的数据资产管理方法、流程和策略,将有效提高数据运营效率
●使数据更容易与业务建立紧密连系,推动数据资产的变现
●提高数据安全性,保证合规性
总体来说,数据治理能够带来的好处就在于,更高效地帮助企业将数据价值转化成实际的业务价值。
数据“井喷”仍在进行,机器学习、AI等这类十分依赖数据质量的技术持续火热,全球数字化转型浪潮也在全面推进,由此可见,数据治理未来将继续在组织的数字战略计划中占有重要地位。
大数据时代,数据治理面临新的困境
数据治理并不是一个新词,最初企业中的数据治理是相对简单的。几乎所有被治理的数据,都是在企业内部的事务处理系统中生成,与现在相比,数据量较低,数据类型、IT环境也比较单一。随着IT技术的整体发展,特别是大数据时代的到来,数据治理的“担子”变得越来越重。
IT应用类型、数据源、数据分析方法不断增加,数据治理进入了一个新的变革和发展阶段。面向大数据的数据治理,应该具有更高的能动性,需要跟上更快的IT环境变化速度,做出积极的反应。可以说,在新的发展阶段,数据治理的各项要求将变得更加具有挑战性。
大数据治理必须跟踪跨多个平台的数据访问和使用情况,并减轻数据使用不当造成的风险。在大数据环境中,验证数据源并确保数据质量和数据完整性成为一个巨大的挑战;此外,海量数据的存储、如何最大化数据处理效率、保证数据可靠性与安全性也更具难度。
-
大数据时代 这样炼钢——亿信华辰
铁流滚滚,四溅迸射出绚丽的火花。经过1个多小时的高温淬炼,高达1500摄氏度的铁水从出铁口喷涌而出,像一条火龙沿着沟槽蜿蜒流动。……查看详情发布时间:2019.02.12来源:亿信华辰浏览量:116次
-
一分钟了解企业主数据系统建设,成功化数据为价值。
“在数据治理的相关资料中,提到了一个概念,叫‘主数据’,究竟什么是主数据,它的收益又在哪?”之所以具有代表性,是因为这是一个典型的企业人……查看详情发布时间:2020.08.28来源:知乎浏览量:70次
-
数据质量管理包括什么方面
数据是组织最具价值的资产之一。企业的数据质量与业务绩效之间存在着直接联系,高质量的数据可以使公司保持竞争力并在经济动荡时期立于不败之地。……查看详情发布时间:2019.11.07来源:知乎浏览量:112次
-
用大数据助力治理现代化
“要运用大数据提升国家治理现代化水平”“要建立健全大数据辅助科学决策和社会治理的机制,推进政府管理和社会治理模式创新”,习近平总书记的重……查看详情发布时间:2019.10.17来源:知乎浏览量:71次
-
如何保证所基于的数据具有高质量?
基于数据决策的前提是数据可靠且相关,数据必须是“真实可信的”,否则“输出将是误导和无效的”。但是学校所收集的数据可能不完全,或者更新不及……查看详情发布时间:2020.10.31来源:知乎浏览量:72次
-
一套完事数据治理平台解决你数据太多、太乱、太杂的问题
智能是基于数据的,而数据又是基于大量人工与工程努力的,所以人工智能还有相当一部分「人工」。数据收集需要人工确定数据源,或者手动写爬虫;数……查看详情发布时间:2019.10.25来源:知乎浏览量:169次
-
SAP利用企业信息管理产品组合的更新推进数据治理和信任
对SAP主数据治理和SAP Agile数据准备应用程序和SAP数据服务软件的更新提供了现代化和全面的功能,可帮助企业轻松,信任和安全地为……查看详情发布时间:2018.12.21来源:SAP浏览量:77次
-
政务数据治理平台案例:佛山某大区政务服务数据管理局
睿治数据治理平台,应用于政务数据治理领域:通过元数据采集业务数据元数据信息,协助数统局梳理政务系统,了解数据含义。通过数据标准,定义政务……查看详情发布时间:2021.04.25来源:亿信华辰浏览量:102次
-
“数据治理那点事”系列之一:那些年我们一起踩过的坑
大数据时代,数据成为社会和组织的宝贵资产,像工业时代的石油和电力一样驱动万物,然而如果石油的杂质太多,电流的电压不稳,数据的价值岂不是大……查看详情发布时间:2019.08.02来源:知乎浏览量:70次