数据治理的主战场,商业智能还是数据挖掘?

发布时间:2019.02.21来源:知乎浏览量:163次标签:数据治理

一、 什么是数据治理

1、 数据治理是对数据资产的管理行使权力和控制的活动集合(规划、监控和执行),数据治理职能指导其他数据管理职能如何执行。
2、 数据治理是对数据管理和服务行驶权利和控制的活动集合,在数据管理和服务层面之上进行规划、监督和控制,数据治理是数据体系得以落实的高阶保障。
不论其位置在数据体系的中心,还是在上面宏观指导着,都可以简单的概括为这是针对各项管理职能的管理,讨论的是组织、角色、制度、流程之类的内容。

数据治理这门学问,入手极易,精通极难。说说经验吧,数据治理强调两点,一是高层支持,二是各部门广泛参与。组织内数据治理各项工作的开展都要处理好这两个问题,搞定了就能事半功倍。其实这些经验书里都写了,不过在数据治理实践中光看书啥用没有;还是那句话,入手易精通难。看下面DGI的数据治理框架,写的很清晰透彻,但每一步怎么做就能看出本事了。


想要做好数据治理,那要求还是蛮高的,要懂业务、懂数据、懂技术,所谓上能写制度办法,下能查数做分析;另外还要懂权衡、懂策略,甚至学学兵法,因为具体工作八成都是跟人有关,些许复杂。要求虽高,但实践往往要面对无力感和挫败感两种不舒服的体验,只能说还要有合适的性格和心态,不同的人适合不同的岗位了。


二、 商业智能是数据治理的主战场
商业智能描述了一系列的概念和方法,通过应用基于事实的支持系统来辅助商业决策的制定;商业智能技术提供使企业迅速分析数据的技术和方法,包括收集、管理和分析数据,将这些数据转化为有用的信息,然后分发到企业各处(Gartner定义)。


不谈定义,从上面图片中能看到数据采集、加工、整合、应用的生命周期,以及数据标准、数据质量、数据架构、元数据这些职能域,还有数据开发、数据分析、业务指标体系等等应用视角的内容。在dmbok中商业智能与数据仓库放在一起,数据仓库是矛盾集中的焦点,上游是组织内各个业务源系统,下游支持广泛的数据应用。


数据是流行的资产,需要跨系统、跨业务条线的综合治理,需要有机构统筹规划与决策、协调与推进。企业管理数据资产,就是管理数据的生命周期。数据先被创建或获得,然后存储、维护和使用,最终被销毁。有效的数据管理,数据的生命周期开始于数据获取之前,企业先期制定数据规划、定义数据规范,以期获得实现数据采集、交付、存储和控制所需的技术能力。


无论专业角度还是实践角度,商业智能都是数据治理的主战场,在组织内干系人众多,影响范围深远。当然,如果你所在的组织已经完成基本的BI系统建设,需要或已经进入大数据应用建议的水平,那么数据治理的主战场就该转移了。


三、 数据驱动与数据分析

数据时代,尤其是大数据时代,各种名词概念层出不穷。这里面讨论下商业智能、数据分析、数据挖掘、数据驱动,这些名词出现在不同时期,有不同的背景或场景,不在赘述。


概念虽然带来困惑,但其实又无妨,对组织来说关心的是数据价值的实现,组织应该具备的是认同数据的意义和价值,也就是数据之道。从这里看,数据驱动其实更多是一种文化,建立对应的数据价值体系,涵盖数据采集、报告、分析、行动到价值实现的完整流程。增长黑客和AARRR海盗法则这些更适合初创公司,有完整的流程和指标体系可以参考。对于传统行业来说,主要的困难在于无法真正建立这种数据驱动文化,分开来各项活动都在开展,但在整体上难以形成顺畅的流程。当然,这也是我们努力的目标,至少可以先从数据治理和数据应用的层面做好准备。


聊完数据驱动,说说数据分析,这也需要特别强调和澄清的概念。在我的理解和认知中,商业智能和数据挖掘都是数据分析的手段和方法,当然换个角度来看也可以把商业智能放到最后。然而不谈理论和概念,从实际情况看目前商业智能与it系统关联密切,而数据分析涵盖的范围则更广,所以我更倾向于把商业智能和数据挖掘看做是数据分析的手段和方法。


四、 数据挖掘是数据治理未来的主战场

下面要说说数据挖掘了,数据挖掘又称为数据库中知识发现(KDD),它是一个从大量数据中抽取挖掘出未知的、有价值的模式或规律等知识的过程。广义的数据挖掘是指知识发现的全过程,狭义的数据挖掘是指统计分析、机器学习等发现数据模式的智能方法,即偏重于模型和算法。


实际中我们的工作属于广义的数据挖掘,组织对于数据应用的需求也逐步从描述阶段进入到挖掘阶段。尤其是大数据时代,数据挖掘是大数据王冠上的明珠,甚至有人认为大数据仅仅是数据挖掘的另外一个名称。数据挖掘涉及数据来源、干系人范围可以超出组织层面,对于数据治理活动来说可以顺利接棒商业智能成为主战场,同时也对数据治理提出了更高的需求。

现在讨论大数据下的数据挖掘,应该和场景关联起来思考问题,因为数据质量和业务需求、技术方案密切相关。场景本身就是需要数据治理需要考虑的问题,以及对应的流程机制都需要进行规划。


数据挖掘直接关心的是数据质量,而数据质量是人与人矛盾分歧最大的职能域,所以通常也配置全套的数据治理手段。细节不多谈,现在讨论大数据下的数据挖掘,应该和场景关联起来思考问题,因为数据质量和业务需求、技术方案密切相关。大数据背景下数据质量的属性扩展了,一个是可链接性,内外部数据的关联整合;另一个是真实性,这是传统数据质量未曾参与或者说积极回避的事情。真实性实在是难,直接就可以成为数据挖掘、人工智能的应用案例。内外数据关联整合已经开始重点关注和解决了,这个过程中数据标准、元数据等传统数据体系职能范围自然要有所反应,同时还要考虑的是数据隐私与安全。

综上,如果你所在的组织已经完成基本的BI系统建设,需要或已经进入大数据应用建议的水平,那么数据治理的主战场也应该相应转移。数据挖掘将会成为数据治理的主战场,对进军大数据时代的组织来说有足够的必要性和紧迫性;同时数据挖掘是未来组织数据驱动文化的核心,这也为数据治理真正发挥作用提供了机遇。

(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 新白皮书提供数据治理计划实施技巧

    新白皮书提供数据治理计划实施技巧

    实施数据治理计划 - 一系列标准化管理实践,以解决数据的创建,使用和报告问题 - 有助于确保医疗保健组织内的大量数据得到质量,可访问性和……查看详情

    发布时间:2018.11.21来源:数据治理浏览量:155次

  • 世界各地的组织如何处理数据治理

    世界各地的组织如何处理数据治理

    在2019年G20大阪峰会召开的同时,我很幸运能够在整个六月的整个月里在东京办公室工作。这是一个有趣的事件,引起我注意的主要议题之一是“……查看详情

    发布时间:2019.07.11来源:知乎浏览量:149次

  • 数据质量包括那些方面

    数据质量包括那些方面

    数据是组织最具价值的资产之一。企业的数据质量与业务绩效之间存在着直接联系,高质量的数据可以使公司保持竞争力并在经济动荡时期立于不败之地。……查看详情

    发布时间:2020.04.09来源:百度浏览量:236次

  • 数据治理的重点领域:关注数据质量

    数据治理的重点领域:关注数据质量

    由于数据质量,完整性或可用性方面的问题,这种类型的程序通常会出现。……查看详情

    发布时间:2019.03.29来源:亿信华辰浏览量:197次

  • 数据治理与分析相结合

    数据治理与分析相结合

    不到十年前,由于规模,资源和组织能力的原因,大型企业比同行业的小企业具有显着的优势。现在已不再是这样,因为数字创新和全球化的推动,加上移……查看详情

    发布时间:2018.11.23来源:数据治理浏览量:218次

  • 数据治理VS数据安全治理

    数据治理VS数据安全治理

    企业信息化建设是随着企业战略、业务形态、预算等多个方面不断迭代及变化的,所以在建设过程中难免出现阶段鸿沟,跨阶段整合难的现象,当企业以数……查看详情

    发布时间:2020.06.29来源:CSDN浏览量:153次

  • 为什么数据治理会带来数据驱动的成功

    为什么数据治理会带来数据驱动的成功

    通过寻找创造价值和改进执行的新方法,各种形式和规模的组织都在积极地采用数据驱动的方法,这些方法可以通过分析的进步来实现。……查看详情

    发布时间:2019.01.26来源:亿信华辰浏览量:157次

  • 有效数据治理的6大原则

    有效数据治理的6大原则

    如果你常常对数据准确性而烦恼,大部分时间都用于处理数据而不是对业务进行思考分析的话,那么你需要好好对数据进行治理了。……查看详情

    发布时间:2019.10.17来源:知乎浏览量:137次

  • 治理和管理

    治理和管理

    以问责制为重点的数据管理定义是“确保数据相关工作根据通过治理建立的政策和实践来执行的一系列活动。”……查看详情

    发布时间:2019.03.18来源:亿信华辰浏览量:139次

  • 数据问题的全面解决之道——数据治理

    数据问题的全面解决之道——数据治理

    当今的大型企业,内部分工日趋细化,采购、服务、市场、销售、开发、支持、物流、财务、人力等各个环节,无不每时每刻产生着大量的数据。……查看详情

    发布时间:2019.01.18来源:亿信华辰浏览量:161次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议