来自园艺的5个数据治理课程
发布时间:2018.12.04来源:Debi Tadd浏览量:172次标签:数据治理
如果您不知道自己拥有哪些数据,那么如何有效地管理数据并从中获得价值呢?
随着持续增长和一系列快节奏的银行收购和合并,BBVA Compass的数据增长到超过2.5 PB(PB)的数据。大部分数据分布在共享网络驱动器以及具有不同分类和结构的各种传统和新系统中。通过这些合并,拥有数据的被收购公司的员工在其他地方担任新角色,让我们在BBVA Compass中对我们获得的数据知之甚少。
所有这些数据增长和收购挑战都要求我们重新考虑我们的数据治理策略。我们根本没有确保正确管理和使用数据所需的可见性。我们的首要任务是消除风险并做出关键决策,以帮助提高我们的合规性。
数据治理挑战
解决我们的数据治理挑战需要解决如何:
- 识别未定义或未知的数据
- 通过分类和构建数据来降低风险
- 在整个信息生命周期中管理数据
- 加强监管合规
- 推动新的业务见解
我是一个狂热的园丁,所以我想我会用园艺类比来分享银行如何应对其数据治理挑战:
1.准备土壤。
我们做的第一件事就是为数据治理奠定基础。类似于为园艺准备土壤,我们需要移除岩石和障碍物,这会产生创造根深蒂固的变化的问题。
至关重要的是要确保我们的员工知道我的团队是谁,我们做什么,为什么要这样做,以及我们如何建立信任并让他们参与这一转变。了解数据并应用生命周期管理(保留,存档和处置)的一致策略和过程是首要任务。
为此,我们审核了所有政策并将其更新。我们将它们记录在中央存储库中,作为我们数据治理之旅的一部分,以降低风险,遵守合规性规则并推动有关我们数据的新见解。
数据企业转型还需要改变用户思考和处理信息的方式。我们的团队需要认识到信息生命周期管理小组的使命和目标,以及我们可以为用户带来的价值。实施新的政策和程序有助于为用户提供值得信赖的数据来源和安心。
2.建立支持系统。
种植蔬菜意味着为植物添加支持系统。当收获开始增长时,番茄笼和网有助于支持植物。我们还需要这种支持。
我们研究了可能影响我们实施的其他领域,例如数据安全和数据治理,以确保我们不会违反任何规则或流程。我们的法律团队还使我们能够加强控制并确保达到标准。有了这种支持,我们就专注于降低风险。我们通过对数据和信息进行分组和简化来支持PCI,PII,HIPAA和GDPR等合规性要求。
3.植物。
您如何识别不同存储库中的数据?您如何管理结构化和非结构化数据?你如何自动化数据处置?您如何为整个企业的用户获取更多见解并增加数据价值?
您“植入”最能支持您目标的工具。选择具有全局视角的工具非常重要。通常,制定工具以实现单一目标。治理工具具有深远的影响,因此了解如何在团队中使用它们非常重要。
例如,IBM Stored IQ使我的团队能够搜索要移动到IBM FileNet的数据,以进行长期保留管理。我们还可以使用该工具来搜索法律,合规和审计需求。在介绍IBM Stored IQ时,展示如何在其他领域为我们提供投资回报率是有益的。
我们的实施需要成为一个统一的治理和集成平台,提供可重复和系统的支持。数据治理帮助我们应用一致的保留策略并自动化我们的数据处置。这样可以提高合规性并降低银行风险。IBM套件最适合我们的需求并降低了环境的复杂性。
4.维护。
从历史上看,我们一直擅长保留数据,但在保留期结束时处理数据时犹豫不决。推行严格的归档方法有助于银行退休或处置非活动的结构化数据。通过引入治理计划,我们还帮助用户确信他们在处理数据时做的正确。
为了维护我们的安全标准,我们部署了混淆和屏蔽以减少黑客攻击和威胁。这就是我们“清除”我们的数据以确保我们删除满足我们监管和业务需求的冗余,过时和暂时(ROT)数据的方式。我们还创建了一个环境,帮助我们在用户需要时提供用户所需的数据。
通过创建可重复,自动化和系统化的数据管理方法,我们通过使用户无缝地保持适当的“浇水”。我们还确保我们继续监控安全控制,以确保我们保护我们维护的数据。
收获你的收获。
我怎么知道我的收获何时准备好了?当这个过程与用户无缝集成时,他们甚至不会考虑这些过程。当我们控制我们的数据而不是控制我们时,我们取得了最大的成功。
在一次银行收购中,我们继承了50TB的数据和正在进行的FDIC调查。由于在收购期间失去了关键人员,很难找到FDIC要求的数据。
IBM StoredIQ解决方案帮助我们索引数据并使用关键字进行搜索。我们找到了FDIC要求的数据。这对我的团队来说是一个巨大的胜利,并通过我们的数据治理工具展示了投资回报。它还向我们展示了该工具的强大功能。
我们还意识到了存储IQ的使用范围。我们可以将它用于电子发现请求,审计和未来的监管审查。这对于实现我们的合规性工作至关重要,对于遵守GDPR和加州消费者隐私法案的要求至关重要。
结果
所有这些步骤都有助于形成更强大的数据治理基础,并围绕数据进行真正的生命周期管理。控制我们的数据有助于BBVA Compass降低风险,识别成本节约,提高数据价值并抓住新机遇。
-
用数据治理来拯救当今的大数据应用
当今社会,大数据的应用越来越广泛,企业和大数据的结合也越来越紧密。数据,俨然已成企业的重要资产之一。但是,大数据却并不是那么好管理,数据……查看详情发布时间:2019.08.15来源:知乎浏览量:73次
-
探索数据生命周期管理的五个阶段
企业并不总是需要所有数据 - 特别是当数据被认为过时时。但是,诉讼,审计或其他突发事件可以使其快速检索变得至关重要。考虑到这种可能性,许……查看详情发布时间:2018.12.21来源:数据治理浏览量:93次
-
打开大数据的正确方式——做减法
随着数字技术的广泛应用,原本的新奇感已经荡然无存。创新领域内积年累月的争夺不断攫取着人们的时间和注意力,反而令用户感到信息过载、不堪重负……查看详情发布时间:2019.04.09来源:亿信华辰浏览量:88次
-
数据治理成功要素:制定数据质量管理办法及标准
数据质量管理是指为了满足信息系统的需要,对数据从计划、获取、存储、共享、维护、应用、消亡生命周期的每个阶段里可能引发的各类数据质量问题,……查看详情发布时间:2022.02.25来源:小亿浏览量:214次
-
如何搭建数据质量管理平台
数据往往在一个企业是相当于一个重要资产,企业在经营的过程中也会积累不少各类数据,这类数据后期也可通过归纳、提炼从而进行深度挖掘分析,给企……查看详情发布时间:2019.07.30来源:知乎浏览量:97次
-
完善和高效的数据交换管理平台
EsDataExchange是亿信华辰公司推出的一款解决企业和政府部门数据交换管理的成熟产品,该平台是亿信华辰公司自主研发的具有独立知识……查看详情发布时间:2020.04.23来源:知乎浏览量:78次
-
企业如何解决数据治理中的数据质量问题
解决数据治理中的数据质量问题需要技术手段,也需要管理手段,要决策层给予充分的支持,从而在技术与业务互动中逐步解决数据质量问题。……查看详情发布时间:2019.09.25来源:知乎浏览量:108次
-
企业数据治理的重点和难点在那里?
企业数据治理的重点和难点主要体现在以下4点:.需要企业高层支持,将数据治理工作放在企业重点工作中,保证对数据治理项目人力物力的投入,提高……查看详情发布时间:2019.09.18来源:知乎浏览量:178次
-
什么是元数据?元数据管理的作用是什么?
为了更好地理解企业拥有的数据,必须访问关联的元数据。 元数据管理帮助您判断数据来自何处,其在不同系统中的位置以及如何使用。元数据用于管理……查看详情发布时间:2021.03.31来源:数据治理研究院浏览量:259次