来自园艺的5个数据治理课程
发布时间:2018.12.04来源:Debi Tadd浏览量:165次标签:数据治理
如果您不知道自己拥有哪些数据,那么如何有效地管理数据并从中获得价值呢?
随着持续增长和一系列快节奏的银行收购和合并,BBVA Compass的数据增长到超过2.5 PB(PB)的数据。大部分数据分布在共享网络驱动器以及具有不同分类和结构的各种传统和新系统中。通过这些合并,拥有数据的被收购公司的员工在其他地方担任新角色,让我们在BBVA Compass中对我们获得的数据知之甚少。
所有这些数据增长和收购挑战都要求我们重新考虑我们的数据治理策略。我们根本没有确保正确管理和使用数据所需的可见性。我们的首要任务是消除风险并做出关键决策,以帮助提高我们的合规性。
数据治理挑战
解决我们的数据治理挑战需要解决如何:
- 识别未定义或未知的数据
- 通过分类和构建数据来降低风险
- 在整个信息生命周期中管理数据
- 加强监管合规
- 推动新的业务见解
我是一个狂热的园丁,所以我想我会用园艺类比来分享银行如何应对其数据治理挑战:
1.准备土壤。
我们做的第一件事就是为数据治理奠定基础。类似于为园艺准备土壤,我们需要移除岩石和障碍物,这会产生创造根深蒂固的变化的问题。
至关重要的是要确保我们的员工知道我的团队是谁,我们做什么,为什么要这样做,以及我们如何建立信任并让他们参与这一转变。了解数据并应用生命周期管理(保留,存档和处置)的一致策略和过程是首要任务。
为此,我们审核了所有政策并将其更新。我们将它们记录在中央存储库中,作为我们数据治理之旅的一部分,以降低风险,遵守合规性规则并推动有关我们数据的新见解。
数据企业转型还需要改变用户思考和处理信息的方式。我们的团队需要认识到信息生命周期管理小组的使命和目标,以及我们可以为用户带来的价值。实施新的政策和程序有助于为用户提供值得信赖的数据来源和安心。
2.建立支持系统。
种植蔬菜意味着为植物添加支持系统。当收获开始增长时,番茄笼和网有助于支持植物。我们还需要这种支持。
我们研究了可能影响我们实施的其他领域,例如数据安全和数据治理,以确保我们不会违反任何规则或流程。我们的法律团队还使我们能够加强控制并确保达到标准。有了这种支持,我们就专注于降低风险。我们通过对数据和信息进行分组和简化来支持PCI,PII,HIPAA和GDPR等合规性要求。
3.植物。
您如何识别不同存储库中的数据?您如何管理结构化和非结构化数据?你如何自动化数据处置?您如何为整个企业的用户获取更多见解并增加数据价值?
您“植入”最能支持您目标的工具。选择具有全局视角的工具非常重要。通常,制定工具以实现单一目标。治理工具具有深远的影响,因此了解如何在团队中使用它们非常重要。
例如,IBM Stored IQ使我的团队能够搜索要移动到IBM FileNet的数据,以进行长期保留管理。我们还可以使用该工具来搜索法律,合规和审计需求。在介绍IBM Stored IQ时,展示如何在其他领域为我们提供投资回报率是有益的。
我们的实施需要成为一个统一的治理和集成平台,提供可重复和系统的支持。数据治理帮助我们应用一致的保留策略并自动化我们的数据处置。这样可以提高合规性并降低银行风险。IBM套件最适合我们的需求并降低了环境的复杂性。
4.维护。
从历史上看,我们一直擅长保留数据,但在保留期结束时处理数据时犹豫不决。推行严格的归档方法有助于银行退休或处置非活动的结构化数据。通过引入治理计划,我们还帮助用户确信他们在处理数据时做的正确。
为了维护我们的安全标准,我们部署了混淆和屏蔽以减少黑客攻击和威胁。这就是我们“清除”我们的数据以确保我们删除满足我们监管和业务需求的冗余,过时和暂时(ROT)数据的方式。我们还创建了一个环境,帮助我们在用户需要时提供用户所需的数据。
通过创建可重复,自动化和系统化的数据管理方法,我们通过使用户无缝地保持适当的“浇水”。我们还确保我们继续监控安全控制,以确保我们保护我们维护的数据。
收获你的收获。
我怎么知道我的收获何时准备好了?当这个过程与用户无缝集成时,他们甚至不会考虑这些过程。当我们控制我们的数据而不是控制我们时,我们取得了最大的成功。
在一次银行收购中,我们继承了50TB的数据和正在进行的FDIC调查。由于在收购期间失去了关键人员,很难找到FDIC要求的数据。
IBM StoredIQ解决方案帮助我们索引数据并使用关键字进行搜索。我们找到了FDIC要求的数据。这对我的团队来说是一个巨大的胜利,并通过我们的数据治理工具展示了投资回报。它还向我们展示了该工具的强大功能。
我们还意识到了存储IQ的使用范围。我们可以将它用于电子发现请求,审计和未来的监管审查。这对于实现我们的合规性工作至关重要,对于遵守GDPR和加州消费者隐私法案的要求至关重要。
结果
所有这些步骤都有助于形成更强大的数据治理基础,并围绕数据进行真正的生命周期管理。控制我们的数据有助于BBVA Compass降低风险,识别成本节约,提高数据价值并抓住新机遇。
-
如何做好银行金融大数据治理平台建设
大数据、云计算、互联网等技术,将人类带入了一个以PB为单位的大规模生产、分享和应用数据的新时代。当治理的对象发生变化时,治理体系也应进行……查看详情发布时间:2019.10.15来源:知乎浏览量:156次
-
数据治理实践与应用场景:治理的应用拓展与价值实现
数据治理体系是构建完善、共享、统一管理数据的基本保障和重要组成部分,是把数据当作自测来管理的有效手段。……查看详情发布时间:2019.09.09来源:知乎浏览量:93次
-
数据治理如何推动医疗大数据的发展
数据治理是一种管理数据的方法,允许组织平衡两个需求:收集和保护信息的需求,同时从信息中获取价值。但它远不止于此。医疗大数据其中的健康数据……查看详情发布时间:2019.08.15来源:知乎浏览量:87次
-
元数据管理流程和方法是怎样的
大数据环境中,如果企业不通过元数据管理把多种复杂的信息管理起来,很难做到信息的有效利用。Gartner在研究报告里明确指出,“元数据管理……查看详情发布时间:2022.03.21来源:小亿浏览量:440次
-
如何建设财务主数据?四大问题对症下药各个击破
企业主数据是用来描述企业核心业务实体的基础数据,它是具有高业务价值、可在企业内跨越各个业务部门被重复使用的数据。财务主数据作为企业主数据……查看详情发布时间:2020.09.19来源:头条浏览量:105次
-
企业如何解决数据治理中的数据质量问题
解决数据治理中的数据质量问题需要技术手段,也需要管理手段,要决策层给予充分的支持,从而在技术与业务互动中逐步解决数据质量问题。……查看详情发布时间:2019.09.25来源:知乎浏览量:103次
-
企业大数据体系构建,从这4层逐步递进递进
关于企业的大数据体系构建,可以分为4个层级,每个层级之间可以是递进的关系,虽然业务主导不同,但构建思路相通。关于企业的大数据体系构建,可……查看详情发布时间:2019.05.20来源:数据分析网浏览量:102次
-
5可以通过数据治理解决的挑战-使用数据治理克服常见的业务障碍
在快速发展的技术,大数据和高级分析的时代,数据治理在每个组织中都发挥着至关重要的作用,无论规模大小或行业如何。从定义元数据管理指南,到解……查看详情发布时间:2018.11.13来源:CHRIS REED浏览量:39次