数据治理中，符合数字标准意味着什么

数据被称为新石油。现在正朝着增加管制的轨道发展，过去的数据涌入者正在被驯服。专门机构，例如英国最近批准的数字市场部和新的美国加州隐私保护局 （以下简称“ CalPPA”）将强制执行合规性。数据将变得可追踪，负责，如果滥用，将成为应受惩罚的犯罪的根源。 

数据治理.png" width="587" height="339" style="width: 587px; height: 339px;"/>

正如石油行业从野蛮的命运发展到经EPA批准的通过OSHA认证的油轮运输的土地上的管理井一样，数据最终将以实现完全可追溯性的方式进行保存和运输。这就需要对数据堆栈进行重大更改，从数据湖到数据生态系统，再到数据管理数据服务。第一步是了解当今的数据体系结构及其局限性。 

成为合规者需要做什么

为了满足政府的可见性和问责制要求，所有这些不同堆栈中的数据（通过成千上万的管道和数据库）必须集成到单个完全可见的系统中。 

遵守法规是一项艰巨的任务。新的代理机构正在全球范围内兴起，以规范数据和数字竞争，而且没有两个代理机构具有完全相同的要求。除了英国的数字市场部门和CalPPA，日本和南韩都有一个名为个人信息保护委员会; 巴西有一个国家数据保护局。 

它有助于将合规性分解为最基本的要素。您需要采取什么措施来确保您的数据系统符基本的标准？

1.数据完整性

这是指数据的准确性和一致性。它需要审核跟踪，定期归档以及自动验证数据准确性和一致性的系统。数据必须干净且可互操作。 

换句话说，数据堆栈必须变得更智能。它应自动防止他人输入错误的地址，信用卡到期日期或其他数据。它还应调和语义上的不匹配（例如，一个系统中的“姓氏”必须与另一个系统中的“姓氏”相匹配）。我们的想法是定期更新数据并确保数据的准确性，以防万一机构要求进行审计或提供某种形式的证据，整个数据团队的工作不会因此而停下来，以寻求正确的信息。 

2.数据来源

数据出处是记录从源头开始影响数据的每个人和所有事物的记录。每个数据（包括非结构化数据）从何而来？它去哪了？在一个由摄像机监视公众的世界中，汽车中装有计算机，而企业通常使用1,295个云供应商，这些问题不容易回答。 

为了甚至开始解决数据源问题，团队必须访问可以查询数据，编写自定义代码并能够部署许多数据库以保持历史记录的应用程序或端点。希望这些系统足以使审核员安心。

为了使问题进一步复杂化，有时会在编写法规时没有考虑到实现。例如，遵守GDPR可能会阻止您遵守其他人的规定。组织正陷入一种情况，即聘请专家（例如律师事务所）成为了解他们所面对的挑战的唯一途径。那些无法立即负担此类费用的人可能会等到绝对必要后再这样做，这反过来又可能会在将来的某个时候紧急使IT系统脱机，从而影响生产效率，并疏远了越来越注重隐私的消费者。有一种解决方法。 

3.主数据服务

当营销，人力资源，销售，开发和所有其他部门连接在一起时，合规性将更容易实现。这是新兴的实践主数据管理，这涉及为组织范围内的数据资产构建一个平台或“黄金记录”。 

以目前的形式，这个黄金记录看起来更像象形文字：从数据湖中提取的静态只读表示形式，数据科学家和数据合规团队可以清晰地看到，但很少有人看到。面对明天的合规性问题，这种方法简而言之。想象一下，提出一个静态的只读记录来跟踪在休闲的在线浏览会话中使用无人驾驶汽车或人力资源代表捕获的一部分招募数据的犯罪分子。将严格的问责制放在静态的只读记录上，就像试图使用硬币袋来支付每月抵押贷款一样，这既费时，笨重，过时且运输成本高。 

从数据湖到数据生态系统 

1900年代初，石油几乎成为唯一能源。石油、连同电灯泡和汽车，改变了我们的城市，房屋，交通方式以及许多其他方面。我们现在生活在一个相互联系的石油生态系统中，如果每个城市和城镇以不同的方式来采购，存储，共享和管理石油，那么该生态系统的功能将大大降低。 

从数据湖到主数据管理的演进过程与此类似。主数据管理有机地连接了所有用户，从而支持了生态系统。引入了数据完整性和数据治理，从而导致了代理机构要求的隐私和问责制。主数据管理按需发出“黄金记录”，几乎不需要解析。 

从技术上讲，它将责任从只读的主数据湖转移到动态的双向数据结构。这是一种新型的有机堆栈，可实现数据的高级使用，就像石油基础设施实现创新和服务的生态系统一样（类似的生态系统现在围绕可再生能源发展）。 

随着世界各地社会继续对未加管制的数据的后果做出反应，这些数据助长了技术垄断和残酷的虚假信息，现在该采取的行动，不仅仅是对迫在眉睫的法规做出反应。

了解更多数据治理平台相关知识：https://www.esenruizhi.com/