数据治理中,符合数字标准意味着什么

发布时间:2021.04.23来源:亿信数据治理知识库浏览量:11次标签:数据治理

数据被称为新石油。现在正朝着增加管制的轨道发展,过去的数据涌入者正在被驯服。专门机构,例如英国最近批准的数字市场部和新的美国加州隐私保护局 (以下简称“ CalPPA”)将强制执行合规性。数据将变得可追踪,负责,如果滥用,将成为应受惩罚的犯罪的根源。 

亿信数据分析与<a href=数据治理.png" width="587" height="339" style="width: 587px; height: 339px;"/>

正如石油行业从野蛮的命运发展到经EPA批准的通过OSHA认证的油轮运输的土地上的管理井一样,数据最终将以实现完全可追溯性的方式进行保存和运输。这就需要对数据堆栈进行重大更改,从数据湖到数据生态系统,再到数据管理数据服务。第一步是了解当今的数据体系结构及其局限性。 


成为合规者需要做什么


为了满足政府的可见性和问责制要求,所有这些不同堆栈中的数据(通过成千上万的管道和数据库)必须集成到单个完全可见的系统中。 


遵守法规是一项艰巨的任务。新的代理机构正在全球范围内兴起,以规范数据和数字竞争,而且没有两个代理机构具有完全相同的要求。除了英国的数字市场部门和CalPPA,日本和南韩都有一个名为个人信息保护委员会; 巴西有一个国家数据保护局。 


它有助于将合规性分解为最基本的要素。您需要采取什么措施来确保您的数据系统符基本的标准?


1.数据完整性


这是指数据的准确性和一致性。它需要审核跟踪,定期归档以及自动验证数据准确性和一致性的系统。数据必须干净且可互操作。 


换句话说,数据堆栈必须变得更智能。它应自动防止他人输入错误的地址,信用卡到期日期或其他数据。它还应调和语义上的不匹配(例如,一个系统中的“姓氏”必须与另一个系统中的“姓氏”相匹配)。我们的想法是定期更新数据并确保数据的准确性,以防万一机构要求进行审计或提供某种形式的证据,整个数据团队的工作不会因此而停下来,以寻求正确的信息。 


2.数据来源


数据出处是记录从源头开始影响数据的每个人和所有事物的记录。每个数据(包括非结构化数据)从何而来?它去哪了?在一个由摄像机监视公众的世界中,汽车中装有计算机,而企业通常使用1,295个云供应商,这些问题不容易回答。 


为了甚至开始解决数据源问题,团队必须访问可以查询数据,编写自定义代码并能够部署许多数据库以保持历史记录的应用程序或端点。希望这些系统足以使审核员安心。


为了使问题进一步复杂化,有时会在编写法规时没有考虑到实现。例如,遵守GDPR可能会阻止您遵守其他人的规定。组织正陷入一种情况,即聘请专家(例如律师事务所)成为了解他们所面对的挑战的唯一途径。那些无法立即负担此类费用的人可能会等到绝对必要后再这样做,这反过来又可能会在将来的某个时候紧急使IT系统脱机,从而影响生产效率,并疏远了越来越注重隐私的消费者。有一种解决方法。 


3.主数据服务


当营销,人力资源,销售,开发和所有其他部门连接在一起时,合规性将更容易实现。这是新兴的实践主数据管理,这涉及为组织范围内的数据资产构建一个平台或“黄金记录”。 


以目前的形式,这个黄金记录看起来更像象形文字:从数据湖中提取的静态只读表示形式,数据科学家和数据合规团队可以清晰地看到,但很少有人看到。面对明天的合规性问题,这种方法简而言之。想象一下,提出一个静态的只读记录来跟踪在休闲的在线浏览会话中使用无人驾驶汽车或人力资源代表捕获的一部分招募数据的犯罪分子。将严格的问责制放在静态的只读记录上,就像试图使用硬币袋来支付每月抵押贷款一样,这既费时,笨重,过时且运输成本高。 


从数据湖到数据生态系统 


1900年代初,石油几乎成为唯一能源。石油、连同电灯泡和汽车,改变了我们的城市,房屋,交通方式以及许多其他方面。我们现在生活在一个相互联系的石油生态系统中,如果每个城市和城镇以不同的方式来采购,存储,共享和管理石油,那么该生态系统的功能将大大降低。 


从数据湖到主数据管理的演进过程与此类似。主数据管理有机地连接了所有用户,从而支持了生态系统。引入了数据完整性和数据治理,从而导致了代理机构要求的隐私和问责制。主数据管理按需发出“黄金记录”,几乎不需要解析。 


从技术上讲,它将责任从只读的主数据湖转移到动态的双向数据结构。这是一种新型的有机堆栈,可实现数据的高级使用,就像石油基础设施实现创新和服务的生态系统一样(类似的生态系统现在围绕可再生能源发展)。 


随着世界各地社会继续对未加管制的数据的后果做出反应,这些数据助长了技术垄断和残酷的虚假信息,现在该采取的行动,不仅仅是对迫在眉睫的法规做出反应。


了解更多数据治理平台相关知识:https://www.esenruizhi.com/



(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据治理:发现阶段

    数据治理:发现阶段

    从数据治理计划的发现阶段开始,将为您提供更大的成功概率。……查看详情

    发布时间:2018.12.21来源:亿信华辰浏览量:8次

  • 企业的主数据管理——亿信华辰

    企业的主数据管理——亿信华辰

    企业主数据指企业内一致并共享的业务主体。主数据管理,包括不仅仅是硬件和软件,还是将数据作为重要资产管理的思想和办法,是指一整套的用于生成……查看详情

    发布时间:2019.03.05来源:数据管理浏览量:6次

  • 中小银行数据治理工作所面临的问题

    中小银行数据治理工作所面临的问题

    虽然各银行积极响应监管要求,开展数据治理工作,但《中小银行金融科技发展研究报告(2019)》显示中小银行的数据治理基本处于萌芽期,达91……查看详情

    发布时间:2020.07.09来源:小亿浏览量:19次

  • 数据质量—并非所有数据都是平等的

    数据质量—并非所有数据都是平等的

    数据质量是调节数据以满足业务用户特定需求的过程。准确性,完整性,一致性,及时性,唯一性和有效性是数据质量的主要衡量标准。……查看详情

    发布时间:2019.04.04来源:亿信华辰浏览量:9次

  • 中小行纷纷设立数据治理专营部门

    中小行纷纷设立数据治理专营部门

    “数据治理基础建设缺失、人才匮乏、意识觉醒较晚。”一名来参加今日第三届中国数字银行论坛的西部中小银行人士,用了三个并列短句,来形容目前中……查看详情

    发布时间:2019.11.29来源:CSDN浏览量:4次

  • 企业架构组织的创新能力如何?

    企业架构组织的创新能力如何?

    回想一下最新的企业架构文章,博客文章,甚至是你读过的职位描述,并算一下至少一次没有提到“创新”的内容?我猜测,“创新”往往被作为有效企业……查看详情

    发布时间:2019.02.26来源:亿信华辰浏览量:6次

  • 社交网络大数据的应用有多大的价值

    社交网络大数据的应用有多大的价值

    随着互联网技术高速的发展,网民的数量呈指数上升,社交网络进入了强调用户参与和体验的时代。……查看详情

    发布时间:2019.03.13来源:亿信华辰浏览量:4次

  • 如何有效的进行数据治理?

    如何有效的进行数据治理?

    如果你处理或使用过大量数据,一定有听到过“数据治理”这个词。你会思考数据治理是什么?数据治理是否适合你?如何实施……查看详情

    发布时间:2019.01.09来源:亿信华辰浏览量:2次

  • 数据建模和数据映射:来自任何数据的结果

    数据建模和数据映射:来自任何数据的结果

    统一的数据建模和数据映射方法可能是许多数据驱动型组织所需要的突破。在我与客户进行的大多数对话中,他们表示需要一个可行的解决方案来模拟他……查看详情

    发布时间:2019.01.17来源:亿信华辰浏览量:8次

  • 以数据中台为切入点,场景/应用驱动源头数据治理

    以数据中台为切入点,场景/应用驱动源头数据治理

    数据中台通常是应用驱动构建,所处理的数据是业务关心和使用的数据。在数据中台开发与运营服务的过程中,面临很多源头数据的问题,比如不同系统的……查看详情

    发布时间:2020.04.01来源:知乎浏览量:12次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议