数据治理中,符合数字标准意味着什么

发布时间:2021.04.23来源:亿信数据治理知识库浏览量:22次标签:数据治理

数据被称为新石油。现在正朝着增加管制的轨道发展,过去的数据涌入者正在被驯服。专门机构,例如英国最近批准的数字市场部和新的美国加州隐私保护局 (以下简称“ CalPPA”)将强制执行合规性。数据将变得可追踪,负责,如果滥用,将成为应受惩罚的犯罪的根源。 

亿信数据分析与<a href=数据治理.png" width="587" height="339" style="width: 587px; height: 339px;"/>

正如石油行业从野蛮的命运发展到经EPA批准的通过OSHA认证的油轮运输的土地上的管理井一样,数据最终将以实现完全可追溯性的方式进行保存和运输。这就需要对数据堆栈进行重大更改,从数据湖到数据生态系统,再到数据管理数据服务。第一步是了解当今的数据体系结构及其局限性。 


成为合规者需要做什么


为了满足政府的可见性和问责制要求,所有这些不同堆栈中的数据(通过成千上万的管道和数据库)必须集成到单个完全可见的系统中。 


遵守法规是一项艰巨的任务。新的代理机构正在全球范围内兴起,以规范数据和数字竞争,而且没有两个代理机构具有完全相同的要求。除了英国的数字市场部门和CalPPA,日本和南韩都有一个名为个人信息保护委员会; 巴西有一个国家数据保护局。 


它有助于将合规性分解为最基本的要素。您需要采取什么措施来确保您的数据系统符基本的标准?


1.数据完整性


这是指数据的准确性和一致性。它需要审核跟踪,定期归档以及自动验证数据准确性和一致性的系统。数据必须干净且可互操作。 


换句话说,数据堆栈必须变得更智能。它应自动防止他人输入错误的地址,信用卡到期日期或其他数据。它还应调和语义上的不匹配(例如,一个系统中的“姓氏”必须与另一个系统中的“姓氏”相匹配)。我们的想法是定期更新数据并确保数据的准确性,以防万一机构要求进行审计或提供某种形式的证据,整个数据团队的工作不会因此而停下来,以寻求正确的信息。 


2.数据来源


数据出处是记录从源头开始影响数据的每个人和所有事物的记录。每个数据(包括非结构化数据)从何而来?它去哪了?在一个由摄像机监视公众的世界中,汽车中装有计算机,而企业通常使用1,295个云供应商,这些问题不容易回答。 


为了甚至开始解决数据源问题,团队必须访问可以查询数据,编写自定义代码并能够部署许多数据库以保持历史记录的应用程序或端点。希望这些系统足以使审核员安心。


为了使问题进一步复杂化,有时会在编写法规时没有考虑到实现。例如,遵守GDPR可能会阻止您遵守其他人的规定。组织正陷入一种情况,即聘请专家(例如律师事务所)成为了解他们所面对的挑战的唯一途径。那些无法立即负担此类费用的人可能会等到绝对必要后再这样做,这反过来又可能会在将来的某个时候紧急使IT系统脱机,从而影响生产效率,并疏远了越来越注重隐私的消费者。有一种解决方法。 


3.主数据服务


当营销,人力资源,销售,开发和所有其他部门连接在一起时,合规性将更容易实现。这是新兴的实践主数据管理,这涉及为组织范围内的数据资产构建一个平台或“黄金记录”。 


以目前的形式,这个黄金记录看起来更像象形文字:从数据湖中提取的静态只读表示形式,数据科学家和数据合规团队可以清晰地看到,但很少有人看到。面对明天的合规性问题,这种方法简而言之。想象一下,提出一个静态的只读记录来跟踪在休闲的在线浏览会话中使用无人驾驶汽车或人力资源代表捕获的一部分招募数据的犯罪分子。将严格的问责制放在静态的只读记录上,就像试图使用硬币袋来支付每月抵押贷款一样,这既费时,笨重,过时且运输成本高。 


从数据湖到数据生态系统 


1900年代初,石油几乎成为唯一能源。石油、连同电灯泡和汽车,改变了我们的城市,房屋,交通方式以及许多其他方面。我们现在生活在一个相互联系的石油生态系统中,如果每个城市和城镇以不同的方式来采购,存储,共享和管理石油,那么该生态系统的功能将大大降低。 


从数据湖到主数据管理的演进过程与此类似。主数据管理有机地连接了所有用户,从而支持了生态系统。引入了数据完整性和数据治理,从而导致了代理机构要求的隐私和问责制。主数据管理按需发出“黄金记录”,几乎不需要解析。 


从技术上讲,它将责任从只读的主数据湖转移到动态的双向数据结构。这是一种新型的有机堆栈,可实现数据的高级使用,就像石油基础设施实现创新和服务的生态系统一样(类似的生态系统现在围绕可再生能源发展)。 


随着世界各地社会继续对未加管制的数据的后果做出反应,这些数据助长了技术垄断和残酷的虚假信息,现在该采取的行动,不仅仅是对迫在眉睫的法规做出反应。


了解更多数据治理平台相关知识:https://www.esenruizhi.com/



(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 领导者的数据治理:将数据战略转化为行动

    领导者的数据治理:将数据战略转化为行动

    数据随处可见,物联网和不同数据源,数据源,渠道和数据消费者的互联性日益增强。……查看详情

    发布时间:2019.02.14来源:亿信华辰浏览量:17次

  • 数据治理直击灵魂的四问:治什么?谁来治?怎么治?选哪个?

    数据治理直击灵魂的四问:治什么?谁来治?怎么治?选哪个?

    近些年来,“数据治理”这个词总是高频出现,让人们对其“身世背景”格外好奇。国际数据治理研究所(DGI)给出的定义:数据治理是一个通过一系……查看详情

    发布时间:2020.09.19来源:知乎浏览量:4次

  • 企业数据治理需要的能力

    企业数据治理需要的能力

    数据治理必然带来新的标准的确立和旧系统的改造,是一个有破有立、无破不立的过程。这一过程设计大量的跨部门、跨条线、跨系统的沟通协调,同时也……查看详情

    发布时间:2021.09.06来源:亿信华辰浏览量:31次

  • 企业大数据的现状与痛点——《企业大数据实践路线》之一

    企业大数据的现状与痛点——《企业大数据实践路线》之一

    内容分类:1、 企业大数据现状及痛点 2、 大数据对企业的促进作用 3、 解析业务数据的特征 4、 典型技术架构的分析和构建……查看详情

    发布时间:2019.02.25来源:亿信华辰浏览量:9次

  • 数据治理为什么会重新引起关注?

    数据治理为什么会重新引起关注?

    这突出了数据治理的重要性。由数据治理研究所定义为“信息相关过程的决策权和责任系统,根据商定的模型执行,描述谁可以采取什么行动与什么信息,……查看详情

    发布时间:2019.09.04来源:知乎浏览量:7次

  • 数据治理能否提升数据安全性?

    数据治理能否提升数据安全性?

    大数据技术的快速发展不断催生新的产业形态,正成为经济社会发展的新动能。在·发展数字经济、加快培育发展数据要素市场,必须把保障数据安全放在……查看详情

    发布时间:2022.03.07来源:小亿浏览量:20次

  • 云中的数据治理

    云中的数据治理

    IT中心,内部部署基础架构变得越来越复杂和昂贵,并且需要高技能的人力,因此企业现在将其IT和数据科学功能转移到云。云计算承诺提供低成本存……查看详情

    发布时间:2018.12.29来源:亿信华辰浏览量:7次

  • 云管理与云治理

    云管理与云治理

    混合云或多云已成为当今组织IT战略的重要组成部分。作为多云战略的一部分,组织需要定义如何在多个云中管理,控制,操作,优化和保护云基础架构……查看详情

    发布时间:2019.03.08来源:亿信华辰浏览量:13次

  • 数据分析加数据治理-让数据清澈如水

    数据分析加数据治理-让数据清澈如水

    在如今数据大浪潮下,如果您的业务很多,那么它就会大量堆积并且产生新的问题。我们生活在一个数据驱动的世界里。数据推动了我们从不同地方获得的……查看详情

    发布时间:2019.08.30来源:浏览量:9次

  • 数据治理的十五个最佳实践

    数据治理的十五个最佳实践

    数据治理研究所(DGI)认为,它是一套切实可行的框架,帮助任何组织的各种数据利益相关方识别并满足其信息需求。DGI认为,企业不仅需要管理……查看详情

    发布时间:2020.07.31来源:知乎浏览量:11次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议