数据治理中,符合数字标准意味着什么

发布时间:2021.04.23来源:亿信数据治理知识库浏览量:79次标签:数据治理

数据被称为新石油。现在正朝着增加管制的轨道发展,过去的数据涌入者正在被驯服。专门机构,例如英国最近批准的数字市场部和新的美国加州隐私保护局 (以下简称“ CalPPA”)将强制执行合规性。数据将变得可追踪,负责,如果滥用,将成为应受惩罚的犯罪的根源。 

亿信数据分析与<a href=数据治理.png" width="587" height="339" style="width: 587px; height: 339px;"/>

正如石油行业从野蛮的命运发展到经EPA批准的通过OSHA认证的油轮运输的土地上的管理井一样,数据最终将以实现完全可追溯性的方式进行保存和运输。这就需要对数据堆栈进行重大更改,从数据湖到数据生态系统,再到数据管理数据服务。第一步是了解当今的数据体系结构及其局限性。 


成为合规者需要做什么


为了满足政府的可见性和问责制要求,所有这些不同堆栈中的数据(通过成千上万的管道和数据库)必须集成到单个完全可见的系统中。 


遵守法规是一项艰巨的任务。新的代理机构正在全球范围内兴起,以规范数据和数字竞争,而且没有两个代理机构具有完全相同的要求。除了英国的数字市场部门和CalPPA,日本和南韩都有一个名为个人信息保护委员会; 巴西有一个国家数据保护局。 


它有助于将合规性分解为最基本的要素。您需要采取什么措施来确保您的数据系统符基本的标准?


1.数据完整性


这是指数据的准确性和一致性。它需要审核跟踪,定期归档以及自动验证数据准确性和一致性的系统。数据必须干净且可互操作。 


换句话说,数据堆栈必须变得更智能。它应自动防止他人输入错误的地址,信用卡到期日期或其他数据。它还应调和语义上的不匹配(例如,一个系统中的“姓氏”必须与另一个系统中的“姓氏”相匹配)。我们的想法是定期更新数据并确保数据的准确性,以防万一机构要求进行审计或提供某种形式的证据,整个数据团队的工作不会因此而停下来,以寻求正确的信息。 


2.数据来源


数据出处是记录从源头开始影响数据的每个人和所有事物的记录。每个数据(包括非结构化数据)从何而来?它去哪了?在一个由摄像机监视公众的世界中,汽车中装有计算机,而企业通常使用1,295个云供应商,这些问题不容易回答。 


为了甚至开始解决数据源问题,团队必须访问可以查询数据,编写自定义代码并能够部署许多数据库以保持历史记录的应用程序或端点。希望这些系统足以使审核员安心。


为了使问题进一步复杂化,有时会在编写法规时没有考虑到实现。例如,遵守GDPR可能会阻止您遵守其他人的规定。组织正陷入一种情况,即聘请专家(例如律师事务所)成为了解他们所面对的挑战的唯一途径。那些无法立即负担此类费用的人可能会等到绝对必要后再这样做,这反过来又可能会在将来的某个时候紧急使IT系统脱机,从而影响生产效率,并疏远了越来越注重隐私的消费者。有一种解决方法。 


3.主数据服务


当营销,人力资源,销售,开发和所有其他部门连接在一起时,合规性将更容易实现。这是新兴的实践主数据管理,这涉及为组织范围内的数据资产构建一个平台或“黄金记录”。 


以目前的形式,这个黄金记录看起来更像象形文字:从数据湖中提取的静态只读表示形式,数据科学家和数据合规团队可以清晰地看到,但很少有人看到。面对明天的合规性问题,这种方法简而言之。想象一下,提出一个静态的只读记录来跟踪在休闲的在线浏览会话中使用无人驾驶汽车或人力资源代表捕获的一部分招募数据的犯罪分子。将严格的问责制放在静态的只读记录上,就像试图使用硬币袋来支付每月抵押贷款一样,这既费时,笨重,过时且运输成本高。 


从数据湖到数据生态系统 


1900年代初,石油几乎成为唯一能源。石油、连同电灯泡和汽车,改变了我们的城市,房屋,交通方式以及许多其他方面。我们现在生活在一个相互联系的石油生态系统中,如果每个城市和城镇以不同的方式来采购,存储,共享和管理石油,那么该生态系统的功能将大大降低。 


从数据湖到主数据管理的演进过程与此类似。主数据管理有机地连接了所有用户,从而支持了生态系统。引入了数据完整性和数据治理,从而导致了代理机构要求的隐私和问责制。主数据管理按需发出“黄金记录”,几乎不需要解析。 


从技术上讲,它将责任从只读的主数据湖转移到动态的双向数据结构。这是一种新型的有机堆栈,可实现数据的高级使用,就像石油基础设施实现创新和服务的生态系统一样(类似的生态系统现在围绕可再生能源发展)。 


随着世界各地社会继续对未加管制的数据的后果做出反应,这些数据助长了技术垄断和残酷的虚假信息,现在该采取的行动,不仅仅是对迫在眉睫的法规做出反应。


了解更多数据治理平台相关知识:https://www.esenruizhi.com/



(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据质量管理的方法论

    数据质量管理的方法论

    在数据治理方面,不论是国际的还是国内的,我们能找到很多数据治理成熟度评估模型这样的理论框架,作为企业实施的指引。而说到数据质量管理的方法……查看详情

    发布时间:2019.12.06来源:CSDN浏览量:90次

  • 如何避免先污染后治理,浅谈数据标准管理的应用

    如何避免先污染后治理,浅谈数据标准管理的应用

    数据质量的提升作为数据治理环节中非常重要的一环,我们的确需要重视,但是我们知其然,还要知其所以然,从数据质量问题出发,我们还得知道到底为……查看详情

    发布时间:2019.12.13来源:亿信华辰浏览量:58次

  • 在数据智能时代企业面对庞大的数据量如何高效进行数据治理?

    在数据智能时代企业面对庞大的数据量如何高效进行数据治理?

    在数据智能时代,对企业而言,“数据驱动业务”或者“数据即是业务”的理念逐渐成为业界的一种共识。然而,数据孤岛、数据标准不统一等问题在一定……查看详情

    发布时间:2020.06.23来源:知乎浏览量:41次

  • 国内数据治理有何新动向?

    国内数据治理有何新动向?

    大数据时代,大数据技术在飞速的发展,逐渐的,大数据融入了各行各业,并且深受各大企业的喜欢,为了让各个企业的数据资产得到充分的利用,数据治……查看详情

    发布时间:2019.09.23来源:知乎浏览量:76次

  • 大数据时代还需要数据治理吗?

    大数据时代还需要数据治理吗?

    第一个提出大数据时代到来的是全球知名咨询公司麦肯锡,现如今大数据广泛存在于政府,军事,金融,企业,医疗,制造业,电力等行业,备受关注。……查看详情

    发布时间:2019.08.15来源:知乎浏览量:72次

  • 什么是数据治理以及董事会应该如何应对?

    什么是数据治理以及董事会应该如何应对?

    数据是公司持续时间最长的资产。它超越了人,设备和设施。数据治理将分析与治理要求相结合。许多公司错误地将数据治理问题与其IT部门联系起来。……查看详情

    发布时间:2018.11.22来源:Nicholas J. Price浏览量:70次

  • 数据治理领军企业在中国

    数据治理领军企业在中国

    中国在大数据领域做得不错。中国人口多,数据就多,数据多就会呼唤更先进的数据处理技术,呼唤更多的数据应用场景,这是中国在数据方面得天独厚的……查看详情

    发布时间:2020.07.31来源:知乎浏览量:40次

  • 企业的元数据和元数据管理平台介绍

    企业的元数据和元数据管理平台介绍

    元数据管理是做什么?元数据在数据平台对原信息的收集、汇总和传递将数据平台各个模块整合起来。元数据管理系统是收集线上db、solor集群、……查看详情

    发布时间:2020.08.31来源:CSDN浏览量:75次

  • 2019年需要关注的三个治理趋势

    2019年需要关注的三个治理趋势

    通过精心应用RPA,优先考虑数据质量,并迎合不断变化的劳动力构成,数据专业人员可以有效地指导他们的组织进入数据驱动的未来。……查看详情

    发布时间:2018.12.20来源:亿信华辰浏览量:51次

  • 不同部门的数据分析需求,如何满足?

    不同部门的数据分析需求,如何满足?

    让数据驱动落地企业,要先明确商业目的是什么,找到方向才能更好地指导业务。在互联网金融企业中,用户与交易额是各部门工作开展的核心所在。互金……查看详情

    发布时间:2019.01.27来源:亿信华辰浏览量:63次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议