大数据治理需要解决哪些问题?
发布时间:2018.10.15来源:数邦客浏览量:97次标签:数据治理
随着云时代的来临,大数据也吸引了越来越多的关注。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理数据库、数据挖掘电网、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。大数据优势的凸显,也从侧面暴露一些问题,那么对于大数据治理计划需要解决哪些问题?下面就跟随千锋小编一起来看一看。
元数据
大数据治理需要创建可靠的元数据,避免出现窘境,例如,一家企业重复购买了相同的数据集两次,而原因仅仅是该数据集在两个不同的存储库内使用了不同的名称。
隐私
企业需要严格关注遵守隐私方面的问题,例如利用社交媒体进行数据分析。
数据质量
考虑到大数据的庞大数量和超快速度,组织需要确定哪种级别的数据质量属于“足够好”的质量。
信息生命周期管理。大数据治理计划需要制定存档策略,确保存储成本不会超出控制。除此之外,组织需要设定保留计划,以便按照法规要求合理处置数据。
管理人员
最终,企业需要招募大数据管理员。例如,石油与天然气公司内的勘探开采部门的管理员负责管理地震数据,包括相关元数据在内。这些管理员需要避免组织因不一致的命名规范而付款购买已经拥有的外部数据。除此之外,社交媒体管理员需要与法律顾问和高级管理人员配合工作,制定有关可接受的信息使用方法的策略。
其实对于大数据的治理计划,不仅仅包括以上几个方面,还涉及到很多内容,如何解决的问题,需要我们首先掌握大数据技术。
-
一文搞懂数据质量问题及对应的解决办法
通过数据分析、数据评估、数据清洗、数据监控、错误预警等内容,解决数据质量问题,使数据的质量得以改善,使其满足数据需求方对数据质量的规则要……查看详情发布时间:2019.11.05来源:知乎浏览量:544次
-
数据标准管理组织职能划分与数据标准设计流程
数据标准的设计从需求发起到落地执行,一般需要经过标准编制、标准审查、标准发布、标准贯彻四个阶段:……查看详情发布时间:2020.09.18来源:知乎浏览量:140次
-
全方位解读 | 了解数据治理、挑战及数据治理工具
早在 2000 年代初,企业就将数据视为公司的战略资产,以指导战略决策,促进实验学习和改进,并提供更好的业务成果。数据安全已成为企业的重……查看详情发布时间:2021.07.29来源:亿信数据治理知识库浏览量:140次
-
做好数据治理,更快更好地推进数字化转型
数据为关键要素的数字经济进入了新时代。当前,以人工智能、区块链等为代表的数字技术不断涌现,快速向经济社会各领域融合渗透。以数据为核心的数……查看详情发布时间:2020.03.26来源:知乎浏览量:95次
-
全球数据治理市场到2024年 - 数据量的增长以提供巨大的机会
预计数据治理市场在预测期间(2019年至2024年)的复合年增长率将超过21.44%,预计到2024年将达到43.5亿美元的价值。 ……查看详情发布时间:2019.07.04来源:知乎浏览量:92次
-
大数据治理的核心要素有哪些
当今的大型企业,内部分工日趋细化,采购、服务、市场、销售、开发、支持、物流、财务、人力等各个环节,无不每时每刻产生着大量的数据。数据的格……查看详情发布时间:2019.10.21来源:知乎浏览量:105次
-
企业数据质量管理的水平、直接影响数字化转型的进程!
企业在数字化转型的过程中,需利用云计算、大数据、移动互联和物联网技术,通过新的产品和服务、新的业务模式和新的关系创造价值和竞争优势。数字……查看详情发布时间:2019.08.01来源:知乎浏览量:103次
-
如何保证所基于的数据具有高质量?
基于数据决策的前提是数据可靠且相关,数据必须是“真实可信的”,否则“输出将是误导和无效的”。但是学校所收集的数据可能不完全,或者更新不及……查看详情发布时间:2020.10.31来源:知乎浏览量:87次
-
常见的主数据管理问题
主数据管理,包括不仅仅是硬件和软件,还是将数据作为重要资产管理的思想和办法,是指一整套的用于生成和维护企业主数据的规范、技术和方案,以保……查看详情发布时间:2020.12.05来源:知乎浏览量:287次