数据资产管理的发展趋势
发布时间:2020.09.11来源:知乎浏览量:105次标签:数据治理
数据对象纷繁复杂。目前,企业数据管理的主要数据对象仍然是结构化的文本数据。未来,随着网络爬虫、视频处理、语音识别、自然语言处理、图像处理、人脸识别等相关技术逐渐成熟并被产业界进一步深度应用,城市数据、视频数据、语音数据、图形图像数据等将被越来越多的进行管理和应用。预计到2020年,66%的企业将采用高级分类处理方案来采集、保存并处理非结构化的数据,以提高分析效率。
数据采集途径丰富。随着传感器、5G及NB-IoT的发展,数据采集及传输途径也将得以扩充。由社交媒体和机器人过程自动化(RPA)等转型技术创建的新数据通道将为数据治理和数据质量组织带来机遇和挑战。这些渠道的数据,其规模、数量、速度和变化(SVVV)等特征与主数据管理和数据治理的传统领域的特征显著不同。数据采集的变化和传统数据管理架构产生了“差异”,这样的“差异”要求管理组织采用不同的方法来管理数据质量和标准,以满足相关数字业务流程所要求的灵活性。
处理架构更新换代。由于越来越多的文件、文本、日志等半结构化、非结构化数据加入形成“数据湖”,数据的处理架构也在发生变化。支持主流大数据分析平台的处理架构以及批处理、流计算等技术正在被应用于数据资产管理。预计到2020年,主流的分析架构都将包含基于目标进行优化的解决方案,其中三分之一的产品会将关系型及非关系型数据的处理结合在一起。数据处理的底层架构将全面采取包括分布式文件系统、MPP数据库、传统数仓、流计算引擎、交互式计算引擎、离线计算引擎在内的“计算&存储混搭架构”,并逐渐由传统的“ETL”数据集成过程向“ELT”转变。以Hadoop、Spark等分布式技术和组件为核心的数据处理架构,能够支持批量和实时的数据加载以及灵活的业务需求,将是持续焦点。
组织职能升级变迁。当前主流管理制度体系中,数据管理职能由IT部门来负责,业务部门配合IT部门执行数据管理并提出需求。未来,随着数据分析与业务融合越来越深入,业务部门将成为数据应用的主角,在数据资产管理中扮演越来越重要的角色。据Gartner预测,未来50%的全球性组织将聘用首席数据官(CDO,Chief Data Officer),在数据高度监管的银行金融或医疗健康领域,此类人才需求量更大。这些人员将全面负责实施和监督各级严格的数据治理和质量监管政策。
管理手段自动智能。依靠“手工人力”的电子表格数据治理模式即将被“自动智能”的“专业工具”取代,越来越多的数据管理员、业务分析师和数据领导者采用“平台工具”来获取数据价值。随着机器学习、深度学习技术的成熟,相关专项解决方案和平台工具系统的技术局限性如效率低、差错率高、扩展性差等将被一一攻破,能够有效地解放人力,提高效率和精度。
应用范围不断扩大。数据的应用范围将由传统的内部应用为主发展为支撑内部和服务外部并重。数据资产的意义价值也从对内强化能力扩展到了对外合作开放上,从而实现数据资产保值到增值的跨越。内部应用一般包括管理优化、研判决策、风险规避、业务拓展、管控成本等。由原来的只应用于领导决策场景扩展到全员业务分析使用。外部运营包括智能推荐、精准营销、分析报告以及风险防控等。
-
“数据治理”:重构和愿景
对于数据业者而言,数据治理(datagovernance)并不陌生。根据国际标准化组织IT服务管理与IT治理分技术委员会、国际数据治理研……查看详情发布时间:2020.06.19来源:CSDN浏览量:62次
-
数据治理包括哪几个方面
大数据时代的到来,让政府、企业看到了数据资产的价值,快速开始探索应用场景和商业模式、建设技术平台。这无可厚非。但是,如果在大数据拼图中遗……查看详情发布时间:2022.05.10来源:小亿浏览量:1461次
-
政府如何进行数据治理
政府掌握全社会重要核心的、高价值的数据,如何通过有效管理,进行共享开放与协同,释放背后价值,赋能管理、服务决策,推动治理能力的提升对于我……查看详情发布时间:2021.08.30来源:亿信华辰浏览量:126次
-
企业数字化转型关键 ,数据治理需要关注什么?
2019年我国数字经济规模为35.8万亿元,产业数字化占数字经济的比例达到80.2%。新经济领域的高度数字化,通过传导至传统产业的转型升……查看详情发布时间:2020.11.08来源:知乎浏览量:97次
-
“安全”与“共享”同行,大数据正改变着世界
什么是大数据?早在2011年,世界著名咨询公司麦肯锡就曾在《大数据:下一个创新、竞争和生产力的前沿》报告中对其进行了基础定义:“大数据是……查看详情发布时间:2019.01.14来源:亿信华辰浏览量:86次
-
如何避免先污染后治理,浅谈数据标准管理的应用
数据质量的提升作为数据治理环节中非常重要的一环,我们的确需要重视,但是我们知其然,还要知其所以然,从数据质量问题出发,我们还得知道到底为……查看详情发布时间:2019.12.13来源:亿信华辰浏览量:69次
-
数据治理和数据管理不可互换
从什么时候开始数据管理和数据治理可以互换? 这个问题让我感到困惑和沮丧。追求数据管理供应商与业务利益相关者建立联系,因为业务部门在决策……查看详情发布时间:2018.11.20来源:Michele Goetz浏览量:73次