政务数据交换共享解决方案:打破数据孤岛 让数据成为资产
发布时间:2020.12.03来源:知乎浏览量:117次标签:数据治理
亿信华辰通过创新大数据处理技术,为新一代政务数据共享交换提供解决方案,以实现数据的统筹利用、统一接入、开放共享,形成数据存储、交换、使用、共享的核心枢纽,推动跨地区、跨层级、跨部门的数据共享交换与应用,助推政务数据无缝共享新时代的开启。
政务数据交换通用部署架构
事实上,实现政务信息系统的整合和共享,本质上是实现国务院各部门与地方政府之间、部门与部门之间、各业务系统之间的数据整合和共享。所以,构建统一、高效、安全可控的数据共享交换平台至关重要。
目前,各地各部门已经陆续搭建了各自的政务数据交换平台。在平台建设过程中,逐渐形成了较为成熟的数据交换体系架构。其中,大部分较为通用的政务数据共享交换体系技术支撑由一个统一交换管理中心和多个交换节点子系统组成。信息库系统由部门业务信息库、交换信息库等组成;信息交换系统由交换节点子系统、交换监控管理系统、资源目录系统组成。政务信息资源交换体系技术总体架构如下图所示。
其中交换节点子系统部署在各部门前置机中,主要打通物理隔离,将业务库信息交换到数据交换平台中,然后再交换到平台内置交换信息库,或者直接传输交换到其他前置机,进而交换到其他部门业务库。
交换管理中心主要是包括资源目录管理系统和交换监控管理系统。其中资源目录管理系统主要是管理业务系统的数据信息资源,包括资源本身的属性、特征及其定位信息和获取方式。交换监控管理系统主要是监控交换过程,同步节点信息,交换任务调度监控等,确保交换过程稳定、高效、安全进行。
政务数据交换常见场景
围绕政务共享交换领域,以数据分类分级为基础,以数据安全标签为手段,针对数据共享交换场景和大数据应用场景打造数据安全治理整体解决方案,从前端业务系统到后端业务数据库,从源头到终端,对数据的获取、处理和使用进行安全闭环监督管理。
政务数据交换的场景主要有几类,有资源文件的交换,包括各种文本文件、Excel等,通常通过文件交换传输的方式如FTP、MQ等进行交换,也可以是从库表交换到库表,或者库表到文件、文件交换到库表、接口到文件到库表等等多种灵活的数据交换方式,通过ETL方式实现数据交换,同时也可以对数据做一定的预处理。
政务数据交换过程中需要对数据交换全生命周期做监控,以便及时预警,主要包括交换节点监控、交换统计信息监控、调度情况监控等。其中对交换节点监控,主要是对节点状态信息监控,节点连通情况监控,节点系统资源使用情况监控等。对交换统计信息监控,主要包括节点交换任务数、交换量、交换性能、交换结果、交换使用资源等监控。对调度情况监控,主要是对调度情况整体监控,包括调度任务数统计、异常任务监控、调度时间分布统计等。同时也支持日志审计,每次在平台所执行的操作和交换调度都会做日志记录,以便查核。
政务数据交换平台落地成熟产品
目前,许多地方已经陆续建立了各自的政务数交平台,技术体系已经比较成熟,有些数据服务公司已经总结了数交实施经验而形成了稳定、成熟的数据交换产品,例如亿信华辰公司的睿通数据交换产品,它是亿信华辰公司自主研发的具有独立自主知识产权、业界领先的企业级数据整合交换平台。
亿信华辰睿通数据交换产品支持广泛的数据采集类型(数据库、文件、表格等),适用于数据库之间、文本之间、以及不同类型之间进行数据交换等数据交换场景,同时提供了多种数据变化捕获方法完成数据的增量抽取,丰富的交换组件和清洗转换规则支持,完成数据的采集、集中处理、分发、加载、传输,构造统一的数据及文件的传输交换,可以解决跨部门、跨区域、跨网络的数据交换问题,全面支撑政务数据共享开放体系。
佛山某区利用睿通数据交换产品建设的政务服务数据管理平台,基于人口库、卫计、工商、流管数据,建立区大数据统筹局一库三部门的统一技术和业务标准;开发区域数据交换平台,完成三大部门数据的采集、传输,以及一库三部门的交换共享,提供衔接顺畅的数据申请、交换服务,并对交换日志数据进行监控分析。重点汇集与治理卫计、工商、流管等部门数据,为各部门数据应用如自助填表系统、教育无纸化提供了高质量的数据支撑。
-
如何构建企业安全易用的数据资产?
在数据治理架构中,数据资产管理位于底层数据和数据管理与应用之间,处于承上启下的重要地位。对上支撑数据安全管理等职能建设以价值发掘为导向的……查看详情发布时间:2021.06.02来源:亿信华辰数据治理知识库浏览量:159次
-
数据质量问题的影响因素
数据质量反映的是数据的“适用性(fitness for use)”,即数据满足使用需要的合适程度。数据质量通过完整性、一致性、准确性、及……查看详情发布时间:2020.04.09来源:百度浏览量:259次
-
北大光华王汉生教授万字长文,讲透数据治理问题!
2018年3月16日,中国银监会发布了《银行业金融机构数据治理指引(征求意见稿)》,就相关数据治理问题,向全社会公开征求意见,至此银行业……查看详情发布时间:2019.06.03来源:王汉生浏览量:104次
-
主数据管理第一步——识别主数据
主数据管理的目的就是为了确保企业核心数据的准确性、一致性、稳定性,打破数据孤岛,帮助企业高效运转。然而在茫茫数据大海中识别出主数据是一项……查看详情发布时间:2019.10.24来源:亿信华辰浏览量:94次
-
强大的数据治理是机器学习成功的关键
人工智能和机器学习这两个术语通常被视为同一枚硬币的两面。尽管如此,虽然ML算法增强了AI功能,并使它们能够进行更多的尖端和智能计算,但还……查看详情发布时间:2019.01.17来源:数据治理浏览量:112次
-
多措并举提升银行业数据治理能力
数据治理是银行业高质量发展的必由之路,当前银行业的数字化转型面临一些挑战和不足,要从建立数据治理架构、统一数据标准、加强数据分析应用等方……查看详情发布时间:2019.12.13来源:知乎浏览量:106次
-
赞成谷歌的建议允许数据治理的巴尔干化
数据管理公司Immuta的首席隐私官和法律工程师表示,这只是一项建议,仍需要由法院作出最终裁决。……查看详情发布时间:2019.01.17来源:数据治理浏览量:78次
-
数据质量管理包括什么方面
数据是组织最具价值的资产之一。企业的数据质量与业务绩效之间存在着直接联系,高质量的数据可以使公司保持竞争力并在经济动荡时期立于不败之地。……查看详情发布时间:2019.11.07来源:知乎浏览量:163次
-
理论之企业数据挖掘成功之道
面对现在海量的、不完整的、模棱两可的数据,运用数据挖掘算法对数据进行查找,找出人们所不知道的、有实用价值的信息,这一过程就是数据挖据。随……查看详情发布时间:2019.05.23来源:知乎浏览量:95次