基于大数据架构的医院数据中心管理

发布时间:2019.02.14来源:亿信华辰浏览量:1次标签:数据治理

医疗数据较为复杂,以医院来说建设的业务系统接近百来个,例如HIS系统、急诊系统、护理系统、电子病历系统、检验系统、检查系统、输血系统、生殖中心系统、体检系统等,每个业务厂家不同,设计不同,尽管医院都依照不同的主题建立部分分析型数据应用,但还是较为孤立的系统,医院也建立了集成平台,从业务的角度规范业务传输,同时在集成平台基础上了建立了临床数据中心,但都不是从医院整体数据中心管理为出发点,都是从数据应用为出发点。

现大数据技术已逐渐趋于成熟,卫生信息化建设也不断加快,医疗数据类型、标准和规模也日益增长,医疗已全面进入“大数据时代”,怎样结合大数据技术对医院数据进行治理、管理及应用成为关键话题,数据中心管理不局限于某个分析主题、科研主题,而不是手工或是后台数据库呈现方式,而是利用系统将数据标准、数据中心建立、数据采集、数据校验、数据分类、管理及应用智能管理起来。

数据中心管理系统建设

建立数据中心管理,规范数据中心设计,管理采集来源,将医院各业务系统数据有序有量的加载到数据中心库中,为数据类应用服务提供相应基础,该平台利用大数据技术[3]Hadoop中的分布式文件存储(HDFS)系统保存数据以及分布式实时处理框架(Spark)计算平台来实现。

系统架构 数据中心管理系统架构见图1。


 系统架构


图1 数据中心管理系统架构

基础层:基础层是指与医院数据决策支持平台有数据交互的系统中的数据,主要是HIS、EMR、PACS、LIS等医院业务系统。从业务系统抽取、转换等过程后加载到数据中心;交换层:将kettle封装到该中心管理系统中,将数据采集到数据中心,将整个采集过程及数据校验可视化;数据中心管理层:建立标准化管理,数据中心自由构建,将采集方式、数据模型等进行统一管理,建立智能化数据管理平台,利用分布式存储技术将数据分为不同的数据中心存储hbase数据库中;数据门户:统一数据输出管理,针对前端应用的需求,根据不同的需求类型、需求操作范围、需求的数据范围、需求操作流程进行管理,对数据实现智能检索功能;交互层:可将数据放到不同的媒介进行展现,同时可对接医院公有云或区域公有云等。

数据中心管理组件

建立数据中心管理组件,包括基础资源库、元数据管理组件、值域代码管理组件、数据集管理组件、数据抽取及监控组件、数据检验组件、模型管理组件、指标管理组件等,为数据中心的各种重要功能提供可视化统一管理工具。

基础资源库

包括整个平台从各个业务系统(HIS、EMR、LIS、PACS)中抽取并集成的各类标准数据信息,例如运营数据中心、临床数据中心、科研数据中心,采用NoSQL数据库存储方式。

元数据管理

元数据是数据中心数据管理功能的基本,是提供数据追溯的最基本单位。元数据管理模块需要按照标准去制定,有版本管理,所有的数据中心的建立都依赖于标准的元数据。用于定义字段名、字段内部ID,字段类型等,可内置国家标准、省标准或是建立医院内部标准,用户整个数据中心设计的统一管理,同时为互联互通提供数据标准。

数据集管理

数据集管理主要是管理由元数据组成的不同数据集,例如病人基础信息、病人医嘱、病人收费等,主要应用于国家、省等标准集管理,管理相应的版本、与元数据的关系等。

数据中心管理

可通过数据集或数据元自动建立数据中心表,同时对表中元数据的标准、数据类型、来源、来源表、来源字段和目标、目标表、目标字段等进行管理,方便用户追溯数据的来源及自定义表单。医院可通过数据中心管理查询到医院数据标准化程度,同时为数据模型提供来源。

标准字典管理

值域是标准字典允许值的集合,一个允许值是某个值和该值的含义的组合,值的含义称为值含义。例如,“患者病情状态”数据字典的值域是:①危急,②严重,③一般。其中①、②和③是值,其值含义分别是危急、严重和一般。

标准字典表的基本信息管理包括:类别、元数据类型、值域名称、值域标识符、定义等,用户可建立医院内部标准字典,或是内置国家颁布,在管理过程中建立标准对照功能主要是将医院业务系统与数据中心定义标准进行值的对照,亦可通过该平台发布同步机制,影响业务系统按照规定的字典标准统一更新。

数据采集管理

将kettle的采集过程进行可视化管理,主要目的是为了能了解后台数据抽取逻辑业务状态,如:业务逻辑的执行是否成功、业务逻辑的执行日志信息详情等,本功能可以通过作业名称、关联的分析主题、执行时间、完成时间、执行状态来过滤数据;可以停止/开启执行数据抽取作业;可以手动直接作业,筛选作业抽取的时间;还可以直接进行数据校验功能。

数据校验管理

数据校验主要是对抽取过来的数据进行一致性及准确性的校验。

创建数据校验时维护字段包括:数据校验名称、校验数据库ID、校验语句、源数据库ID、源数据校验语句。

具体功能实现:可以点击校验,筛选校验开始时间、结束时间;可以停止/开启执行数据抽取作业;可以手动直接作业,筛选作业抽取的时间,点击数据校验,还可以跳转到数据校验。

可自动校验、手动校验;自动校验是设定固定时间校验、校验时间段(可配置)、如若校验不一致可自动回退校验期间的数值进行数据重抽功能。

数据模型管理

利用Saliku在数据中心基础上建立多个数据应用模型,同时将其模型管理起来,管理模型的关联关系,模型内部指标集,定义指标来源、出处、规则、含义等,为规划指标统计规则,为规范指标的统计规则及含义,对指标统计进行流程化管理,可在该平台上申请指标定义及统计规则,由专人负责审核,完成整个数据流的管理工作,用户在通过数据模型自由构建报表时可查询该指标列规则、出处、内容,同时可点击校验该指标数据是否抽取完整。

数据检索功能

建立可视化数据检索功能,在数据模型的基础上,根据用户权限分配不同的数据权限,用户可以自由配置筛选条件及所需展现内容。

数据统一管理门户

为提供统一的数据管理门户,用户可在自身的权限范围内,享受平台提供的各项应用功能。

权限设置与用户认证:平台对用户应用访问进行控制,只有包含在受控的用户列表中的用户才能浏览系统应用,系统根据不同的用户权限展示允许范围内的报表信息;用户类型分组:为了控制平台应用服务的访问权限,将系统用户划分为不同的类型,如:管理员、科研人员、管理者等。不同的用户类型享用不同的应用服务,也就是对查询信息拥有不同的访问权限;数据对外管理:当其他系统调用数据中心时,[请确认修改]管理其数据去向、数据权限、数据安全;数据日志管理:对数据访问痕迹,数据日志,数据修改,数据报表建立等进行相应管理;数据应用类系统:将数据相关应用类产品实现统一的单点登录,如科研管理、院长平台、药学管理、医保控费、单病种管理等;首页个性化设定:用户可根据修改系统肤色及、可自由配置首页、组合所关注的特定报表、特定功能菜单。


(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 数据安全治理的基本思路

    数据安全治理的基本思路

    我们的世界正在进入一个奇怪的分裂状态:一方面人们为大数据时代即将在各个领域发生的革命性进步而激动难眠,另一方面人们也在为数据安全和隐私保……查看详情

    发布时间:2019.06.14来源:数据杂志浏览量:1次

  • 数据质量问题分析

    数据质量问题分析

    数据质量问题主要包含四个问题域:技术问题、信息问题、流程问题、管理问题。1、技术问题由于具体数据处理的各技术环节异常所造成的数据质量问题……查看详情

    发布时间:2019.01.07来源:亿信华辰浏览量:1次

  • 构建金融大数据标准体系的意义和目标

    构建金融大数据标准体系的意义和目标

    随着政府职能的逐步简政放权,标准作为辅助行业管理、规范行业发展、形成规模化效应的重要手段,将在社会治理体系中发挥更重要的作用。为顺应形势……查看详情

    发布时间:2019.12.27来源:CSDN浏览量:2次

  • 大数据必备知识:数据的分类方式

    大数据必备知识:数据的分类方式

    数据分类在收集、处理和应用数据过程中非常重要。数据的分类方式很多,每种方式都有特别的作用。数据工作中不同角色往往需要理解和掌握不同的分类……查看详情

    发布时间:2019.03.12来源:亿信华辰浏览量:2次

  • 加强数据治理 护航数字经济

    加强数据治理 护航数字经济

    目前,我国正处在推动互联网、大数据、人工智能和实体经济深度融合的关键时期,个人数据滥采滥用、企业数据交易纠纷频发、公共数据开放开发滞后、……查看详情

    发布时间:2019.01.04来源:陆峰浏览量:4次

  • 有效数据治理的几个原则

    有效数据治理的几个原则

    一个好的数据中心将利用自己现有的技术和设备,向用户提供服务,尽量减少操作和维护成本,并最大限度地提高利润。如果你经常担心数据的准确性,并……查看详情

    发布时间:2019.10.21来源:知乎浏览量:1次

  • 数据交换管理平台-数据交换的枢纽站

    数据交换管理平台-数据交换的枢纽站

    数据交换平台是数据中心与其它应用系统沟通的桥梁,是进行数据交换的枢纽站。数据交换平台负责从各个业务系统采集数据,对数据进行清洗与整合,按……查看详情

    发布时间:2020.04.23来源:知乎浏览量:2次

  • 数据标准管理组织职能划分与数据标准设计流程

    数据标准管理组织职能划分与数据标准设计流程

    数据标准的设计从需求发起到落地执行,一般需要经过标准编制、标准审查、标准发布、标准贯彻四个阶段:……查看详情

    发布时间:2020.09.18来源:知乎浏览量:1次

  • “五方面发力”提升银行业的数据治理能力

    “五方面发力”提升银行业的数据治理能力

    随着英国、欧盟等国家和地区纷纷推行开放银行模式以及相关监管政策逐渐落地,开放银行正成为世界银行业发展的新趋势,备受关注。……查看详情

    发布时间:2019.11.29来源:知乎浏览量:1次

  • 数据治理与数据管理:有什么区别?

    数据治理与数据管理:有什么区别?

    如果今天有任何定义成功企业的东西,那就是公司数据的成功理解,使用和策略。了解您的数据并确定如何实施它会带来一系列问题,包括用户和利益相关……查看详情

    发布时间:2018.11.13来源:克里希基德浏览量:1次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议