手把手系列:常用数据交换方案之Web Service接口处理法

发布时间:2020.12.29来源:知乎浏览量:130次标签:数据治理

Web Service是一个SOA(面向服务的编程)的架构,是一个平台独立的,低耦合的,基于可编程的web的应用程序,可使用开放的XML标准来描述、发布、发现、协调和配置这些应用程序。Web Service使得运行在不同机器上的不同应用无须借助附加的、专门的第三方软件或硬件,就可相互交换数据或集成。正是基于以上特性,使得Web Service得以广泛应用,成为一种常用的交换方式。

一、Web Service处理流程
针对Web Service接口,从接口数据接入、加工处理到交换入库等,数据治理睿治中的数据交换平台都有一套完整的、可配置的组件,用于满足各种场景需求。主要操作步骤如下:

1.在数据源进行Web Service接口注册

依次点击数据源-接口数据源-新增,弹出新建接口数据源对话框。在接口地址中输入Web Service接口的地址,格式选择WSDL。

2.使用Excel输入组件从Excel文件中解析参数

因为要查询各地区的天气情况,所以我们从Excel文件中解析出各省市名称,Excel内容如下图所示

用Excel输入组件,将上图的数据解析到临时表中,用作Web Service接口组件的参数。

3.根据Excel组件的参数,用Web Service接口组件从接口中获取数据

数据源选择我们刚刚创建Web Service天气
执行操作选择根据城市名称查询天气的操作
请求编码使用默认的UTF-8编码
下面的参数列表中,需要的参数城市名选择输入字段中的cityname字段

在输出字段界面点击刷新按钮,会自动添加字段,为了避免接口返回的数据长度太大,字段类型不是大字段的我们手动将字段类型改为大字段。

4.使用xml解析组件解析Web Service接口组件的数据

xml来源选择输入字段
字符集用默认的UTF-8
字段选择web service接口组件输出的字段

解析节点手动输入data/lives

字段列表界面,手动添加字段,输入字段名称和节点名称

5.使用表输出组件将xml解析组件解析后的数据存储到数据库中

6.查看数据

最后目标表中存储的数据:

整个交换任务流程(Excel中数据太多,通过过滤组件只保留部分数据):

二、项目应用与实践
目前Web Service接口组件已在多个项目中得到广泛应用,如:某区政务服务数据管理中心通过Web Service接口与教育、公安和工商局完成信息共享交换,为教育无纸化提供保证;某环保局通过Web Service接口完成对工业废水、废气等数据的共享交换,从而实现空气质量的实时更新与监控等等……

除了Web Service接口方式的交换外,亿信华辰睿治数据治理中的数据交换平台中还内置了许多交换处理组件,譬如传统的库表和文件交换,还有HTTP接口交换、FTP文件交换、MQ交换等,可轻松满足诸多交换场景,快来试用体验吧!
(部分内容来源网络,如有侵权请联系删除)
立即免费申请产品试用 免费试用
相关文章推荐
  • 为什么数据分析计划仍然失败

    为什么数据分析计划仍然失败

    强大的数据分析是数字业务的必要条件 - 这一切都始于智能数据治理实践,并强调质量和环境。……查看详情

    发布时间:2019.01.02来源:亿信华辰浏览量:127次

  • 赢得数据治理的五个秘诀

    赢得数据治理的五个秘诀

    到目前为止,您已经意识到拥有出色的数据分析策略还需要拥有良好的数据治理策略。毕竟,如果您的数据无法控制,那么您在其上运行的分析在一天结束……查看详情

    发布时间:2019.02.27来源:亿信华辰浏览量:141次

  • 中小银行行数据治理是否错过最佳建设期?

    中小银行行数据治理是否错过最佳建设期?

    数据治理基础建设缺失、人才匮乏、意识觉醒较晚。目前中小银行数据治理难点有哪些?中小银行行数据治理是否错过最佳建设期。……查看详情

    发布时间:2019.11.28来源:知乎浏览量:112次

  • 数据治理治的是“数据”吗?

    数据治理治的是“数据”吗?

    数据是指对客观事件进行记录并可以鉴别的符号,是对客观事物的性质、状态以及相互关系等进行记载的物理符号或这些物理符号的组合。其实在我看来,……查看详情

    发布时间:2020.07.07来源:知乎浏览量:123次

  • 为什么你应该有一个数据治理策略

    为什么你应该有一个数据治理策略

    有效的数据治理也是一个持续的过程。政策定义,审查,调整和审计以及合规审查和质量控制都会作为数据治理生命周期经常受到影响或重复。因此,数据……查看详情

    发布时间:2019.03.08来源:亿信华辰浏览量:155次

  • 四说大数据时代“神话”:从大数据到深数据

    四说大数据时代“神话”:从大数据到深数据

    为国内最大的电商平台之一,苏宁每天要处理数量巨大的数据。为了更快速高效地处理这些数据,苏宁调度平台采取了哪些措施呢?……查看详情

    发布时间:2019.02.14来源:亿信华辰浏览量:155次

  • 创新者的破局之路:煤炭行业首个集团级数据治理项目落地

    创新者的破局之路:煤炭行业首个集团级数据治理项目落地

    工业互联网激起能源领域一池春水,新一代信息技术则是其不断发展的加速器。山东能源集团下属临沂矿业集团有限责任公司(以下简称临矿集团)率先在……查看详情

    发布时间:2021.01.29来源:头条浏览量:174次

  • 企业何时进行数据治理才是最佳时机

    企业何时进行数据治理才是最佳时机

    找准数据治理的切入点,是关乎数据治理成败的关键。如果将数仓建设分为数仓雏形阶段、数仓迭代阶段和能力沉淀阶段,数据治理应该在哪个阶段切入为……查看详情

    发布时间:2020.06.30来源:知乎浏览量:118次

  • 大数据必备知识:数据的分类方式

    大数据必备知识:数据的分类方式

    数据分类在收集、处理和应用数据过程中非常重要。数据的分类方式很多,每种方式都有特别的作用。数据工作中不同角色往往需要理解和掌握不同的分类……查看详情

    发布时间:2019.03.12来源:亿信华辰浏览量:161次

  • 让数据中心甩掉能耗沉重账单

    让数据中心甩掉能耗沉重账单

    当今,全世界新产生的数据正以惊人速度增长。据统计,平均每11个月全世界的数据量即将翻倍,而且随着时间的发展,这个周期还在缩短。这意味着我……查看详情

    发布时间:2019.03.11来源:亿信华辰浏览量:131次

相关主题
您点击 “提交”,表明您已理解并同意接受本网站隐私政策和用户协议