从今天开始将本人在工作当中,处理的一些Kettle过程记录下来,供大家参考学习。

在日常数据处理过程中,会涉及调用对方接口获取数据,来向自己的数据库中插入大量业务数据,这里说明一下数据处理过程中,经常会这样设计:

那么调用外部接口时,只要数据通过kettle抽取收集到前置库中,即算完成,后续数据的处理加工,会在之后的文章中发布,敬请留意加关注。

1、准备工作--接口测试

手里有个外部接口文档(必须网络是互通的),使用postman工具来测试接口是否成功调用

2、准备工作--数据库目标表

我这里在本地库模拟为前置库来操作,表结构根据业务需要设计

表名:test_tb

3、配置Kettle--全景

3.1 调用接口参数设置:

3.2 获取、设置结果

3.3 提取结果

3.4设置值字段(日期格式化)因为库表中JNRQ是date类型

3.5生成随机数(存放主键ID)

3.6 表输出(根据需要选择信息存放到数据库表字段中)

4、运行测试(完成)

kettle实战之调用接口相关推荐

  1. vue3项目实战中的接口调用方法(二)fetch用法 (前后端交互) get请求/post请求/put请求/delete请求

    vue3项目实战 fetch调用接口

  2. kettle的变量空间接口VariableSpace实现与委托模式

    kettle中很多对象有变量,这些对象都实现了变量空间VariableSpace接口.这些实现类并没有都自己实现接口方法而是委托给Variables对象这个VariableSpace接口的实现类. 有 ...

  3. 人生苦短,使用百度云SDK,编写python代码调用接口的车牌识别

    两个想法 调云在线的接口或者使用SDK做开发(配置环境和编译第三方库很麻烦,当然使用python可以避免这些问题) 自己实现车牌识别算法(复杂) 一开始准备使用百度云文字识别C++ SDK来做,发现需 ...

  4. Kettle 实战教程

    Kettle 实战教程 1.引言.................................................................................... ...

  5. 实战CXF调用Webxml天气预报服务

    http://my.oschina.net/bayer/blog/52490 实战CXF调用Webxml天气预报服务 今晚群里的kasasis同学问我会不会使用CXF调用 http://www.web ...

  6. android项目实战-人脸识别接口应用

    android项目实战-人脸识别接口应用 1.face++接口: 2.源码: 3.效果: 4.App下载: 5.代码解读: FaceUtils.java FaceAdapter.java ImageR ...

  7. 使用第三方SDK(如微信、qq、快看、头条等),调用接口405 Method Not Allowed

    使用第三方SDK(如微信.qq.快看.头条等),调用接口405 Method Not Allowed 错误描述:postman请求正常,但客户端调用后接口没有反应,但返回了405错误. 解决方法:第三 ...

  8. httpclient 调取接口_使用HttpClient调用接口的实例讲解

    一,编写返回对象 public class HttpResult { // 响应的状态码 private int code; // 响应的响应体 private String body; get/se ...

  9. 封装的人人网客户端调用接口

    2019独角兽企业重金招聘Python工程师标准>>> 最近项目需要调用人人网的开放平台接口,研究了一下人人网的API,封装了一些常用接口的调用方法,项目测试通过.主要用到了apac ...

最新文章

  1. NTU 课程笔记 CE7454(2) 概率论
  2. Google Guava库必需品
  3. c语言如何赋值星期到字母,C语言程序设计课程教案.doc
  4. 阿里云SAG2.0发布,助力企业全球互联
  5. 伯克利:serverless是下一代计算范式
  6. 深入分析 iBATIS 框架之系统架构与映射原理【转】
  7. mysql数据库横向转纵向_MariaDB Spider:实现MySQL横纵向扩展的小能手
  8. iOS9使用提示框的正确实现方式(UIAlertView is deprecated)
  9. Oracle SQL性能调整注意事项
  10. .NET MVC4 本地正常 部署 服务器错误
  11. 全球前沿技术趋势报告;华为发布Mate 40/Pro 系列新机;Windows 计算器移植到到 Linux...
  12. js清空本地存储_前端存储除了 localStorage 还有啥
  13. Java面向对象笔记 • 【第10章 Swing编程初级应用】
  14. 随便学学Python-day10-函数的进阶
  15. ubantu20切换源
  16. Elasticsearch:Data streams(三)
  17. 网易云音乐的推荐音乐方式与算法漫谈
  18. C语言入门——计算n的阶乘
  19. 唯品会--2018校招AI算法笔试题
  20. 华为防火墙做出口网关

热门文章

  1. 简陋中带点动画的太极图
  2. golang uint8、int8与byte的区别
  3. 软件分析——数据流分析2
  4. Intellij IDEA 字体大小设置
  5. 部署Ceilometer +Gnocchi + Aodh
  6. ios NSUInteger和 NSInteger 还有 int
  7. QPM 之同类 PM 对比
  8. 电商平台零售交易数据分析案例part2
  9. java 16进制转64进制_Java进制概述及进制间的相互转换
  10. 1066: 字符分类统计 C语言