从今天开始将本人在工作当中,处理的一些Kettle过程记录下来,供大家参考学习。

在日常数据处理过程中,会涉及调用对方接口获取数据,来向自己的数据库中插入大量业务数据,这里说明一下数据处理过程中,经常会这样设计:

 

那么调用外部接口时,只要数据通过kettle抽取收集到前置库中,即算完成,后续数据的处理加工,会在之后的文章中发布,敬请留意加关注。

1、准备工作--接口测试

手里有个外部接口文档(必须网络是互通的),使用postman工具来测试接口是否成功调用

2、准备工作--数据库目标表

我这里在本地库模拟为前置库来操作,表结构根据业务需要设计

表名:test_tb

3、配置Kettle--全景

        3.1 调用接口参数设置:

         3.2 获取、设置结果

         3.3 提取结果

         3.4设置值字段(日期格式化)因为库表中JNRQ是date类型

 

         3.5生成随机数(存放主键ID)

         3.6 表输出(根据需要选择信息存放到数据库表字段中)

 

 4、运行测试(完成)

 

Logo

为开发者提供学习成长、分享交流、生态实践、资源工具等服务,帮助开发者快速成长。

更多推荐