Kettle读取接口数据到数据表-Http控件的使用

一、创建一个转换

点击右上角文件，选择新建，再选择转换即可创建一个转换。

新建转换后菜单如下：

之后的操作都是基于这个转换中的核心对象来操作。

二、所用到的核心对象

输入菜单下的生成记录
查询菜单下的HTTP client
- 这个核心对象和同级的Http post、REST client使用原理都是差不多的，可以融汇贯通
输入菜单下的JSON input
输出菜单下的表输出
- 不一定是用表输出，使用插入/更新控件也可以实现类似的效果

三、控件摆放方式如下

四、配置DB连接

4.1 切换到主对象树下，鼠标右击转换菜单下的`DB连接`，选择新建：

4.2 配置一个MySql连接：

4.3 配置好后选择确定，就能看到当前转换下的一个DB连接：

五、配置生成记录核心对象

主要是配置接口地址：

http://localhost:8899/test/list

给这个地址起了个名称api，后面的核心对象控件就能够使用api来作为接口路径。

注意：

这里有个限制配置，写几后面的HTTP client就会查几次

六、配置HTTP client核心对象

勾选从字段中获取url。

url字段名处就可以在下拉框中选择到上一个核心对象控件配置的api。

最后设置结果字段名即可。这个结果字段名，直接决定了下一个控件获取结果时使用的名称。

七、配置JSON input核心对象

使用HTTP client控件从接口读取到数据以后。

需要使用JSON input核心对象来解析，把查询结果转换为JSON。

7.1 配置`JSON input`核心对象数据来源

勾选源定义在一个字段里。

从字段源获取处就可以在下拉框中选择到上一个核心对象控件配置的result字段。

7.2 配置字段映射

这里可以选择需要得到HTTP client核心对象控件获取到的哪些数据。

配置的名称，就是要输入到下一个核心对象中的数据名称。

7.3 JSONPath操作符详解

路径那一段的写法可能很多人不知道什么意思。

其实这里用的是JSONPath操作符。它的作用是定位到复杂结果集中的具体字段。

7.3.1 JSONPath常见操作符

操作符名称	说明
$	查询的根节点对象，用于表示一个json数据，可以是数组或对象
…	可以理解为递归搜索
.name	表示一个子节点
@	过滤器断言(filter predicate)处理的当前节点对象，类似于java中的this字段
*	通配符，可以表示一个名字或数字
[start:end]	数组片段，区间为[start,end]，不包含end

7.3.2 具体使用方式

比如有如下复杂结果集：

{
	"code": 200,
	"msg": "查询成功",
	"data": [
        {
            "name":"zs",
            "age":"18",
		},
        {
            "name":"ls",
            "age":"25",
		}
    ]
}