kettle-8.3.0.0：基本使用

灰太狼 2023-06-25 07:48 23阅读 0赞

# 一、子程序功能和启动方式介绍 #

![format_png][]

spoon.sh: 图形界面方式启动作业和转换设计器。
    pan.sh: 命令行方式执行转换。
    kitchen.sh: 命令行方式执行作业。
    carte.sh: 启动web服务，用于 Kettle 的远程运行或集群运行。
    encr.sh: 密码加密

## **转换和作业：** ##

Kettle 的 Spoon 设计器用来设计转换（Transformation）和 作业（Job）。

•转换主要是针对数据的各种处理，**一个转换里可以包****含多个步骤（Step）**。

•作业是比转换更高一级的处理流程，**一个作业里包括****多个作业项（Job Entry）**，一个作业项代表了一项工作，转换也是一个作业项。

# 二、第一个转换——hello world #

1.运行Spoon.sh，打开图形设计界面

// 首次运行，可能出现较长等待时间

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70][]

2. 连接自己已经创建好的资源库，如：Kettle\_test（admin/admin）,如果没有创建，参考：[kettle-8.3.0.0：创建资源库][kettle-8.3.0.0]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70 1][]

3.通过导航栏：**文件-新建-转换**，新建一个转换

![format_png 1][]

4.在左边选择输入（这里以简单的**生成随机数**为输入）

![format_png 2][]

双击节点进行配置：

![format_png 3][]

5.同理选择输出（这里选择最简单的**文本输出**）

![format_png 4][]

**选中输入节点，按住shift键，通过鼠标左键进行节点连接！**

6.运行转换

![format_png 5][]

运行之前保存转换：

![format_png 6][]

查看执行结果：

![format_png 7][]

桌面上可以查看转换的结果文件：

![format_png 8][]

7.预览

比如上面的例子，如果只是想看一下随机数是否正确正常，不想再另外配一个文本输出来查看结果，可以删除输出节点，使用预览：

![format_png 9][]

点击快速启动，即可查看结果：

![format_png 10][]

8.添加转换过程

这里添加一个最常用的**字段选择**，通过节点连接后，点击获取字段可以选择所有，然后在字段列表进行选择：

![format_png 11][]

选中一行，右键 => **删除选中的行**，过滤指定的字段，预览即可查看转换的结果：

![format_png 12][]

9.改变并发数

例如上面的生成随机数，如果想生成多个而不只是一行，可以在生成随机数节点上**右键**\->**改变开始复制的数量**，节点上即会对应进行显示：

![format_png 13][]

10.流程操作

除了转换，还有一些比较常用的流程操作：

![format_png 14][]

这里以常用的**过滤记录**与**空操作**举例（空操作视为垃圾箱，用于丢弃不要的过滤结果等）

这里对结果进行不同方向的处理：过滤为True的放入文本文件，为False的丢弃：

![format_png 15][]

**配置过滤的节点：**主要配置字段的过滤条件（文本文件节点和前文一样配置）

![format_png 16][]

保存并启动转换，转换结果不再赘述。(结果输出为filter.txt)

# **三、计算器案例操作** #

例如进行一些字段与字段之间的计算或者字段的计算等操作，可以通过搜索找到**计算器**节点（或者在转换下找），配置如下：

![format_png 17][]

(结果输出为sum.txt)

# 四、连接案例 #

在输入中选择两个**自定义常量数据**，这个一般用于自己编造测试数据，在连接中选择**记录集连接**：

![format_png 18][]

配置自定义常量数据：分别在元数据中配置字段定义信息，在数据中写入测试数据：

![format_png 19][]

配置记录集：

![format_png 20][]

预览可查看结果：

![format_png 21][]

(结果输出为join.txt)

[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE2MzgxNTA0MC0yODMwMDg1MTMucG5n?x-oss-process=image/format,png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20191227092728286.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3,size_16,color_FFFFFF,t_70
[kettle-8.3.0.0]: https://blog.csdn.net/qq_32252917/article/details/103710138
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20191227093031738.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMyMjUyOTE3,size_16,color_FFFFFF,t_70
[format_png 1]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE2NTYxMTcwNi0xMjQzMDk5NzA0LnBuZw?x-oss-process=image/format,png
[format_png 2]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE2NTcxNDgxMS0xMDczNzg2OTk1LnBuZw?x-oss-process=image/format,png
[format_png 3]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDA1NjI4NC00MTA0OTA1NTAucG5n?x-oss-process=image/format,png
[format_png 4]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDE0NjU0MS05NjIxNTg3NzYucG5n?x-oss-process=image/format,png
[format_png 5]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDMwNTg0Mi0xMzk4NTA5MDE1LnBuZw?x-oss-process=image/format,png
[format_png 6]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDY0MTU5OC0yMTA0MjM2NzE3LnBuZw?x-oss-process=image/format,png
[format_png 7]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDcyMjQ1OS0xNzI5MzY3NTAucG5n?x-oss-process=image/format,png
[format_png 8]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MDc1NTQ0Ny0xMjY0MTU2NzI5LnBuZw?x-oss-process=image/format,png
[format_png 9]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MTExNDcwMS00MTg3MzgxOTEucG5n?x-oss-process=image/format,png
[format_png 10]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MTE1MjU4My05NDk1MjE3NzQucG5n?x-oss-process=image/format,png
[format_png 11]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MTUwMjUxNC01ODE2MDU5NDkucG5n?x-oss-process=image/format,png
[format_png 12]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MTcxNjcwOC0yMTI5NzgwODQ4LnBuZw?x-oss-process=image/format,png
[format_png 13]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MjIyMDYxOS0xMjAyOTE4MTYxLnBuZw?x-oss-process=image/format,png
[format_png 14]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MjUwODkzNC0xMDI4MjI3MzU5LnBuZw?x-oss-process=image/format,png
[format_png 15]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3Mjc1NTY0Ny0yNTU4NTEwNzkucG5n?x-oss-process=image/format,png
[format_png 16]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3MzAxMTAxMy0xNDE1OTI4MzE0LnBuZw?x-oss-process=image/format,png
[format_png 17]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3NDM1MjA2Mi0xMDA1NzIyMTU2LnBuZw?x-oss-process=image/format,png
[format_png 18]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3NTU1MDY1OS0yODQxODU4MzgucG5n?x-oss-process=image/format,png
[format_png 19]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3NTcxMzc2NC0xNTU3NzcxNzAucG5n?x-oss-process=image/format,png
[format_png 20]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3NTkwMDUxNS0xMzY5MTYxMjQ3LnBuZw?x-oss-process=image/format,png
[format_png 21]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9pbWFnZXMyMDE4LmNuYmxvZ3MuY29tL2Jsb2cvMTEzNTU4MC8yMDE4MDUvMTEzNTU4MC0yMDE4MDUwMzE3NTkzODA0OS04MDM3NTM1MjgucG5n?x-oss-process=image/format,png