KETTLE 使用教程

分手后的思念是犯贱 2022-03-20 10:59 421阅读 0赞

[前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到教程。][Link 1]

[Kettle][]的建立数据库连接、使用kettle进行简单的全量对比插入更新：kettle会自动对比用户设置的对比字段，若目标表不存在该字段，则新插入该条记录。若存在，则更新。

Kettle简介：Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，[数据抽取][Link 2]高效稳定。Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个壶里，然后以一种指定的格式流出。Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么，而不是你想怎么做。Kettle中有两种[脚本文件][Link 3]，transformation和[job][]，transformation完成针对数据的基础转换，job则完成整个工作流的控制。（引用[百度百科][Link 4]）

1、Kettle的下载与安装（在本文中使用的kettle版本为6.1.0.1-196）

2、打开kettle。

首先解压下载下来的压缩包如:pdi-ce-6.1.0.1-196.zip

然后打开Spoon.bat，如图所示：

![bf551dd12bee0cc1f1d699ce656f01a5.png][]

打开后请耐心等待一会儿时间。

3、建立转换。

在文件->新建装换。

新建转换后在左边的主对象树中建立DB连接用以连接数据库。如图所示：

![9e92001782370978d3b7b555c965afb8.png][]

建立数据库连接的过程与其他数据库管理软件连接数据库类似。

注意：在数据库链接的过程中，可能会报某个数据库连接找不到的异常。那是因为你没有对应的数据库链接驱动，请下载对应驱动后，放入kettle的lib文件夹。

4、简单的数据表插入\\更新

（1）新建表插入

在左边的面板中选择“核心对象”，在核心对象里面选择“输入->表输入”,用鼠标拖动到右边面板。如图所示：![45613eb299cd2cf3d856cc439e817fb1.png][]

双击拖过来的表，可以编辑表输入。

选择数据库连接和编辑sql语句，在这一步可以点击预览，查看自己是否连接正确。

![5b77b724ea38669c007286f7b987cdde.png][]

（2）通过插入\\更新输出到表。

在左边面板中选择核心对象、选择“输出->插入\\更新”如图所示：

![92604d28be7d2f01a30732728618397a.png][]

编辑插入更新：

首先：表输入连接插入更新。

选中表输入，按住shift键，拖向插入更新。

![ea44be313d145d2641bf1ea6a75f4487.png][]

然后：双击插入更新，编辑它。

![405654f798e039e3912d69fd5177c03c.png][]

到这里基本上，这个转换就要做完了，可以点击运行查看效果，看是否有误，这个要先保存了才能运行，可以随意保存到任何一个地方。

5、使用作业控制上面装换执行。

使用作业可以定时或周期性的执行转换，新建一个作业。并从左边面板拖入start 和转换。

![15d1d81f079b343bb49cf770a4073cd0.png][]

双击start可以编辑，可以设置执行时间等等

![5c6b96e269739168925c87faf0be7288.png][]

点开装换，可以设置需要执行的转换任务，比如可以执行上面我们做的转换，XXX.ktr

![5b3686d010302ce3d269bd2dbf63dea8.png][]

最后点击运行即可。

到这里，一个简单的通过作业调度的kettle就算做完了。

[Link 1]: https://www.captainai.net/jiangyu1013/
[Kettle]: https://www.baidu.com/s?wd=Kettle&tn=24004469_oem_dg&rsv_dl=gh_pl_sl_csd
[Link 2]: http://baike.baidu.com/view/709638.htm
[Link 3]: http://baike.baidu.com/view/1295748.htm
[job]: http://baike.baidu.com/view/127061.htm
[Link 4]: https://www.baidu.com/s?wd=%E7%99%BE%E5%BA%A6%E7%99%BE%E7%A7%91&tn=24004469_oem_dg&rsv_dl=gh_pl_sl_csd
[bf551dd12bee0cc1f1d699ce656f01a5.png]: /images/20220320/132604624c49423d9d7763a9ea7cf71f.png
[9e92001782370978d3b7b555c965afb8.png]: /images/20220320/833ea4406ce2495b898f82568bd82d68.png
[45613eb299cd2cf3d856cc439e817fb1.png]: /images/20220320/33bee883bbe74eaaa19df9c45beebf00.png
[5b77b724ea38669c007286f7b987cdde.png]: /images/20220320/ad9b8f4a19a74347b4e15e2e565a18df.png
[92604d28be7d2f01a30732728618397a.png]: /images/20220320/04eb56be99544aee92dafcf999d74e00.png
[ea44be313d145d2641bf1ea6a75f4487.png]: /images/20220320/ae7180c077084525b351fddbf3cc5fc0.png
[405654f798e039e3912d69fd5177c03c.png]: /images/20220320/6359a676533d48aeb866621ad8dd5f44.png
[15d1d81f079b343bb49cf770a4073cd0.png]: /images/20220320/e4fa8be0fd8240598e4e6d52e04d6ab3.png
[5c6b96e269739168925c87faf0be7288.png]: /images/20220320/094ea222d8654153a7135cbae725b337.png
[5b3686d010302ce3d269bd2dbf63dea8.png]: /images/20220320/f0261073a0eb4b5db6598b69a203f353.png