kettle用户培训

什么是kettleKettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想要实现的功能：数据采集或者数据转换。kettle的作用kettle主要有两种脚本文件，一种是transformation，主要用来实现数据的基础采集和转化，另一种是job，用来实现整个工作流的调用或者控制。可以用于文件、oracle、sql、db2等数据库和数据源。Kettle的常用介绍1. 几个主要的文件：.kettle\kettle.properties 类似于属性文件SPOON.bat 打开程序主面板，图形界面Spoon.bat：在windows 平台运行Spoon。Spoon.sh： 在 Linux、Apple OSX、Solaris 平台运行 Spoon。kitchen.bat 批量调用任务2. 要运行kettle工具必须安装Sun公司的JAVA运行环境，kettle 4.2.0需要运行java 1.6或者更高版本，kettle不需要安装，安装好java环境后，在操作系统环境变量path中配置jre路径，把kettle工具压缩包解压后可直接使用。安装简易教程1. 安装jdk，任意目录即可。2. 解压缩kettle4.2.rar文件到d:\盘，双击spoon.bat，能正常打开，表示kettle已经正确安装。3. 该服务器必须安装oracle客户端【管理员】类型。4. 在D盘根目录新建kettle_log文件夹。5. 设置环境变量KETTLE_HOME、KETTLE_LOG，如下：6. 在path变量最后增加如下参数：7. 打开菜单【编辑->Edit the kettle.properties file】，增加如下参数：其中：ORACLE_LOAD_PATH：sqlldr.exe 路径，用以调用oracle bulk loaderLOAD_LOG_PATH：sqlldr.exe 日志文件路径DB_NAME：风控数据库 实例名ORACLE_POSITION：sqlldr.exe 分割符（X'5E'）COLL_STEP：实时采集步长8. 打开spoon.bat启动kettle，单击【Tools->资源库->连接资源库】，弹出如下界面：在弹出窗口点击，弹出如下窗口：9. 选择”Kettle database repository”选项并点击确定，出现如下窗口：【资源库信息窗口】选择数据库连接单击【新建】,弹出如下窗口，并按图中示例输入数据库配置信息并点击【OK】：10. 按照下图输入资源库信息：点击【创建或更新】，出现如下两个窗口并单击【是】：11. 单击弹出窗口【简单SQL编辑器】的【执行】按钮，弹出【SQL语句的运行结果】窗口，单击【确定】，然后单击【简单SQL编辑器】的【关闭】按钮，再点击【资源库信息】窗口的【确定】按钮，剩下如下窗口，输入密码【admin】并...