Kettle小技巧 mysql数据实时同步(kettle对传输数据进行加密)
Kettle小技巧 mysql数据实时同步(kettle对传输数据进行加密)
在主库中，将需要同步的库表新建快照表，表结构一致。在主库中，分别新增库表的增、删、改的触发器。新建一个转换，该转换只针对一张表的增删改。新建‘表输入’控件，查询主库的快照表 新建‘插入/更新’控件，插入数据到从库的库表，查询的关键字要求唯一。
配置环境变量：变量名为KETTLE_HOME 值为：自定义路径。自定义路径下必须要有.kettle文件夹，改文件夹下放置 即可。设置完上述操作后必须重启工具。
在Kettle的根目录下找到jdbc.properties文件（参考目录：D：\soft\Kettle\data-integration\simple-jndi），在配置文件中添加一个连接RAClink（JNDI连接名称）。
在根目录可以看到有一个叫Spoon.bat的文件，双击这个就可以启动我们的kettle程序了。你也可以把这个文件创建一个快捷方式到桌面，就不用每次都到这个目录来找了。启动一小会，就可以看到kettle的主界面了。可以看到有一些教程的链接。
1、Kettle工具主要是由四个组件组成，分别是Spoon、Pan、Kitchen及Carte组件。Kettle是一款国外开源的ETL工具，纯java编写，可以在Windows、Linux、Unix上运行，数据抽取高效稳定。Kettle中文名称叫水壶，该项目的主程序员MATT希望把各种数据放到一个壶里，然后以一种指定的格式流出。
2、基本的转换结构是这样的，我们从表中输入，选择我们需要的字段，已经对应的名称，然后将数据在存入另外的数据库。表输入的配置：根据自己数据库的配置连接，连接数据库。
3、首先我们需要了解Kettle的Kitchen和Pan Kitchen——作业（job）执行器 （命令行方式） Pan——转换（trasform）执行器 （命令行方式）下面我们将重点讲解经常会用到的 ***作业执行器 Kitchen.bat *** 。新建一个bat文件，命名job.bat，然后编辑，输入内容如下：注意：确保路径的正确性。
4、当然可以了，开源ETL工具KETTLE不但能处理关系数据库，最新版本还能处理大数据。KETTL可以通过ODBC、JDBC联接SQL SERVER 具体方法：分别创建A库和B库的数据源；创建转换，把数据源联接A库，然后添加必要的转换节点；数据输出时数据源选择B库；运行后。A库数据就经过转换，再加载到B库。
5、第一个区别，Job（作业）是步骤流，transformation（转换）是数据流。这是作业和转换最大的区别。第二个区别，Job的每一个步骤，必须等到前面的步骤都跑完了，后面的步骤才会执行。
6、最终在org.pentaho.di.ui.spoon.delegates.SpoonTransformationDelegate.java的方法executeTransformationTransMeta，boolean，boolean，boolean，boolean，boolean，Date，boolean，LogLevel中配置好转换的参数，以及执行转换的模式，启动并执行转换。当打开Kettle的设计器界面后，可以在其中设计作业和转换。
1、Kettle学习一：简单的表输入输出 创建两个DB连接，test和test1，分别连接两个不同的数据库 拖拽表输入，字段转换，表输出图标到界面，并住shift键连接它们 表输入：用于查询出一个数据表中需要搬运的数据。
2、因为只需要获取抓取要抽取表的结构信息，故在sql后面加上where1=2。下面代码是创建目标库表。
3、使用Merge Join，按照你说的“同时在两个filed里面的数据被筛选出来”，应该使用内连接【INNER】方式，然后再在后续步骤中将自己需要的字段输出。
4、首先需要打开数据库连接，此时显示已创建的数据库。然后需要展开要操作的数据库。然后需要展开数据库下的所有表。然后需要右击要操作的表，选择【复制表格】。然后需要点击【复制】。此时显示成功复制信息即可。
5、字段n） values（值1， 值2， 值n）。在Oracle数据库中，对数据的变更还需要点击【Commit】按钮，也就是左上角向下箭头的图标，如果不点击这个按钮，数据其实不会真正存入数据库。点击【Commit】按钮后，会弹出一个Confirm窗口，此时点击【Yes】就将数据写入数据库，点击【No】则不提交到数据库。
6、没做过类似的迁移，以个人的意见供参考。获取sqlserver的所有值 得到 假设id，username为变量分别存储 sql语句是用mysql中的格式写的，oracle没用过，所以语句格式不详，思路却一样。
精卫大数据平台的项目起源于网上开源的web版kettle，在这里我首先致敬下原作者。精卫大数据平台，目前的功能仅仅是一个ETL系统，它创造性的将平台构建为B/S架构的ETL模型设计以及集成用户专业调度管理的分布式ETL建模运维系统。
Kettle薯片是一款美国品牌，其生产产地在中国。虽然有关于美国薯片不合格的报道，但是并不能说明所有美国薯片都不合格。同样，中国薯片也不能一概而论认为都是合格的。无论是哪个国家的食品，都需要严格把控生产工艺和原材料质量，才能够保证产品的质量和安全。
烧水壶的英语是kettle。现代的 Electric Kettle 或称 Electric Water Kettle 是一种使用电能进行加热的烧水壶。它通常由塑料或不锈钢材质制成，内部有加热元件。用户只需将水加入容器中，插入电源，按下加热按钮，壶内的加热元件会将水加热至沸腾状态。
kettle翻译成中文是：水壶。水壶是一种盛水的容器。有很多种材质，可以指烧水用的金属壶，也可以指便于携带的饮用水壶器具，分为五大类：塑料的（主要材料）；不锈钢的；铝合金的；陶瓷的；其它材质的，可由电加热也可直接用火加热。电水壶在1891年诞生于芝加哥。
Kettle插入/更新的组件在日常的抽取任务中使用频率相当的高，自己对这部分的了解也仅限于输出中的“插入/更新”。最近公司正在开展BI数据仓库建设，Kettle中输出部分的“ 插入/更新 ”和数据仓库菜单中的“ 维度查询/更新 ”存在使用上的差异，因此下面主要介绍这两组件应用的情况。
电热水壶（英文名称：Electric Kettle）采用的是蒸气智能感应控制，过热保护，水煮沸自动断电、防干烧断电，快速沸水的一种器具。
