kettle

今天介绍下kettle的一个比较实用的组件——生成记录； 当我们想将一部分文本数据变成数据行，每个字段作为一个数据行的一个列，那么我们可以利用这个组件； 它的位置在 双击点开根据自己的实际需要进行设置 当设置后，可以点击预览，上面的【限制】选项就是行的数量； 其中 有三个选项是必填项——名称，类型，值 来源： 51CTO 作者： 夜七夜 链接： https://blog.51cto.com/13602563/2170365

kettle转换中的各个组件是并行的关系，job中是有先后顺序的，这样就可能会遇到一种情况——我想在某个步骤完成后再执行下面的步骤，这时该怎么办呢？那么这时就可以用到【阻塞数据】和【阻塞数据直到完成】两个组件； 【阻塞数据】：这个组件只允许前一个步骤的最后一条数据通过，这个往往和【执行SQL脚本】组件 并用； 【阻塞数据直到完成】：这个组件会将所设置的被阻塞步骤的所有数据堵住，当被阻塞的步骤完成后，才会将被阻塞步骤的所有数据往下一个步骤推； 注：虽然阻塞了，但是阻塞之后的步骤仍然在运行，即运行时间仍然在进行； 【执行SQL脚本】： 这个组件是一个相对比较复杂的组件，在转换中这个组件是运行优先级很高的组件，如果不勾选{执行每一行}这个选项，那么该组件就只会执行一次，勾选了这个选项那么执行次数就是前一个步骤的数据条目数；如果想实现该组件只在最后一步执行一次，那么可以这样来操作 【注】：此时别忘了勾选{执行每一行}这个选项，这个流程的逻辑就是当【表输出】完成后，将其的最后一条数据推过【阻塞数据】，然后执行【执行SQL脚本】，因为勾选了{执行每一行}这个选项，又因为【阻塞数据】只有一条数据，那么【执行SQL脚本】只执行一次； 另外【执行SQL脚本】还有一些其他的选项，如{变量替换}等； 一、当要使用变量时必须勾选{变量替换}这个选项，如果只勾选这个选项，那么变量只能使用${变量名}这样的

继续给大家介绍几个小组件： 一、字符串替换 这个功能类似于oracle的replace函数，就是将某个字段的某些字符替换成我们给定的字符 首先，选择【输入流字段】，【输出流字段】自己命名（就是用来保存处理后的结果的字段，可以和输入流字段保持一致），可以选择【使用正则表达式】，【搜索】就是你希望被替换的字符、字符串，可以是一个正则表达式，【使用，，，替换】就是你期望用什么值替换被替换的部分，【设置为空串】就是将被选择的部分用空替换，【使用字段值替换】你可以使用现有的某个字段的值替换你期望被替换的部分，后面两个根据自己的需要自己选择； 二、字段选择 这个组件包含三个功能，如图 选择和修改，这个可以实现对字段的名字进行更改，当是数值时可以进行精度的设置； 移除就是将某个字段从流中移除（我感觉这个功能比较鸡肋）； 元数据就是实现比如将varchar变成date这类的功能，也可以实现修改字符集等； 三、将字段值设置为常量 这个就是将某个字段设置为常量，很简单，就不详细说了； 来源： 51CTO 作者： 夜七夜 链接： https://blog.51cto.com/13602563/2169750