kettle转换合并记录

(1)合并记录步骤说明

###旧数据来源:旧数据来源的步骤
###新数据来源:新数据来源的步骤

标志字段:设置标志字段的名称,标志字段用于保存比较的结果,比较结果有下列几种。
1. “identical” – 旧数据和新数据一样
2. “changed” – 数据发生了变化;
3. “new” – 新数据中有而旧数据中没有的记录
4. “deleted” –旧数据中有而新数据中没有的记录

###关键字段:用于定位两个数据源中的同一条记录。
###比较字段:对于两个数据源中的同一条记录中,指定需要比较的字段。
###合并后的数据将包括旧数据来源和新数据来源里的所有数据,对于变化的数据,使用新数据代替旧数据,同时在结果里用一个标志字段,来指定新旧数据的比较结果。

###注意:
      旧数据和新数据需要事先按照关键字段排序。
      旧数据和新数据要有相同的字段名称。

合并记录发送给过滤记录,如果有多条线路,一定要注意右键有随机数量分配发送和复制模式,这个一定要确认

附:在数据抽取过程中出现中文乱码问题,可行解决办法有:
打开Spoon.bat,在if “%PENTAHO_DI_JAVA_OPTIONS%”==”” set PENTAHO_DI_JAVA_OPTIONS=”-Xms1024m” “-Xmx2048m” “-XX:MaxPermSize=256m”,后面加了”-Dfile.encoding=UTF-8”,再重启即可解决乱码。

原文地址:https://www.cnblogs.com/liqing1009/p/14944400.html