ICode9

精准搜索请尝试: 精确搜索
首页 > 数据库> 文章详细

kettle 跨数据库全量同步多表数据

2021-08-04 14:06:00  阅读:199  来源: 互联网

标签:同步 转换 kettle job 全量 表名 多表 TABLE ORA


一、需求背景

现有数据库ORA(SOURCE_TABLE), ORA2(TARGET_TABLE);ORA里有EMP、DEPT表,ORA里有EMP1、DEPT1表;现需要将ORA的表全部同步到ORA2的表中。

如图,该表记录了源表和目标表的表名(需要事前准备好)

 

 

二、 总体路径

大job的路径

小job的路径(循环同步数据)

 

1、先从excel表获取源表和目标表的表名 (转换)

2、然后再循环同步每个表的数据(大JOB里嵌套的小JOB)

三、步骤

1、excel表输入——获取表名

 

2、复制记录到结果

循环同步数据.job

3-1、新增名为“1-输入表名并设置变量”的转换 ,在转换中,新建从结果获取记录、设置变量

注意:设置变量一定要单独在一个转换中才生效

 

 3-2、新增名为“2-同步数据”的转换 ,在转换中,新建表输入、表输出

注意:1、选好不同的数据库;2、表输入的表需要填写变量名${SOURCE_TABLE},并在 替换SQL语句里的变量 打钩;3、表输出的目标表同样是填写变量名${TAREGT_TABLE}

 

 3-3、新增名为“3-同步日志”的转换 ,在转换中,新建“执行SQL脚本”

注意:勾选“变量替换”;sql插入语句最后要写 commit;

 

 4、最后最后!!记得在 循环同步表数据.job里勾选 “执行每一个输入行”

四、 结果

同步日志的更新记录

 EMP1表同步结果

  DEPT1表同步结果

         

 

 

标签:同步,转换,kettle,job,全量,表名,多表,TABLE,ORA
来源: https://blog.csdn.net/qq_52360873/article/details/119381902

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有