kettle数据同步时,在使用过程中的一些问题
接手公司大数据平台的项目,临时需要对一些数据进行同步转换处理,就目前来说写代码对我来说已经提不起任何激情了。原理就是那些原理,写代码就是在玩别人的模板而已,还是借助现成的工具来提升效率吧,不然就只能颅内摸鱼了。
https://dev.mysql.com/downloads/connector/j/
复制驱动到kettle的lib目录下即可
Kettle解决主键重复的问题(Oracle-MySQL)
MYSQL同步到MYSQL
中断之后,再次同步出现主键重复的问题,需要在插入/更新处,做一些修改。
下图中查询的关键字,一般都设置为主键,因为我操作表的有多个主键列,所以我设置了好几个。
如果主键相同时 就设置不需要更新,然后的然后就可以了