首页 > 其他 > 详细

kettle实现简单的数据去重

时间:2020-03-08 22:46:18      阅读:299      评论:0      收藏:0      [点我收藏+]

(1)先创建一个转换,用来实现数据去重的操作;

 (2)在主对象树中创建mysql数据库链接并检测链接是否成功,这里需要先把mysql的jdbc驱动包放到spoon安装目录下的lib文件夹下;

技术分享图片

 

 

技术分享图片

 

 技术分享图片

 

 (3)创建如下几个核心对象,分别是数据表输入,将数据根据字段排序,数据去重,将去重好的数据输出到另一个表中,这里需要注意,数据去重前必须要经过根据相关字段排序;

技术分享图片

 

 (4)运行程序,查看步骤度量是否所有步骤运行成功;

技术分享图片

 

kettle实现简单的数据去重

原文:https://www.cnblogs.com/123456www/p/12445502.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!