数据抽取清洗转换加载工具ETL
应用场景
当你想通过工具,从一个数据库将数据进行清洗后搬迁到另一个数据库,那么就可以通过ETL的数据抽取清洗转换加载工具来操作。
操作步骤
1. 工具下载
kettle文件下载,解压即可用:
下载地址
2. 配置
首先我们了解下Epoint-DI能做什么?
一般我在项目中数据抽取一般都是自己写定时任务,通过quartz或者其他任务调度框架来定时从数据源中抽取数据,所有有关数据的抽取、校验、转换等过程都是在代码中手工编写,针对不同的数据源都是需要手动来编写代码,然后重新发布数据抽取程序。但是通过DI就可以实现配置的方式来创建定任务调度,数据的抽取、校验、转换等过程。并且支持多种数据的输入、输出方式,有完善的过滤组件,数据处理组件等。
简单的数据推送
创建一个输入组件、一个输出组件即可。负责抽取和插入数据。
表输入:
表输出:
相关推荐
huiyi00 2020-08-27
wujun 2020-08-03
Ctommy 2014-07-12
crazyhulu 2012-08-29
Java大数据 2018-09-15
wodexiaochuxia 2019-04-02
Dingxiaofei 2016-08-31
KANSYOUKYOU 2020-01-29
applex 2019-12-25
ThisLX 2019-11-06
姚强 2016-01-05
llcode 2019-06-28
simon曦 2007-05-13
BalaBalaYi 2018-10-27
xirongxudlut 2020-07-20
libowenhit 2020-05-09
天涯莺歌 2020-03-08