简化datax源码,以便于datax二次开发、调试

# 项目简介

DataX是一款十分优秀的数据同步工具,以插件的方式集成了大量数据源的读写。

但大部分情况下,我们不需要如此多种数据源的支持,例如,我目前的工作仅需要oracle、postgresql两种数据源的互转。
也就是说,数据源的类型总是确定的,不需要以插件的形式动态加入,太多的插件反而显得有些重了。

除了插件动态引入数据源的问题,datax还需要assembly打包支持,这给调试及二次开发带来了一定难度。

另一方面,datax通过py脚本来运行的方式,也不太好和其它纯java任务直接配合。

所以,本项目(datax-simple)对datax进行了精简,去掉了assembly,并将插件直接放在pom的dependencies下,得到了一个固定数据源的datax模板。

本项目支持oracle、postgresql的读写,您可根据自己的需要,参考说明文档对支持的数据源类型进行替换、增减。

# 适用场景

如果你有如下需求,这个项目应该适合你:

1、需要扩展、改造datax,或者单纯的想跑一下源码熟悉效果,但是又对assembly不熟悉(比如我o(╯□╰)o),那这个项目可以帮助你以无插件的maven工程来编写、调试代码;

2、数据源种类确定,需要一个只包含指定数据源的精简包,那你可以在这个项目上随意增减数据源插件并直接调试;

3、希望以一个纯java任务中搞定同步的全部逻辑,比如同步完后用javamail发一封邮件通知,那你可以方便地在Engine类里添加发邮件等代码。

#项目地址
https://github.com/codingmiao/datax-simple


# 使用步骤

## 0、下载本项目源码

o(* ̄︶ ̄*)o

## 1、更换需要的数据源
本项目支持oracle、postgresql的读写&#x
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值