datax组件介绍
datax是阿里巴巴的一款离线数据同步工具,可以实现不同数据源之间的数据同步功能
特点:1、性能非常好,每秒钟可以达到1万条记录
2、适合于数据直连方式的数据同步
对比kettle: 配置繁琐,没有图形化界面
无法对数据进行复杂的转化操作
核心组件
*
Reader:数据采集模块,负责从源采集数据
*
Writer:数据写入模块,负责写入目标库;
*
Framework:用于连接reader和writer,作为两者的数据传输通道,并处理缓冲,流控,并发,数据转换等核心技术问题
还没有评论,来说两句吧...