Advertisement

大数据-数仓-数据采集-业务数据(二):全量同步MySQL<-->DataX(全量)<-->HDFS每日全量:每天将全部业务数据库的数据同步到数据仓库。

阅读量:
在这里插入图片描述
在这里插入图片描述
DataX源码地址:GitHub - alibaba/DataX: DataX是阿里云DataWorks数据集成的开源版本。

一、第1章 DataX介绍

1.1 DataX概述

介绍:DataX是一款由阿里巴巴开源的异构数据源离线同步工具。它致力于实现多种异构数据源之间的稳定高效同步功能,并支持包括MySQL和Oracle在内的关系型数据库以及HDFS/Hive/ODPS/HBase等多种分布式存储系统之间的高效交互与整合。

2. 特点:

① DataX侧重于同步数据库中的数据

② DataX没有所谓版本号,这有这一个开源的版本

全部评论 (0)

还没有任何评论哟~