异构数据源数据交换工具 DataX

GPLv2
Java Python
跨平台
阿里巴巴
2012-01-05
红薯

DataX是一个让你方便的在异构数据源之间交换数据的离线同步框架/工具,实现了在任意的数据处理系统之间的数据交换,目前DataX在淘宝内部每天约有5000道同步任务分布在全天各个时段,平均每天同步数据量在2-3TB。

DataX 编译安装说明

加载中

评论(0)

暂无评论

阿里巴巴开源离线同步工具 DataX3.0 介绍

一. DataX3.0概览 DataX 是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 设计理...

2016/08/24 14:01

没有更多内容

加载失败,请刷新页面

没有更多内容

1
回答
centos7 杀端口 9999,端口被占用了
gammey 的回答 10/10 15:19
最佳答案
netstat -nutlp|grep :9999|awk '{print $NF}'|cut -d / -f 1|xargs kill -9
2
回答
MySQL server version for the right syntax to use near 'create_time from sys_

2019-09-09 10:39:05.379 [job-0] INFO StandAloneJobContainerCommunicator - Tot...

09/09 10:41
2
回答
maven报错了,无法顺利install

Scanning for projects... [ERROR] [ERROR] Some problems were encountered while...

08/29 13:33
2
回答
maven-install-plugin 编译项目是失败了吗??怎么整?

"C:\Program Files\Java\jdk1.8.0_191\bin\java.exe" "-Dmaven.multiModuleProject...

07/04 13:43
3
回答
这个配置咋改,这个的java jdk咋改呀

Working Directory: D:\ra\datax-web-master Gradle User Home: C:\Users\Administ...

06/06 13:30
8
回答
安装datax的问题

环境是在red hat linux下 执行如下: rpmbuild --ba t_dp_datax_engine.spec 报: + /usr/lib/r...

2012/11/06 17:58

没有更多内容

加载失败,请刷新页面

没有更多内容

Datax入门

DataX简介 DataX 是阿里巴巴开源的离线数据同步工具,实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。 DataX本身...

09/12 15:49
2
0
DataX-Migration数据库迁移,数据库同步实现解决方案

DataX-Migration DataX-Migration is Yxt (Yunxuetang) Full Database Migration Tool based on Alibaba DataX 3.0. Support Database Migration among Mysql, Oracle, SqlServer, PostgreSq...

2018/12/01 09:33
481
0
dataX概述

目录 前言 一、阿里云开源离线同步工具DataX3.0介绍 二、DataX架构及原理 三、DataX程序流程介绍 四、DataX 如何使用 五、DataX Java使用 六、DataX部分核心源码解析 前言 最近接到需求是,需...

02/14 12:18
398
0
DataX-Migration中原六仔源码搭建数据库迁移,数据库同步实现解决方案

DataX中原六仔源码搭建274【企娥】7044651-Migration is Yxt (Yunxuetang) Full Database Migration Tool based on Alibaba DataX 3.0. Support Database Migration among Mysql, Oracle, Sq...

2018/12/01 09:33
105
0
离线数据同步神器:DataX,支持几乎所有异构数据源的离线同步到MaxCompute

摘要: 概述 DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS ...

2018/11/13 16:08
167
0
Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南

DataX-On-Hadoop即使用hadoop的任务调度器,将DataX task(Reader->Channel->Writer)调度到hadoop执行集群上执行。这样用户的hadoop数据可以通过MR任务批量上传到MaxCompute、RDS等,不需要用...

2018/09/25 14:48
63
0
使用DataX同步MaxCompute数据到TableStore(原OTS)优化指南

概述 现在越来越多的技术架构下会组合使用MaxCompute和TableStore,用MaxCompute作大数据分析,计算的结果会导出到TableStore提供在线访问。MaxCompute提供海量数据计算的能力,而TableStor...

05/14 15:59
14
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部