数据集成是阿里集团对外提供的稳定高效、弹性伸缩的数据同步平台,为阿里云大数据计算引擎(包括 MaxCompute、AnalyticDB、OSS)提供离线(批量)的数据进出通道。
数据同步支持的数据源类型如下表所示:
数据源分类 | 数据源类型 | 抽取(Reader) | 导入(Writer) | 支持方式 | 支持类型 |
关系型数据库 | MySQL | 支持 | 支持 | 向导/脚本 | 阿里云/自建 |
关系型数据库 | SQL Server | 支持 | 支持 | 向导/脚本 | 阿里云/自建 |
关系型数据库 | PostgreSQL | 支持 | 支持 | 向导/脚本 | 阿里云/自建 |
关系型数据库 | Oracle | 支持 | 支持 | 向导/脚本 | 自建 |
关系型数据库 | DRDS | 支持 | 支持 | 向导/脚本 | 阿里云 |
关系型数据库 | DB2 | 支持 | 支持 | 脚本 | 自建 |
关系型数据库 | 达梦(对应数据源名称是 dm) | 支持 | 支持 | 脚本 | 自建 |
关系型数据库 | RDS for PPAS | 支持 | 支持 | 脚本 | 阿里云 |
MPP | HybridDB for MySQL | 支持 | 支持 | 向导/脚本 | 阿里云 |
MPP | HybridDB for PostgreSQL | 支持 | 支持 | 向导/脚本 | 阿里云 |
大数据存储 | MaxCompute(对应数据源名称 odps) | 支持 | 支持 | 向导/脚本 | 阿里云 |
大数据存储 | DataHub | 不支持 | 支持 | 脚本 | 阿里云 |
大数据存储 | ElasticSearch | 不支持 | 支持 | 脚本 | 阿里云 |
大数据存储 | AnalyticDB(对应数据源名称 ADS) | 不支持 | 支持 | 向导/脚本 | 阿里云 |
非结构化存储 | OSS | 支持 | 支持 | 向导/脚本 | 阿里云 |
非结构化存储 | HDFS | 支持 | 支持 | 脚本 | 自建 |
非结构化存储 | FTP | 支持 | 支持 | 向导/脚本 | 自建 |
NoSQL | HBase | 支持 | 支持 | 脚本 | 阿里云/自建 |
NoSQL | MongoDB | 支持 | 支持 | 脚本 | 阿里云/自建 |
NoSQL | Memcache | 不支持 | 支持 | 脚本 | 阿里云/自建Memcached |
NoSQL | Table Store(对应数据源名称 OTS) | 支持 | 支持 | 脚本 | 阿里云 |
NoSQL | LogHub | 不支持 | 支持 | 脚本 | 阿里云 |
NoSQL | OpenSearch | 不支持 | 支持 | 脚本 | 阿里云 |
NoSQL | Redis | 不支持 | 支持 | 脚本 | 阿里云/自建 |
性能测试 | Stream | 支持 | 支持 | 脚本 |