数据集成模块提供从源数据库同步到目标数据库,并支持轻量级ETL能力。核心能力包括集群管理、任务配置、流配置等功能模块。集群管理用于管理数据同步的资源组和注册集群。任务配置支持增量、全量、离线、实时等全域数据集成场景,具备离线同步、实时同步、跨网交换等应用功能。流配置为用户提供自行开发或定制化的流程开发能力,可将已开发好的流程定义文件和参数定义文件上传至平台,上传后的流程可用于部署数据同步任务。
支持的同步类型
同步类型 |
来源 |
目标 |
离线同步 |
MySQL |
Hive |
离线同步 |
MySQL |
Doris |
离线同步 |
Oracle |
Hive |
离线同步 |
Oracle |
Doris |
离线同步 |
Oracle |
HDFS |
离线同步 |
SQL Server |
Hive |
离线同步 |
PostgreSQL |
Hive |
离线同步 |
PostgreSQL |
Doris |
离线同步 |
Greenplum |
MySQL |
离线同步 |
Greenplum |
Hive |
离线同步 |
Hive |
MySQL |
离线同步 |
Hive |
Hive |
离线同步 |
TeleDB |
MySQL |
离线同步 |
TeleDB |
Hive |
离线同步 |
TeleDB |
HDFS |
离线同步 |
TeleDB |
Doris |
离线同步 |
TelePG |
MySQL |
离线同步 |
TelePG |
Hive |
离线文件同步 |
FTP |
FTP |
离线文件同步 |
HDFS |
FTP |
离线文件同步 |
HDFS |
HDFS |
离线文件同步 |
HDFS |
Doris |
实时同步 |
MySQL |
Doris |
实时同步 |
MySQL |
Hudi |
实时同步 |
MySQL |
Iceberg |
实时同步 |
PostgreSQL |
Doris |
实时同步 |
PostgreSQL |
Hudi |
实时同步 |
PostgreSQL |
Iceberg |
实时同步 |
TeleDB |
Doris |
实时同步 |
TeleDB |
Hudi |
实时同步 |
TeleDB |
Iceberg |
实时同步 |
TelePG |
Doris |
实时同步 |
TelePG |
Hudi |
实时同步 |
TelePG |
Iceberg |
鼠标选中文档,精准反馈问题
选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理
知道了
文本反馈