活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
- 818算力跃迁·礼遇盛夏 NEW 爆款云主机2核2G限时秒杀，28.8元/年起！
- 免费体验DeepSeek，上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens，限时两周
- 云上钜惠 HOT 爆款云主机全场特惠，更有万元锦鲤券等你来领！
- 算力套餐 HOT 让算力触手可及
- 天翼云脑AOne NEW 连接、保护、办公，All-in-One！
- 中小企业服务商合作专区 国家云助力中小企业腾飞，高额上云补贴重磅上线
- 出海产品促销专区 NEW 爆款云主机低至2折，高性价比，不限新老速来抢购！
- 天翼云电脑专场 HOT 移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！
- 天翼云奖励推广计划 加入成为云推官，推荐新用户注册下单得现金奖励
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
数据集成工具_相关内容
- RDS for MySQL-> MySQL全量迁移会对源数据库有一定的访问压力。 迁移无主键表时,为了确保数据一致性,会存在3s以内的单表级锁定。 正在迁移的数据被其他事务长时间锁死,可能导致读数据超时。 由于MySQL固有特点限制,CPU资源紧张时,存储引擎为Tokudb的表,读取速度可能下降至10%。 建议您结合数据对比的“稍后启动”功能,选择业务低峰期进行数据对比,以便得到更为具有参考性的对比结果。由于同步具有轻微的时差,在数据持续操作过程中进行对比任务,可能会出现少量数据不一致对比结果,从而失去参考意义。
- 自建MySQL为源的迁移任务源端配置选定为MySQL,可迁移版本范围内的MySQL数据库 服务器IP 待迁移源端数据库的连接IP 端口号 待迁移源端数据库的端口 用户名 用于连接待迁移源端数据库的用户名称 密码 用于连接待迁移源端数据库的用户的密码 数据库 要迁移的源端数据库名
- 退订包周期实例提交退订后,资源和数据将会被删除并无法找回。 如需保留数据,请务必确认完成数据备份后再提交退订。 查看退订结果。数据库实例订单退订成功后,实例将会被删除,即“实例管理”页面,将不再显示该订单对应的数据库实例。
- 将MySQL同步到Kafka本节主要介绍将MySQL同步到Kafka 支持的源和目标数据库 表支持的数据库 源数据库 目标数据库 本地自建MySQL数据库ECS自建MySQL数据库 Kafka 前提条件 已登录数据复制服务控制台。 满足实时同步支持的数据库类型和版本,详情请参见实时同步。 使用建议 数据库同步与环境多样性和人为操作均有密切关系,为了确保同步的平顺,建议您在进行正式的数据库同步之前进行一次演练,可以帮助您提前发现问题并解决问题。
- 其他云MySQL实例准备网络 VPC网络安全策略放通 需要在其他云数据库实例所在的VPC放通【DTS实例的配置流程】中配置的公网IP的访问权限,一般包括网络ACL和实例安全组,具体可参考各厂商云数据库官方文档进行操作。 数据库添加白名单 数据库需要添加【DTS实例的配置流程】中配置的公网IP远程访问数据库的权限。不同类型的数据库添加白名单的方法可能不一样,具体可参考各数据库官方文档进行操作。 数据库账号及权限 数据库账号及权限要求,根据源库版本不同而不同,下面分开进行描述。
- MRS SparkHIVE− 连接名称(必选):单击,在弹出的“连接名称”窗口选择HIVE的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择HIVE的数据库。− 表名(必选):单击,在弹出的“表名”窗口选择HIVE的数据表。CUSTOM− 名称(必选):输入CUSTOM类型的名称。− 属性(必选):输入CUSTOM类型的属性,可新增不止一条。DLI− 连接名称(必选):单击,在弹出的“连接名称”窗口选择DLI的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择DLI的数据库。
- MRS Spark SQLHIVE− 连接名称(必选):单击,在弹出的“连接名称”窗口选择HIVE的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择HIVE的数据库。− 表名(必选):单击,在弹出的“表名”窗口选择HIVE的数据表。CUSTOM− 名称(必选):输入CUSTOM类型的名称。− 属性(必选):输入CUSTOM类型的属性,可新增不止一条。DLI− 连接名称(必选):单击,在弹出的“连接名称”窗口选择DLI的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择DLI的数据库。
- 配置Kafka/DMS Kafka源端参数est1,est2 偏移量参数 从Kafka拉取数据时的初始偏移量:最新:最大偏移量,即拉取最新的数据。最早:最小偏移量,即拉取最早的数据。已提交:拉取已提交的数据。时间范围:拉取时间范围内的数据。 最新 是否持久运行 用户自定义是否永久运行。 是 消费组ID 用户指定消费组ID。 如果是从DMS Kafka导出数据,专享版请任意输入,标准版请输入有效的消费组ID。 sumer-group 数据格式 解析数据时使用的格式:二进制格式:适用于文件迁移场景,不解析数据内容原样传输。
- 日志收集系统Flume接入Kafka如果Flume直接对接实时计算框架,当数据采集速度大于数据处理速度,很容易发生数据堆积或者数据丢失,而kafka可以当做一个消息缓存队列,可以把它理解为一个数据库,可以存放一段时间的数据。 因此数据从数据源( HTTP、Log 文件、JMS、监听端口数据等)到flume再到Kafka进行消息缓存,数据一方面可以同步到HDFS做离线计算,另一方面可以做实时计算,可实现数据多分发。 技术架构图 暂无。
- 自建SQL Server为源的迁移任务源端配置要迁移的源端数据库名 模式 源端实际用于迁出数据的模式(schema)名称
- MRS Spark PythonHIVE− 连接名称(必选):单击,在弹出的“连接名称”窗口选择HIVE的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择HIVE的数据库。− 表名(必选):单击,在弹出的“表名”窗口选择HIVE的数据表。CUSTOM− 名称(必选):输入CUSTOM类型的名称。− 属性(必选):输入CUSTOM类型的属性,可新增不止一条。DLI− 连接名称(必选):单击,在弹出的“连接名称”窗口选择DLI的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择DLI的数据库。
- OBS ManagerHIVE− 连接名称(必选):单击,在弹出的“连接名称”窗口选择HIVE的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择HIVE的数据库。− 表名(必选):单击,在弹出的“表名”窗口选择HIVE的数据表。CUSTOM− 名称(必选):输入CUSTOM类型的名称。− 属性(必选):输入CUSTOM类型的属性,可新增不止一条。DLI− 连接名称(必选):单击,在弹出的“连接名称”窗口选择DLI的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择DLI的数据库。
- CDM JobHIVE− 连接名称(必选):单击,在弹出的“连接名称”窗口选择HIVE的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择HIVE的数据库。− 表名(必选):单击,在弹出的“表名”窗口选择HIVE的数据表。CUSTOM− 名称(必选):输入CUSTOM类型的名称。− 属性(必选):输入CUSTOM类型的属性,可新增不止一条。DLI− 连接名称(必选):单击,在弹出的“连接名称”窗口选择DLI的数据连接。− 数据库(必选):单击,在弹出的“数据库”窗口选择DLI的数据库。
- 配置HBase/CloudTable目的端参数TBL_2 导入前清空数据 选择目的端表中数据的处理方式:是:任务启动前会清除目标表中数据。否:导入前不清空目标表中的数据,如果选“否”且表中有数据,则数据会追加到已有的表中。 是 Row key拼接分隔符 可选参数,用于多列合并作为rowkey,默认为空格。 , Rowkey冗余 可选参数,是否将选做Rowkey的数据同时写入HBase的列,默认值“否”。 否 压缩算法 可选参数,创建新HBase表时采用的压缩算法,默认为值“NONE”。NONE:不压缩。
- 将Oracle同步到PostgreSQL本节主要介绍将Oracle同步到PostgreSQL 支持的源和目标数据库 表 支持的数据库 源数据库 目标数据库 本地自建数据库ECS自建数据库 RDS for PostgreSQL 使用建议 注意 DRS任务启动和全量数据同步阶段,请不要在源数据库执行DDL操作,否则可能导致任务异常。 为保证同步前后数据一致性,确保同步期间目标数据库无业务写入。
- 实例覆盖性恢复-I类型资源池关系数据库MySQL版I 类型资源池支持按时间点或者备份集将备份文件恢复到已有实例(已有实例包含原实例)。将覆盖已有实例的数据内容。 操作场景 若由于误操作,希望将数据恢复到此前某时间点,或者恢复某全量备份文件,在不开通新实例的情况下,可以将实例恢复到目标实例,且覆盖目标实例的内容。 前提条件 实例状态为运行中。 影响 此恢复方式指定的备份数据创建之后产生的数据将会全部丢失!请谨慎操作! 覆盖性恢复会在恢复数据前删除旧数据文件,建议恢复前对被覆盖的实例进行手动备份,确保数据安全。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
