支持的源和目标数据库

表 支持的数据库

前提条件

• 已登录数据复制服务控制台。
• 满足实时迁移支持的数据库类型和版本，详情请参见 实时迁移。

使用建议

                    
注意
                    
DRS任务启动和全量数据迁移阶段，请不要在源数据库执行DDL操作，否则可能导致任务异常。
如果您使用的是全量迁移模式，确保源和目标数据库无业务写入，保证迁移前后数据一致。如果您使用的是全量+增量迁移模式，支持在源数据库有业务数据写入的情况下进行迁移。
数据库迁移与环境多样性和人为操作均有密切关系，为了确保迁移的平顺，建议您在进行正式的数据库迁移之前进行一次演练，可以帮助您提前发现问题并解决问题。
基于以下原因，建议您在启动任务时选择“稍后启动”功能，将启动时间设置在业务低峰期，相对静止的数据可以有效提升一次性迁移成功率，避免迁移对业务造成性能影响。
                    
                  
                  

在网络无瓶颈的情况下，全量迁移会对源数据库增加约50MB/s的查询压力，以及占用2~4个CPU。

正在迁移的数据被其他事务长时间锁死，可能导致读数据超时。

由于MySQL固有特点限制，CPU资源紧张时，存储引擎为Tokudb的表，读取速度可能下降至10%。

DRS并发读取数据库，会占用大约6-10个session连接数，需要考虑该连接数对业务的影响。

全量阶段读取表数据时，特别是大表的读取，可能会阻塞业务上对大表的独占锁操作。

• 数据对比

  建议您结合数据对比的“稍后启动”功能，选择业务低峰期进行数据对比，以便得到更为具有参考性的对比结果。由于同步具有轻微的时差，在数据持续操作过程中进行对比任务，可能会出现少量数据不一致对比结果，从而失去参考意义。

使用须知

在创建迁移任务前，请务必阅读以下使用须知。

表 使用须知

类型名称
使用和操作限制
数据库权限设置
 全量迁移最小权限要求：
源物理分片数据库账号需要具备如下权限：SELECT、SHOW VIEW、EVENT。
目标中间件帐户需要具备以下基本权限：CREATE、DROP、ALTER、 INDEX、 INSERT、DELETE、 UPDATE、 SELECT， 同时必须具备扩展权限:全表Select权限。
目标中间件帐户必须具备对所迁移数据库的权限。
全量+增量迁移最小权限要求：
 源物理分片数据库账号需要具备如下权限：SELECT、SHOW VIEW、EVENT、LOCK TABLES、REPLICATION SLAVE、REPLICATION CLIENT。
目标中间件帐户需要具备以下基本权限：CREATE、DROP、ALTER、 INDEX、 INSERT、DELETE、 UPDATE、 SELECT， 同时必须具备扩展权限:：全表Select权限。
目标中间件帐户必须具备对所迁移数据库的权限。
源数据库要求
 源分库分表中间件中的库名、表名不能包含：'<>/\以及非ASCII字符。
MySQL源数据库的binlog日志必须打开，且binlog日志格式必须为Row格式。
在磁盘空间允许的情况下，建议源数据库binlog保存时间越长越好，建议为3天。
源数据库expire_logs_days参数值为0，可能会导致迁移失败。
增量迁移时，必须设置MySQL源数据库的server－id。如果源数据库版本小于或等于MySQL5.6，server－id的取值范围在2－4294967296之间；如果源数据库版本大于或等于MySQL5.7，server－id的取值范围在1－4294967296之间。
MySQL源数据库建议开启skip-name-resolve，减少连接超时的可能性。
源数据库GTID状态建议为开启状态。
目标数据库要求

目标库若已存在数据，DRS在增量迁移过程中源库相同主键的数据将覆盖目标库已存在的数据，因此在迁移前需要用户自行判断数据是否需要清除，建议用户在迁移前自行清空目标库。
目标实例及关联RDS实例的运行状态必须正常，若关联RDS实例是主备实例，复制状态也必须正常。
目标库关联RDS实例必须有足够的磁盘空间。
目标库关联RDS数据库的字符集必须与源数据库一致。
目标库实例若选择将时间戳类型（TIMESTAMP，DATETIME）的列作为分片键，则源库数据在迁移到目标库之后，作为分片键的该时间戳类型列的秒精度将被丢弃。
目标数据库存在表的AUTO_INCREMENT值至少不能小于源库表的AUTO_INCREMENT值。
迁移对象约束
目前只支持迁移源库的数据，不支持迁移源库表结构及其他数据库对象。
用户需要在目标库根据源端逻辑库的表结构，自行在目标库创建对应的表结构及索引。未在目标库创建的对象，视为用户不选择这个对象进行迁移。
源库在目标库创建的表结构， 必须与源库的表结构完全一致。
源库为DRDS时，则不允许存在拆分键为timestamp类型的表。
不支持非MyISAM和非InnoDB表的迁移。
不支持无主键表的迁移。
操作须知
数据类型不兼容时，可能引起迁移失败。
如果源数据库为自建库，并且安装了Percona Server for MySQL 5.6.x或Percona Server for MySQL 5.7.x时，内存管理器必须使用Jemalloc库，以避免因系统表频繁查询带来的内存回收不及时，并最终导致数据库Out of Memory问题。
建议将expire_log_day参数设置在合理的范围，确保恢复时断点处的binlog尚未过期，以保证服务中断后的顺利恢复。
在任务启动、任务全量迁移阶段，不建议对源数据库做删除类型的DDL操作，这样可能会引起任务迁移失败。
迁移过程中，不允许修改、删除连接源和目标数据库的用户的用户名、密码、权限，或修改源和目标数据库的端口号。
迁移过程中，不允许对源库需要迁移的表结构进行修改。
迁移过程中，不允许源端DRDS正在迁移的表做改变拆分键的操作；也不允许将单表/广播表改为拆分表，拆分表改为单表/广播表。
选择表级对象迁移时，增量迁移过程中不建议对表进行重命名操作。
增量迁移场景下，不支持源数据库进行恢复操作。
当目标DRDS版本大于3.0.4.1版本，结束任务时，DRS会自动刷新DRDS的自增列(sequence)起始值。
 

操作步骤

本章节将介绍在公网网络场景下，通过数据复制服务配置MySQL分库分表到DRDS实例迁移的任务流程。

步骤 1 在“实时迁移管理”页面，单击“创建迁移任务”，进入创建迁移任务页面。

步骤 2 在“迁移实例”页面，填选任务名称、描述、迁移实例信息，单击“下一步”。

表 任务和描述

表 迁移实例信息

参数
描述
数据流动方向
选择入云。
入云指目标端数据库为本云数据库。
源数据库引擎
选择MySQL分库分表。
目标数据库引擎
选择DRDS。
网络类型
此处以公网网络为示例。默认为公网网络类型，可按照需求选择VPC网络、公网网络和VPN、专心网络。
VPC网络：适合云上数据库之间的迁移。
公网网络：适合通过公网网络把其他云下或其他平台的数据库迁移到目标数据库，该类型要求目标数据库绑定弹性公网IP（EIP）。
VPN网络：适合通过VPN网络，实现其他云下自建数据库与云上数据库迁移、或云上跨Region的数据库之间的迁移。
专线网络：适合通过专线网络，实现其他云下自建数据库与云上数据库迁移、或云上跨Region的数据库之间的迁移。
目标数据库实例
用户所创建的目标数据库实例。
迁移实例所在子网
选择迁移实例所在的子网。也可以单击“查看子网”，跳转至“网络控制台”查看实例所在子网帮助选择。
默认值为当前所选数据库实例所在子网，请选择有可用IP地址的子网。为确保迁移实例创建成功，仅显示已经开启DHCP的子网。
IP类型
选择迁移实例的IP类型，目前支持选择“IPv4”或“IPv4&IPv6双栈”。只有所选择的VPC及子网都开启了IPv6双栈功能，才能选择IP类型为“IPv4&IPv6双栈”。
迁移模式
全量：该模式为数据库一次性迁移，适用于可中断业务的数据库迁移场景，全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库，包括：表、视图、存储过程、触发器等。
说明
如果用户只进行全量迁移时，建议停止对源数据库的操作，否则迁移过程中源数据库产生的新数据不会同步到目标数据库。
全量+增量：该模式为数据库持续性迁移，适用于对业务中断敏感的场景，通过全量迁移过程完成目标端数据库的初始化后，增量迁移阶段通过解析日志等技术，将源端和目标端数据库保持数据持续一致。
说明
选择“全量+增量”迁移模式，增量迁移可以在全量迁移完成的基础上实现数据的持续同步，无需中断业务，实现迁移过程中源业务和数据库继续对外提供访问。
源端数据库实例个数
源端数据库实例个数默认最小值为2，最大值为16，你需要根据源端实际的分片数据库个数设置该值大小。
标签
可选配置，对迁移任务的标识。使用标签可方便管理您的迁移任务。每个任务最多支持10个标签配额。
任务创建成功后，您可以单击任务名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。

步骤 3 在“源库及目标库”页面，迁移实例创建成功后，填选源库信息和目标库信息，单击“源库和目标库”处的“测试连接”，分别测试并确定与源库和目标库连通后，勾选协议，单击“下一步”。

表 源库信息

参数
描述
中间件IP地址或域名
源数据库的IP地址或域名。
端口
源数据库服务端口，可输入范围为1~65535间的整数。
中间件用户名
源数据库的用户名。
中间件密码
源数据库的用户名所对应的密码。
SSL安全连接
通过该功能，用户可以选择是否开启对迁移链路的加密。如果开启该功能，需要用户上传SSL CA根证书。
说明
最大支持上传500KB的证书文件。
如果不使用SSL证书，请自行承担数据安全风险。
分片数据库
根据源库实际的分片数据库，填写对应的数据库信息。

                    
说明
                    
源数据库的IP地址或域名、数据库用户名和密码，会被系统加密暂存，直至删除该迁移任务后自动清除。
                    
                  
                  

表 目标库信息

                    
说明
                    
目标数据库的用户名和密码，会被系统加密暂存，直至删除该迁移任务后自动清除。
                    
                  
                  

步骤 4 在“迁移设置”页面，设置迁移对象，单击“下一步”。

表 迁移对象

参数
描述
迁移对象
对象迁移到目标数据库实例后，对象名将会保持与源数据库实例对象名一致且无法修改。
说明
目标库未创建的结构默认不迁移。

步骤 5 在“预检查”页面，进行迁移任务预校验，校验是否可进行迁移。

• 查看检查结果，如有失败的检查项，需要修复失败项后，单击“重新校验”按钮重新进行迁移任务预校验。

  图 预检查

• 预检查完成后，且预检查通过率为100%时，单击“下一步”。

                    
说明
                    
所有检查项结果均成功时，若存在告警，需要阅读并确认告警详情后才可以继续执行下一步操作。
                    
                  
                  

步骤 6 在“任务确认”页面，设置迁移任务的启动时间，并确认迁移任务信息无误后，单击“启动任务”，提交迁移任务。

表 任务启动设置

参数
描述
启动时间
迁移任务的启动时间可以根据业务需求，设置为“立即启动”或“稍后启动”，优选“稍后启动”。
说明
预计迁移任务启动后，会对源数据库和目标数据库的性能产生影响，建议您将任务启动时间设定在业务低峰期，同时预留2-3天校对数据。

步骤 7 迁移任务提交后，您可在“实时迁移管理”页面，查看并管理自己的任务。

• 您可查看任务提交后的状态，状态请参见任务状态说明。
• 在任务列表的右上角，单击刷新列表，可查看到最新的任务状态。