本节为您介绍云迁移服务进度大盘功能。 云迁移服务CMS提供进度大盘管理功能，您可以在迁移工具进行迁移配置成功后，在进度大盘中查看对应迁移状态，进度大盘主要展示迁移计划名称、迁移计划描述、资源数量、优先级标识符、计划创建时间、迁移进度，如图所示。 点击操作栏的“进入大盘”按钮，进入计划详情页面，如图所示。 点击操作栏的“详情”按钮，可进入服务器迁移服务查看迁移进度，如图所示。

分类 云产品 支持审计的关键操作列表 大数据 翼MapReduce 大数据 云搜索服务

本节为您介绍天翼云 CTRDS SQL Server为源的迁移任务源端配置。 前提条件 （1）CTRDS SQL Server数据库的源端版本为2012、2014、2016、2017、2019版本。 （2）CTRDS SQL Server Web版本，不支持增量数据迁移。 （3）目标端数据库的存储空间必须大于源端数据库所占用的存储空间。 使用限制 无主键表仅支持全量迁移，但不支持增量迁移和稽核修复； 目标库非自建SQL Server的情况下，结构迁移仅支持迁移表结构； 迁移过程中，可迁移源端数据库的表结构、全量数据和增量数据； sys.sysservers视图的srvname字段与SERVERPROPERTY函数返回值保持一致； 若源库是企业版，增量迁移则需为2008及以上版本； 若源库是标准版，增量迁移则需为2016SP1及以上版本； 不支持迁移TEXT、CURSOR、ROWVERSION、SQLVARIANT、HIERACHYID和GEOMETRY； 源库存在单个数据库的日志量超过20 MB/s、需要开启CDC（Change Data Capture，变更数据捕获）的表超过1000个、存在堆表、无主键表、压缩表、含计算列表等场景可能会导致迁移失败。 源端权限要求 迁移模式 所需权限 基础权限 SELECT 全量迁移 需具备基础权限 结构迁移 需具备基础权限，且具备VIEW DEFINITION 增量迁移 需具备基础权限，且具备Sysadmin角色，开启SQL Server代理服务 稽核修复 需具备基础权限 源端配置请参照自建SQL Server为源的迁移任务源端配置。

本节为您介绍自建SQL Server为源的迁移任务源端配置。 前提条件 （1）自建SQL Server数据库的源端版本为2008 R2、2012、2014、2016、2017、2019版本。 （2）自建SQL Server为2005版本或源RDS SQL Server为2008、2008R2时，不支持增量数据迁移。 （3）目标端数据库的存储空间必须大于源端数据库所占用的存储空间。 使用限制 无主键表仅支持全量迁移，但不支持增量迁移和稽核修复； 目标库非自建SQL Server的情况下，结构迁移仅支持迁移表结构； 迁移过程中，可迁移源端数据库的表结构、全量数据和增量数据； sys.sysservers视图的srvname字段与SERVERPROPERTY函数返回值保持一致； 若源库是企业版，增量迁移则需为2008及以上版本； 若源库是标准版，增量迁移则需为2016SP1及以上版本； 若源库为SQL Server 2017版（包括标准版和企业版），增量迁移时建议升级版本； 不支持迁移TEXT、CURSOR、ROWVERSION、SQLVARIANT、HIERACHYID和GEOMETRY； 源库存在单个数据库的日志量超过20 MB/s、需要开启CDC（Change Data Capture，变更数据捕获）的表超过1000个、存在堆表、无主键表、压缩表、含计算列表等场景可能会导致迁移失败。 源端权限要求 迁移模式 所需权限 基础权限 SELECT 全量迁移 需具备基础权限 结构迁移 需具备基础权限，且具备VIEW DEFINITION 增量迁移 需具备基础权限，且具备Sysadmin角色，开启SQL Server代理服务 稽核修复 需具备基础权限

场景描述 在源Redis和目标Redis网络互通的前提下，使用在线迁移功能，可将源Redis中的数据以全量同步或者全量同步+增量同步的方式迁移至目标Redis中。 说明 如果源Redis禁用了PSYNC命令，仅可进行全量同步，否则可进行全量同步+增量同步。 如果源Redis和目标Redis网络不通，请根据场景使用 如果源Redis和目标Redis在相同db下存在相同的key数据，将按照迁移勾选的进行处理。 如果迁移双方为主备架构，当迁移过程中出现主从切换时，迁移可能发生中断。 建议目标Redis内核版本不低于源Redis版本，否则可能出现命令不兼容问题，导致迁移中断。 建议源端Redis无大key存在，否则迁移可能发生中断。 对业务影响 在线迁移，相当于在源Redis增加一个slave节点进行数据同步，建议在业务低峰期进行迁移操作。 迁移双方实例均是天翼云实例时，迁移任务将部署在源端节点并占用一定的服务器资源（占用的服务器资源与迁移数据量相关）。 前提条件 在迁移之前，请先阅读迁移方案概览，了解当前场景的各类方案，并选择适合于自身场景的方案。 如果目标集群为Cluster原生集群，则源Redis的所有DB（0255）数据将自动合并至DB（0）中，发生key冲突时按照迁移勾选的 进行处理。

创建DRS任务 1、登录天翼云控制台。 2、单机管理控制台区域按钮，选择区域“上海4”。 3、单机左侧的服务列表图标，选择“数据库 > 数据复制服务”。 4、单击“创建迁移任务”，填写迁移信息后点击下一步。 5、配置源端和目的端迁移信息，并单机测试连接显示通过即为两个数据库网络可达。 6、单击“下一步”。确认迁移用户、快照模式和迁移对象。 7、单击“下一步”。等待预检查结果。 8、当所有检查都是“通过”时，单击"下一步”单击“提交任务”。返回DRS实时迁移管理，查看迁移任务状态。 9、迁移完成后可在控制台左侧点击迁移对比查看迁移对比结果

本节为您介绍自建MySQL为源的迁移任务源端配置。 前提条件 （1）自建MySQL数据库的源端版本为5.6、5.7、8.0版本。 （2）自建MySQL数据库源端已关闭大小写敏感。 （3）自建MySQL数据库源端已开启binlog 且格式为row。 （4）目标端数据库的存储空间必须大于源端数据库所占用的存储空间。 使用限制 待迁移的表需具备主键，否则会导致该表无法进行增量迁移和稽核修复； 不支持迁移mysql、informationschema、performanceschema等MySQL系统库； 目标库非自建MySQL的情况下，结构迁移仅支持迁移表结构； 迁移过程中，可迁移源端数据库的表结构、全量数据和增量数据。 源端权限要求 由于权限查询需要设计到mysql.user及mysql.db两张系统表。所以需要先授予用户以上两张表的SELECT权限。 迁移模式 所需权限 基础权限 SELECT 全量迁移 需具备基础权限，且具备REFERENCES, INDEX, SHOW VIEW, TRIGGER和全局级别:PROCESS权限 结构迁移 需具备基础权限，且具备REFERENCES, INDEX, SHOW VIEW, TRIGGER，CREATE ROUTINE, SUPER (根据不同的结构，所需权限也不同) 增量迁移 需具备基础权限，且具备全局级别REPLICATION CLIENT,REPLICATION SLAVE权限，并开启binlog row模式 稽核修复 需具备基础权限 源端配置： 数据源类型 选定为MySQL，可迁移版本范围内的MySQL数据库 服务器IP 待迁移源端数据库的连接IP 端口号 待迁移源端数据库的端口 用户名 用于连接待迁移源端数据库的用户名称 密码 用于连接待迁移源端数据库的用户的密码 数据库 要迁移的源端数据库名

本章介绍主机迁移服务迁移或同步失败常见问题。 迁移中源端有新增的数据如何处理？ 启动目的端后，若源端有新增的数据，单击此服务器所在行的操作列的“同步”，开始下一次复制（增量数据），当迁移状态为“持续同步”时，单击“启动目的端”，迁移实时状态为“已完成”时，说明新增数据已同步到目的端。 “迁移模块异常中止，无法同步”怎么处理？ 问题描述 持续同步过程中出现“SMS.1414 迁移模块异常中止，无法同步”。 问题原因 迁移模块异常终止可能是因为用户手动重启过Agent或者源端服务器被重启过。 源端有一个监控磁盘变化的进程，用于将源端变化的部分同步到目的端。重启之后该进程被终止，会导致无法正确的将源端服务器的变化同步到目的端。 解决方案 该场景下无法继续完成迁移任务，请删除该任务后，重新迁移。请注意迁移过程中不要重启源端服务器或Agent。 Windows迁移过程中，源端SMSAgent突然退出，导致与主机迁移控制台断开连接 问题描述 Windows服务器迁移过程中，源端突然与SMS控制台断开连接，查看源端发现是迁移用的SMSAgent程序退出。 问题分析 出现该问题，可能是因为源端服务器“客户体验改善计划”导致SMSAgent程序退出。 1. 查看SMSAgent迁移日志中断时间。（C:SMSAgentPy3SmsAgentInfo.log） 2. 在源端服务器，打开计算机管理。选择“事件查看器>Windows 日志>系统”。 3. 在系统日志中，查看与SMSAgent迁移日志中断时间对应的系统日志。发现是因为一条客户体验改善计划的用户登录通知，导致源端服务器自动重启。 解决方案 关闭“客户体验改善计划”。 1. 在源端服务器，打开运行窗口，输入：gpedit.msc，单击“确定”，打开“组编辑策略器”。 2. 在导航栏，选择“计算机配置>管理模板>系统>Internet通信管理>Internet 通信设置”，找到“关闭Windows 客户体验改善计划”。 3. 双击“关闭Windows 客户体验改善计划”，打开编辑窗口，选择“已启用”，单击“确定”。 4. 打开计算机管理，选择“系统工具>任务计划程序库>Microsoft>Windows>Customer Experience Improvement Program”，禁用所有任务。 5. 选择“系统工具>任务计划程序库>Microsoft>Windows>Application Experience”，禁用所有任务。 6. 禁用客户体验改善计划相关任务后，需要在SMS控制台删除迁移任务，重新创建并启动迁移任务。

本节为您介绍云迁移服务CMS资源规划之资源任务查看。 云迁移服务CMS 提供资源管理功能，您可以通过左侧菜单栏选择资源规划点击【资源管理】进入[资源管理]界面。[资源管理]界面展示资源基本信息，如资源名称、资源状态、资源类型、采集方式、资源发现任务、迁移组、迁移计划名称、计划创建时间、备注、操作等信息。 资源名称 用于用户创建资源所取得名称，可修改。 资源状态 用于现实资源迁移状态分为未计划、待迁移、迁移中、迁移完成、迁移失败。 资源类型 用于评估源机资源类型可分为主机、数据库、对象存储。 采集方式 区分源端资源创建通过的采集信息方式分为离线采集和在线采集。 资源发现任务 创建资源发现任务的任务名称，用于更好识别任务的对象、用途等。

迁移完成后，Windows系统、软件的激活说明 服务器迁移服务提供的是整机迁移服务，使用CMS把Windows系统的源端服务器迁移到目的端服务器上后，源端服务器中需要许可证（License）的产品在目的端需要重新激活。常见的如Windows系统的激活、付费软件的License激活，服务器迁移服务本身不提供相应的激活服务，需要您自行联系Windows系统提供方和软件提供方进行激活。 迁移完成后，Linux系统、软件的激活说明 服务器迁移服务提供的是整机迁移服务，使用CMS把Linux系统的源端服务器迁移到目的端服务器上后，源端服务器中需要许可证（License）的产品在目的端需要重新激活。常见的如鲲鹏和Redhat系统的激活、付费软件的License激活，服务器迁移服务本身不提供相应的激活服务，需要您自行联系系统提供方和软件提供方进行激活。

本节为您介绍自建Oracle为源的迁移任务源端配置。 前提条件 （1）自建Oracle数据库的源端版本为10g、11g、12c、18c或19c版本。 （2）自建Oracle数据库源端已开启ARCHIVELOG（归档模式），设置合理的归档日志保持周期且归档日志能够被访问。 （3）自建Oracle数据库源端已开启Supplemental Logging，且已开启supplementallogdatapk，supplementallogdataui。 （4）目标端数据库的存储空间必须大于源端数据库所占用的存储空间。 使用限制 无主键表仅支持全量迁移，但不支持增量迁移和稽核修复； 目标库非自建Oracle的情况下，结构迁移仅支持迁移表结构； 不支持迁移system、sys等Oracle系统库； 不支持迁移外部表； 迁移过程中，可迁移源端数据库的表结构、全量数据和增量数据; 如果源库存在varchar2类型的空字符串（Oracle会将其处理为null）且对应的目标库字段有非空约束，将会导致迁移任务失败； 单独更新大文本字段场景不支持，任务会失败； 迁移触发器时，建议源库和目标库用户名保持一致，如果用户名不一致，将可能导致触发器迁移失败。 源端权限要求 迁移模式 所需权限 基础权限 SELECT ANY TABLE, SELECT ANY DICTIONARY，CONNECT, SELECTCATALOGROLE, CREATE SESSION 全量迁移 需具备基础权限 结构迁移 需具备基础权限，且具备CREATE ANY MATERIALIZED VIEW 增量迁移 物化视图增量：需基本基础权限，且具备CREATE ANY TABLE, DROP ANY TABLE, COMMENT ANY TABLE, DELETE ANY TABLE权限 归档日志增量：需具备基础权限，且具备LOGMINING, FLASHBACK ANY TABLE, SELECT ANY TRANSACTION, EXECUTECATALOGROLE, EXECUTE ON DBMSLOGMNRD, EXECUTE ON DBMSLOGMNR, EXECUTE ON DBMSFLASHBACK, SELECT ON SYS.COL$, SELECT ON SYS.USER$, SELECT ON SYS.OBJ$，CREATE ANY MATERIALIZED VIEW权限 稽核修复 需具备基础权限

迁移源端云主机下载、安装并启动迁移agent 1. 打开“CMSSMS”控制台，点击“迁移agent”，浏览迁移前检查项，并认真核对。 2. 下载迁移agent程序。 服务器迁移服务支持Linux和Windows两种操作系统的同构迁移。根据云主机的操作系统和处理器架构选择对应的迁移agent安装程序，复制对应的下载指令并在源机上运行。 本次实践选择Linux操作系统X86版本的迁移agent安装程序。 执行指令，下载agent安装程序： sudo wget 3. 安装迁移agent。 回到天翼云“迁移agent”界面，复制安装指令： 在迁移源机上执行安装指令： agent：sudo chmod +x moveCloudx.x.xx8664linux.run && sudo ./moveCloudx.x.xx8664linux.run 4. 安装过程输入AK和SK。 回到天翼云“迁移agent”界面，可复制AK和SK： 在迁移源机上输入对应的AK和SK： 5. 启动迁移agent程序。 在迁移源机启动迁移agent程序： movecloud start

本文为您介绍云迁移服务CMS如何创建迁移组任务。 介绍说明 当您在使用云迁移服务CMS平台需对创建资源进行分组管理时，您需创建迁移组，您可以进入迁移组列表，新建目标迁移组。 图1：迁移组列表 操作步骤 1. 在[迁移组]界面右上角点击【迁移组创建】按钮，新建迁移组。 2. 在[基本信息填写] 界面，您根据提示依次填写基本信息。 3. 选择需要的资源，放入该迁移组。 4. 对选择资源进行确认，点击【资源确认】按钮，完成迁移组创建。

数据库账号及权限 数据库账号及权限如下表： 数据库 所需权限 参考赋权语句 源库 源库为MySQL5.7时： 对MySQL库的SELECT权限。 对待迁移库的SELECT,EVENT,TRIGGER权限。 部分全局权限： REPLICATION CLIENT REPLICATION SLAVE SHOW VIEW PROCESS 如果是整库迁移，需要对所有数据库的查询权限。 源库为MySQL8.0时： 对MySQL库的SELECT权限。 对待迁移库的SELECT, EXECUTE, EVENT,TRIGGER权限。 部分全局权限： PROCESS REPLICATION CLIENT REPLICATION SLAVE SHOW VIEW SHOWROUTINE 如果是整库迁移，需要对所有数据库的查询权限。 源库为MySQL5.7时： GRANT SELECT ON mysql. TO '迁移账号'@'%'; GRANT SELECT, EVENT,TRIGGER ON 待迁移的库. TO '迁移账号'@'%'; GRANT REPLICATION CLIENT, REPLICATION SLAVE, SHOW VIEW, PROCESS ON . TO '迁移账号'@'%'; 源库为MySQL8.0时： GRANT SELECT ON mysql. TO '迁移账号'@'%'; GRANT SELECT, EXECUTE, EVENT, TRIGGER ON 待迁移的库. TO '迁移账号'@'%'; GRANT PROCESS, REPLICATION SLAVE, REPLICATION CLIENT, SHOW VIEW, SHOWROUTINE ON . TO '迁移账号'@'%'; 目标库 schema的创建权限 授予用户username在数据库databasename下的schema创建权限： GRANT CREATE ON DATABASE databasename TO username; 注意 如果待迁移对象包含用户自定义function，则在满足上述权限的基础上，目标端数据库同时需将logbintrustfunctioncreators参数设置为1，参考语句如下：set global logbintrustfunctioncreators 1;

本章节介绍主机迁移服务的优势。 简单易用 您只需在源端服务器安装和配置Agent、在服务端设置目的端并启动迁移任务、“持续同步”状态时启动目的端，其余事情都由主机迁移服务处理。 创建迁移任务您只需三步。即选择和配置源端、目的端及确认任务信息。 业务平滑切换 在主机迁移过程中您无需中断或者停止业务。 若不选择持续同步，只需在最后一次数据同步时短暂的停止业务，待最后一次增量数据同步完成后，目的端的业务即可启动，大大减少业务中断时间。 若选择持续同步，只需在“持续同步”状态时，启动目的端前短暂停止业务，大大减少业务中断时间。Linux文件级迁移，暂不支持“持续同步”功能。 兼容性好 支持主流云服务平台X86虚拟机迁移，和X86物理服务器迁移。 支持约90款主流Windows Server与Linux Server 操作系统迁移。 传输高效 迁移网络利用率达到90%以上。 安全性高 使用AK/SK校验迁移Agent身份。 传输通道使用SSL加密，保证您数据传输安全性。 SSL加密的证书和密钥是动态生成。

创建快捷对比 为了加快割接过程，简化对比的操作步骤，提升操作效率，DRS提供快捷对比的功能，无需进入具体实例，在迁移管理界面即可进入对比界面。该功能只支持对比所有迁移对象，且只有增量迁移中的任务才可以使用该功能。 步骤 1 在“实时迁移管理”页面，选择指定的实时迁移任务，单击“操作”列的“创建对比”。 步骤 2 在“创建对比任务”页面，根据业务需要，选择“立即启动”或“稍后启动”后，单击“是”启动对比任务。 查看对比任务 步骤 1 在“实时迁移管理”页面，选择指定的实时迁移任务，单击“操作”列的“查看对比”。 步骤 2 在“迁移对比”页签，可查看数据对比结果。

本节为您介绍云迁移服务CMS迁移计划查看。 云迁移服务CMS平台可以查看当前用户下迁移计划任务基本信息，如迁移计划名称、迁移计划描述、迁移组、资源数量、优先级、创建时间、计划状态、备注、操作等信息，如图所示。

本节为您介绍云迁移服务CMS迁移组查看基本信息。 云迁移服务CMS平台可以查看当前用户发起的迁移组基本信息，如迁移组名称、迁移组描述、资源数量、迁移计划个数、状态、备注、操作等信息。如图所示。

本节主要介绍迁移iSCSI target命令。 ./stor target set { i item } server { n name } TARGETNAME { m migrate } { SOURCESERVERID:DESTSERVERID }& { f force } 此命令用来迁移iSCSI target，修改target对应的服务器。 说明 可以只迁移iSCSI target对应的一个服务器，也可以同时迁移对应的多个服务器。 注意 执行迁移iSCSI target之前，需要保证集群处于working状态，同时目的服务器需要处于正常已连接状态。 目前仅支持强制迁移iSCSI target，强制迁移iSCSI target可能造成数据丢失。 如果被迁移的iSCSI target已被卷连接，且该卷已经被客户端挂载，迁移iSCSI target前，需要客户端与原iSCSI target IQN断开；迁移后，确保原iSCSI target IQN不能被发现，客户端重新连接迁移后的iSCSI target IQN。 迁移完成后，请检查并调整target允许访问列表配置，确保符合访问控制要求。 参数 参数 描述 i server 或item server 设置iSCSI target迁移。 n TARGETNAME 或 name TARGETNAME iSCSI target名称。 m { SOURCESERVERID:DESTSERVERID }& 或 migrate { SOURCESERVERID:DESTSERVERID }& 指定target对应的源服务器ID和目标服务器ID。 说明 可以指定多组源服务器ID和目标服务器ID，以英文逗号隔开。 f 或 force 强制迁移iSCSI target。 注意 目前仅支持强制迁移iSCSI target，强制迁移iSCSI target可能造成数据丢失。

本节为您介绍数据迁移工具高级选项选择。 1. 选择迁移方式之后，进行高级选项选择. 是否记录迁移失败对象 开启后，将记录迁移失败的对象名 是否开启多版本 开启多版本后同名文件不会被覆盖，开启多版本同时源桶也开启多版本,将先清空目的桶再进行迁移,建议目的端使用新桶 是否指定迁移起始时间 开启后，可以设置迁移任务开始的时间 是否指定迁移任务运行时间 开启后，可以设置迁移任务运行时间段

您可以根据实际情况,将您分片上的数据迁移到其他分片上。 注意事项 迁移任务执行期间将占用实例资源，建议您在任务完成后及时将其关闭或删除。 为避免对线上业务造成影响，建议将迁移服务部署在业务压力较低的非生产节点。 操作步骤 1. 在天翼云官网首页的顶部菜单栏，选择产品 > 数据库 > 关系型数据库 > 分布式关系型数据库 ，进入分布式关系型数据库产品页面。然后单击管理控制台 ，进入概览 页面。 2. 在左侧导航栏，选择DRDS > 实例管理 ，进入实例列表页面。然后在顶部菜单栏，选择区域和项目。 3. 在实例列表中，找到目标实例，单击操作 列的管理 ，进入实例基本信息 页面。 4. 单击Schema管理 ，进入目标实例的Schema 管理页面。 5. 在Schema列表中，找到目标Schema，单击Schema名称或者操作 列的管理 ，进入Schema基本信息页面。 6. 单击分片迁移 ，进入分片迁移页签。 7. 单击新增迁移任务。 8. 在对话框中配置迁移相关参数，然后单击确定。 参数 说明 任务执行节点 执行迁移任务的DBProxy节点。 分片节点 选择分片节点。 分片目标MySQL集群 选择目标MySQL集群。 9. 单击分片迁移历史页签。 您可以查看当前分片迁移的历史记录信息，包括分片节点、目标MySQL集群、数据库名称、迁移任务、状态、迁移时间、操作人员等信息。

前提条件 部署迁移工具drsredis。 保证迁移工具drsredis、源端Redis和目标端GeminiDB Redis网络互通。 操作步骤 如需进行Redis到GeminiDB Redis的迁移，您可以在管理控制台右上角，选择“工单 > 新建工单”，联系技术支持进行处理。 迁移性能参考 环境：源端单节点Redis和迁移工具drsredis部署在8U32GB的弹性云服务器上，目标端为4U16GB，3节点GeminiDB Redis实例。 场景一： 源端replication buffer采用默认值（slave 268435456 67108864 60），该默认值表示缓存积压数据超过268435456bytes(256MB)，或超过67108864bytes(64MB)且持续60s，源端会主动断开与从节点的连接。 源端写入速率5MB/s，迁移过程可持续进行，不会产生源端buffer满造成的同步失败。 迁移工具读取数据的速率和源端写入速率一致。 场景二： 源端replication buffer不做限制（config set "clientoutputbufferlimit" "slave 0 0 0"）。 源端写入速率10MB/s，容量充足的情况下，迁移持续进行。 迁移工具读取数据的速率和源端写入速率一致。 结论： 在环境上，使用8U32GB弹性云服务器部署迁移工具，若源端replication buffer采用默认值，迁移可在源端5MB/s的写入速率下进行；若源端对replication buffer不做限制，迁移可在源端10MB/s的写入速率下进行。

迁移准备 （1）配置网络环境 Kafka实例分内网地址以及公网地址两种网络连接方式。如果使用公网地址，则消息生成与消费客户端需要有公网访问权限。 （2）创建Kafka实例 Kafka的规格不能低于原业务使用的Kafka规格。 （3）创建Topic 在新的Kafka实例上创建与原Kafka实例相同配置的Topic，包括Topic名称、副本数、分区数、消息老化时间，以及是否同步复制和落盘等。 实施步骤（方案一：先迁生产，再迁消费） 以下是按照先迁移生产者，再迁移消费者的详细步骤来进行Kafka迁移的建议： （1）准备工作： 评估现有系统：了解现有系统的特点、数据源、数据流以及系统架构等方面。 设计新系统架构：根据迁移目标和现有系统评估结果，设计新的系统架构，确定Kafka的角色和位置。 确定迁移范围：确定需要迁移的数据范围和迁移的优先级。 （2）配置新Kafka集群： 根据新系统架构，配置和部署新的Kafka集群。 确保新集群的性能、可靠性和可扩展性满足业务需求。 （3）迁移生产者： 逐步切换现有系统中的生产者到新的Kafka集群。 修改生产者的配置文件或代码，将消息发送到新的Kafka集群。 监控生产者的消息发送情况，确保消息能够成功写入新的Kafka集群。 （4）测试和验证生产者迁移： 对迁移后的生产者进行测试和验证，确保消息的发送和写入操作正常。 监控和日志记录可以用于确认消息的可靠性和一致性。 （5）迁移消费者： 在确认生产者迁移成功后，逐步将现有系统中的消费者切换到新的Kafka集群。 修改消费者的配置文件或代码，指定新的Kafka集群地址。 确保消费者能够从新的Kafka集群中正确地读取消息。 （6）测试和验证消费者迁移： 对迁移后的消费者进行测试和验证，确保消息的读取和消费操作正常。 监控和日志记录可以用于确认消息的可靠性和一致性。 （7）监控和运维： 建立监控和运维机制，监控新的Kafka集群的运行状态和性能指标。 确保系统的稳定性和可靠性，及时处理异常情况。 以上步骤是一种常见的迁移策略，可以确保在迁移过程中保持数据的连续性和一致性。在每个迁移阶段完成后，都需要进行相应的测试和验证，以确保迁移的正确性和可靠性。具体的步骤可能会根据实际情况有所不同，建议根据具体业务需求和系统特点进行调整。

参数 是否必填 参数类型 说明 示例 下级对象 sourceType 否 String 迁移源类型，默认为S3，①S3：AWS及S3适配；②OSS：阿里云OSS；③COS：腾讯云COS；④OBS：华为云OBS；⑤OOS：天翼云OOS；⑥ZOS：天翼云对象存储ZOS S3 sourceEndpoint 是 String 迁移资源池地址，支持输入IP或域名，以 sourceBucket 是 String 迁移源桶，输入限制不超过1024字符 bucketkpblz sourceAccessKey 是 String 迁移源资源池ak，输入限制不超过1024字符 7Hj9Kp2QXXXm5Nv3RfX sourceSecretKey 是 String 迁移源资源池sk，输入限制不超过1024字符 bL8yT4wXXXG6dS1xE9P sourceBucketType 否 String 源资源池迁移模，默认为Bucket。①Bucket：整桶迁移；②Folder：文件夹迁移；③Files：文件迁移；④Prefix：前缀迁移 Bucket migrateFolder 否 Array of Strings 指定源资源池迁移的文件夹列表，仅当sourceBucketType为Folder时有效，当前仅支持指定单个文件夹，单个文件夹名输入限制不超过1024字符 ["folder1"] migrateFiles 否 Array of Strings 指定源资源池迁移的文件名列表，仅当sourceBucketType为Files时有效，当前指定文件上限为100个，单个对象名输入限制不超过1024字符 ["files1","files2"] migratePrefix 否 Array of Strings 指定源资源池迁移的前缀列表，仅当sourceBucketType为Prefix时有效，当前只支持指定单个前缀，单个前缀名输入限制不超过1024字符 ["prefix1"]

本节主要介绍RocksDB到GeminiDB Redis的迁移方案。 RocksDB是FaceBook基于LevelDB开发的一个持久化KV单机数据库引擎，具有强大的顺序读写及随机写性能。相对于LevelDB，RocksDB做了许多优化，性能有了很大提升， 而且解决了LevelDB主动限制写的问题。作为一个数据库引擎，RocksDB没有设计成C/S网络结构，直接使用需要和服务部署在同一台服务器，对于服务的部署、使用有较大的限制。 GeminiDB Redis采用RocksDB作为存储引擎，兼容Redis协议具有丰富的数据类型，可以满足RocksDB的使用需求。同时GeminiDB Redis对RocksDB进行深度定制，实现秒级分裂弹性扩容，扩缩容无需搬迁数据，快速而平滑，为RocksDB业务转到Redis生态提供了便利。 迁移原理 使用自研迁移工具rocksdbport，和RocksDB部署在相同机器上，准备好配置文件，启动迁移即可自动完成全量与增量的迁移。 全量迁移对RocksDB数据进行快照，然后扫描整个数据库，将数据打包成GeminiDB Redis识别的格式，发送到GeminiDB Redis，具有很高的迁移效率。 增量迁移解析RocksDB的wal文件，将RocksDB的操作解析出来，然后对其中的key进行分片，多线程进行发送。 使用须知 迁移工具需要部署在源端，对性能有一定消耗，可通过修改配置文件进行一定的控制。 迁移过程读取RocksDB的源数据文件，只读操作，理论上不会有数据受损风险。 迁移过程不需要停服。 若迁移过程出现故障，需要清理GeminiDB Redis实例，重新启动迁移。

本文介绍使用RedisShake工具迁移自建Redis Cluster集群 RedisShake是一个开源的Redis迁移工具，可以用于在线迁移和离线迁移（通过备份文件导入）。当你需要迁移部署在其他云厂商上的 Redis集群数据时，如果无法进行在线迁移，你可以选择离线迁移的方式。 在线迁移 在线迁移主要适用于自建Redis Cluster集群迁移到DCS Redis的场景，且两端集群实例能够网络连通，或者有一台中转服务器能够连通两端集群实例。 在线迁移有多种模式，如果SYNC、PSYNC命令未被禁用，建议采用syncreader模式，否则可使用scanreader模式，具体见RedisShake官方社区。 1、在DCS控制台创建Redis实例。 注意 新创建的Redis实例容量不能小于源端Redis实例的实际使用容量。 2、准备一台云服务器，并安装RedisShake。 RedisShake需既能访问源端缓存实例，也能访问目标端DCS 缓存，需要绑定弹性公网IP 3、获取源集群和目标集群的ip地址。 如果源实例或者目标实例是proxy模式架构，则获取proxy ip即可。 4、编辑RedisShake配置文件。 编辑redisshake工具配置文件shake.toml，补充迁移双方信息，及迁移模式。 [syncreader] cluster false set to true if source is a redis cluster address "ip:port" when cluster is true, set address to one of the cluster node username "" keep empty if not using ACL password "" keep empty if no authentication is required tls false syncrdb true set to false if you don't want to sync rdb syncaof true

本章节主要介绍翼MapReduce运行kafka作业。 用户可将自己开发的程序提交到翼MR中，执行程序并获取结果。本章节教您在翼MR集群后台如何提交一个新的kafka作业。 通过后台提交作业 1. 登录翼MR管理控制台。 2. 选择“我的集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。 3. 在“节点管理”页选中单击Master节点，选择要进入的Master节点。 4. 单击该节点右侧的“远程连接”。 5. 根据界面提示，输入Master节点的用户名和密码，用户名、密码分别为root和创建集群时设置的密码。 6. 创建kafka的topic。 plaintext /usr/local/kafka/bin/kafkatopics.sh zookeeper :2181/kafka topic create 7. 当前集群默认开启Kerberos认证，执行以下命令添加认证信息。 plaintext export KAFKAOPTS"Djava.security.krb5.conf/etc/krb5.conf Djava.security.auth.login.config/usr/local/kafka/config/kafkajaas.conf" 8. 向topic中写入消息。 plaintext /usr/local/kafka/bin/kafkaconsoleproducer.sh brokerlist :9092 topic producer.config /usr/local/kafka/config/producer.properties 9. 消费topic中的消息。 plaintext /usr/local/kafka/bin/kafkaconsoleconsumer.sh bootstrapserver :9092 topic consumer.config /usr/local/kafka/config/consumer.properties frombeginning maxmessages 5 注意 frombeginning：只能消费未被消费的历史数据，已消费数据不会出现。 maxmessages：最多消费多少条数据。

电脑端投屏 天翼云电脑电脑客户端作为投屏端，可以通过输入投屏码方式进行投屏操作。 操作步骤： 1.登录天翼云电脑客户端，在云电脑列表选择进入投屏的云电脑； 2.进入云电脑后，在顶部工具栏，点击“控制中心”“偏好设置””工具栏设置“，开启“翼投屏”功能（首次使用可选择显示入口或显示入口+投屏码）； 3.开启后，在顶部工具栏，点击“控制中心”，可查看到翼投屏功能； 4.点“翼投屏”，弹出投屏界面，输入投屏码进行投屏； 5.输入后等待投屏显示即可，连接成功后投屏接收端会显示如下界面。

本节为您介绍服务器迁移服务功能特性。 数据"0"丢失 在数据传输过程中，服务器迁移服务通过数据校验确保数据的一致性，保障数据在迁移过程中不发生丢失。同时，通过数据稽核功能，用户可以准确检验两端数据的异同，实现真正意义上的数据"0"丢失。 传输控制进程分离 服务器迁移服务将控制流量与监控流量区分，有效避免数据传输过程中网络中断导致任务失败的情况。监控流量将源机和目标机的监控数据通过单独传输上报至平台，让用户可以查看传输进度、使用率以及迁移状态。 批量绑定 服务器迁移服务支持通过Excel模板批量导入源机和目标机的对应关系，避免重复操作，减少用户手动配置的工作量，提高操作的便捷性。 自定义分区 用户可以在服务器迁移服务上对目标机进行灵活的扩缩容分区操作。根据当前的资源使用情况，可以自由调整资源，提高资源利用率。 断点续传 服务器迁移服务支持断网续传和重启续传功能，有效避免用户因网络波动或误操作Agent等情况导致的任务中断，保障任务的稳定性。 代理迁移 服务器迁移服务提供代理迁移功能，通过代理对网闸隔离后的内网进行跳转转发，无需直接打通内网与互联网，从而保障了迁移过程的安全性，满足相关安全需求。

全量数据迁移 在全量数据迁移阶段，DTS会将源数据库的存量数据全部迁移到目标数据库。如果您在配置数据迁移任务时，仅选择了结构迁移和全量数据迁移，那么在迁移过程中，源库的新增数据不会被迁移至目标库。所以为保障数据一致性，迁移期间请勿在源库中写入新的数据。 增量数据迁移 在增量数据迁移阶段，DTS会将源库产生的增量数据实时同步至目标库。 此功能通常用于实现不停机迁移，即迁移源端数据库在全量数据迁移阶段发生的数据变更。 企业项目 企业项目权限是实现细粒度控制的基础。将云资源、企业成员按企业项目进行管理，通过企业项目将云资源、带有权限的用户组绑定到一起，通过授权用户组来限制用户使用企业项目内的云资源权限。

本页为您简要介绍什么是天翼云数据传输服务DTS。 TeleDB数据传输服务（Data Transmission Service，简称DTS）是由天翼云基于TeleDB v5.1.9版本孵化并演进而成的集数据迁移和数据实时同步于一体的数据传输服务。它作为数据流通的底座，能够帮助用户实现数据库不停业务快速稳定地迁移上云、构建数据实时同步通道实现数据库灾备/双活，保障业务数据高效、稳定地流通。 数据迁移 数据迁移是指在数据传输服务能够同时连通源数据库和目标数据库的情况下，只需要配置迁移的源、目标数据库实例及迁移对象即可完成整个数据迁移过程。数据迁移功能旨在帮助用户方便、快速地实现各种数据源之间的数据迁移，用户可通过EIP公网网络实现数据上云迁移、也可使用VPC网络实现天翼云内部跨实例数据迁移、数据库拆分扩容等业务场景。同时，数据迁移服务可实现不停机迁移，数据库不关机，业务不暂停，最大程度保障用户业务在迁移期间的可用性。 数据同步 数据同步是指在不同的系统之间，将数据通过同步技术从一个数据源拷贝到目标数据库，并保持目标库与源库数据的一致，实现关键业务的数据实时流动。数据同步功能旨在帮助用户实现两个数据源之间的数据实时同步。同步过程中可通过映射和条件过滤实现灵活同步。 基本特性 多数据源实时同步和迁移 支持MySQL>MySQL，PostgreSQL>PostgreSQL，SQL Server>SQL Server的实时数据同步和迁移。 支持DDS/MongoDB副本集>DDS/MongoDB副本集的数据迁移。 支持MySQL> PostgreSQL、MySQL>ClickHouse不同数据源之间的实时数据同步和迁移。 支持数据结构迁移、全量迁移、增量迁移，通过结构、全量、增量迁移可帮助用户将数据实时同步到目标端，实现业务平滑迁移。

操作步骤 如需进行Redis到GeminiDB Redis的迁移，您可以在管理控制台右上角，选择“工单 > 新建工单”，联系技术支持进行处理。 迁移性能参考 环境：源端LevelDB和leveldbport部署在4U16GB的弹性云服务器上，目标端为2U8GB，3节点的GeminiDB Redis实例。 全量迁移：预置10GB数据，迁移速度约8MB/s。 增量迁移：设置value值大小为1KB，迁移速度约为7000qps。