本节为您介绍自建MySQL迁移至天翼云CTRDS PostgreSQL任务配置。 目标端配置请参照自建MySQL迁移至自建PostgreSQL。

本节问您介绍华为云RDS MySQL 迁移至天翼云 CTRDS MySQL任务配置。 源端配置请参照自建MySQL为源的迁移任务源端配置。 目标端配置请参照自建MySQL迁移至天翼云CTRDS MySQL。

本节为您介绍数据迁移中迁移对象过滤内容。 在任务参数配置完成之后，点击页面右下角的”下一步：选择迁移对象”按钮，进入到迁移对象过滤配置功能 在迁移对象过滤界面，可将可选对象中表通过”>”和”<”箭头，迁移或取消迁移已选对象中。然后对已选对象中的表数据进行迁移

本节为您介绍华为云RDS SQL Server迁移至天翼云 CTRDS SQL Server任务配置。 源端配置请参照自建SQL Server为源的迁移任务源端配置。 目标端配置请参照自建SQLServer迁移至天翼云CTRDS SQL Server。

本节为您介绍自建SQL Server迁移至天翼云CTRDS MySQL任务配置。 目标端配置请参照自建SQL Server迁移至自建MySQL。

本节为您介绍自建MySQL迁移至中国电信TelePG任务配置。 目标端配置请参照自建MySQL迁移至自建PostgreSQL。

本节为您介绍自建MySQL迁移至天翼云CTRDS MySQL 任务配置。 目标端配置请参照自建MySQL迁移至自建MySQL。

本节为您介绍天翼云CTRDS MySQL迁移至中国电信TeleDB任务配置。 限制条件 中国电信TeleDB for MySQL在使用Udal组件的情况下，全量迁移阶段无法自动迁移表定义。您需要提前手动创建表。目标端配置请参照自建MySQL迁移至自建MySQL。

本节为您介绍自建SQL Server迁移至中国电信TeleDB任务配置。 限制条件 中国电信TeleDB for MySQL在使用Udal组件的情况下，全量迁移阶段无法自动迁移表定义。您需要提前手动创建表。目标端配置请参照自建SQL Server迁移至自建MySQL。

本节为您介绍自建PostgreSQL迁移至中国电信TelePG任务配置。 目标端配置请参照自建PostgreSQL迁移至自建PostgreSQL

本节为您介绍 自建PostgreSQL迁移至天翼云CTRDS PostgreSQL任务配置。 目标端配置请参照自建PostgreSQL迁移至自建PostgreSQL。

本节为您介绍自建PostgerSQL迁移至中国电信TeleDB任务配置。 限制条件 中国电信TeleDB for MySQL在使用Udal组件的情况下，全量迁移阶段无法自动迁移表定义。您需要提前手动创建表。 目标端配置请参照自建PostgreSQL迁移至自建MySQL。

本页介绍了如何客户端安装。 如何安装MongoDB客户端 操作步骤 1. 下载MongoDB二进制包。 1. 前往MongoDB官方网站下载MongoDB客户端的二进制包。 2. 上传二进制包到云服务器。 1. 使用SSH或其他远程连接工具登录到您的云服务器。 2. 将下载的MongoDB二进制包上传到云服务器上，您可以使用SCP或者其他文件传输工具进行上传。 3. 解压和安装。 1. 在天翼云，云服务器上解压上传的MongoDB二进制包: 2. tar zxvf mongodblinuxx8664.tgz （是您下载的MongoDB版本号） 3. 将解压后的MongoDB二进制文件夹移动到合适的位置，比如/usr/local目录： bash mv mongodblinuxx8664 /usr/local/mongodb 4. 其中，常用工具包含如下： 1. MongoDB客户端mongo。 2. 数据导出工具mongoexport。 3. 数据导入工具mongoimport。 4. 使用客户端工具前，需要对工具赋予执行权限。 1. 执行 chmod +x mongo ，赋予连接实例的权限。 2. 执行 chmod +x mongoexport，赋予导出数据的权限。 3. 执行 chmod +x mongoimport ，赋予导入数据的权限。

错误码 访问ErrorCodes说明文档查看更多错误码。

本页介绍了如何排查集群实例负载不均衡问题原因与解决方法。 集群负载不均衡原因与排查方法 ： 数据分布不均：集群中的数据分布不均可能导致某些节点负责处理更多的数据请求，而其他节点处于较轻的负载状态。使用sh.status()命令查看分片集群的状态，确保数据在分片键上均匀分布。 索引不匹配：不同节点的索引设置可能不同，导致查询在某些节点上效率较低。确认每个节点的索引设置是否一致，特别是涉及查询的字段上是否存在索引。 写入偏向：如果所有写入请求都集中在一个节点上，那么该节点可能会出现较高的负载。考虑使用"Write Concern"参数或"Read Preference"参数来分散写入请求。 查询模式：集群中可能有某些查询模式导致某些节点的负载较高。使用db.currentOp()命令查看当前正在执行的查询，分析是否有查询消耗大量资源。 数据热点：某些数据区域可能比其他区域更活跃，导致数据热点。使用db.collection.stats()命令查看集合的统计信息，查找是否存在数据热点。 硬件性能：集群中的节点硬件性能可能不均衡，导致某些节点的处理能力较弱。确保所有节点的硬件配置相似，并且能够满足负载要求。 客户端连接：集群中某些节点的连接数可能较高，导致负载不均衡。使用db.serverStatus().connections命令查看每个节点的连接数。 数据迁移：如果最近进行了数据迁移或重分片操作，可能导致负载不均衡。确保迁移操作已经完成，并且数据均匀分布。 故障节点：某些节点可能由于故障或不可用导致负载不均衡。检查集群的状态，确认所有节点都处于正常运行状态。

本节主要介绍序列 操作步骤 1. 在顶部导航栏选择“库管理”，在对象列表页签下选择“序列”。 2. 在右侧操作栏单击“查看sequence详情” 查看sequence详情

本节主要介绍触发器管理 操作步骤 1. 在顶部导航栏选择“库管理”，在对象列表页签下选择“触发器”。 2. 您可以单击页面操作栏的“查看触发器详情”查看创建触发器的SQL语句。

本页介绍了参数模板允许您定义实例的各项启动参数，您可以选择将参数组应用到指定的实例中。 参数组种类 您可以制定单节点版实例或者副本集实例中的实例启动参数。 您可以制定集群版实例中config、mongos以及shard节点的启动参数。 参数组使用事项 在自定义参数模板时，有些默认的参数不能够进行修改，您只能对部分开放可编辑的参数进行修改。 在使用自定义参数时请参考允许值，在允许值的区间进行设置，若进行不恰当的设置可能会导致实例启动后进入不稳定或者异常状态。

迁移方案概述 迁移方案是通过源集群的zookeeper 做副本数据同步，架构如下： 前提条件： 要求源、目标集群在同一个网络，源、目标集群的分片数是相同的，另外建议源、目标集群的ck内核版本也一致，避免不同版本使用到的zstd 版本不一致导致merge出错 迁移条件 & 情况： 目标集群必须跟源集群具备相同的分片数，目标集群跟源集群网络相通； 只支持依赖zk的副本表； partitiong同步过程，源集群可正常读写，迁移过程源集群能正常读，但是不能写； 数据同步和迁移过程，不会删除源集群的数据； 数据同步过程源集群下的数据（本地数据 + cos数据）都会同步到目标集群下，因此目标集群下的容量要足够。 迁移步骤： 整体的迁移环节可概括为：创建临时表 （开始同步数据）和正式表 》修改临时表引擎为 MergeTree — 》从临时表把数据转移到正式表 》删除临时表 具体步骤如下： 1、在目标集群的各个分片选择一个节点，加入到tmpcluster里头去（metrika.xml文件中新增tmpcluster），修改目标集群的config.xml文件，把源集群的zk信息配置进来，如果有多个，那分别加入 ip1 2181 ip2 2181 ip3 2181 60000 30000 2、在目标集群上创建临时的副本表，绑定源集群的zk，以ReplicatedMergeTree为例子： CREATE TABLE tablenametmp on cluster tmpcluster ( ... ) ENGINE ReplicatedMergeTree('zookeeper2:path', '{replica}') ... 备注说明： 创建的临时副本表使用临时表名，在正式表后面加tmp。 创建的临时副本表使用的ZooKeeper路径和源端搬迁表的ZooKeeper路径需保持一致。 创建的临时副本表的表结构需和源端搬迁表保持一致。 3、创建完临时副本表之后，集群会自动通过源zk做part同步到目标集群的副本。期间不用做任何处理，可以准备下一步骤工作 （这个过程不要对临时表做任何数据分区操作，因为操作临时表分区就等于操作源集群对应正式表） 4、在目标集群创建正式名字的 副本表，采用默认zookeeper（可直接通过on cluster defaultcluster去创建） 5、同步完成之后，检查源集群和目标集群，各个表数据分布情况，数据准确性校验（查询part数，以及count总数是否匹配，校验数据准确性时最好做到源集群停写） 6、检查无误之后，在目标集群metadata 目录下，修改所有临时表的sql，把Engine均改成MergeTree （这步是为了迁移过程影响到源集群，保证源集群的数据可读），修改完后重启集群 —— 有现成脚本 7、执行DETACH 命令对临时表中的每个partition DETACH，然后登入目标集群，把临时表下detached目录的所有part mv 到对应的目标表的detached 目录下 —— 如果分区多，可用脚本完成，有现成脚本 例如：default 下lineorder表，可以执行 mv /data/clickhouse/clickhouseserver/data/default/lineordertmp/ detached/ /data/clickhouse/clickhouseserver/data/default/lineorder/detached/ 例如：default 下lineordertmp临时表，分区有'1992','1993','1994','1995','1996' 第一步：在studio上执行（也可以通过脚本去完成）: ALTER TABLE default.lineordertmp on cluster tmpcluster DETACH PARTITION '1992'; ALTER TABLE default.lineordertmp on cluster tmpcluster DETACH PARTITION '1993'; ALTER TABLE default.lineordertmp on cluster tmpcluster DETACH PARTITION '1994'; ALTER TABLE default.lineordertmp on cluster tmpcluster DETACH PARTITION '1995'; ALTER TABLE default.lineordertmp on cluster tmpcluster DETACH PARTITION '1996'; 第二步：登入到目标集群在各个节点上，执行: mv /data/clickhouse/clickhouseserver/data/default/lineordertmp/detached/ /data/clickhouse/clickhouseserver/data/default/lineorder/detached/ 8、执行attach 命令，把目标表下detached的part加载到表内 —— 如果分区多，可用脚本完成，有现成脚本（可找作者提供） 例如：default 下lineorder表，可以执行 alter table default.lineorder attach partition 'partitionname'; 依次把所有的partition 加载到正式表 9、所有的表迁移完成之后，删除临时表，再删除config.xml文件中的 auxiliaryzookeepers配置； 说明： 数据副本同步过程因为某种原因导致副本服务中断（可能是网络、bug、人为手工停止），再次重启后支持断点续传，不会影响源数据同步传输。 操作过程会涉及到多个partition的 DETACH和 attach命令，同时还需要登入到目标节点执行mv 操作，为了简化工作提高效率，减少过多人为操作而导致的失误，建议 通过批量工具（天翼云ClickHouse提供） + 脚本方式执行（找作者提供） 批量工具：批量分发文件到目标集群各个节点，批量在目标集群各个节点执行命令脚本等 参考脚本：查询一个表下的所有partition 列表，然后执行 DETACH命令， mv 命令 和最后的 attach命令 注意： 在添加临时表之后，源集群表的part就会自动通过zk做part复制，因为数据量很大，建议分批创建临时副本表，以免对源zk造成负载过高，从而影响业务 在临时表数据同步的过程中，一定不要对临时表做任何数据或是分区操作，操作临时表就等于操作源集群对应的正式表 在临时表数据同步过程，不能有ddl变化 方案优点：可支持对巨量副本表（几百个以上）的数据迁移，数据同步过程通过zk 做到后台自动同步，无需干预；同时支持对cos 数据的迁移； 不足：只能迁移ReplicatedMergeTree 引擎表，其它表不支持这种方案。

场景三：查询某个表的数据倾斜情况 执行以下SQL查询某个表的数据倾斜情况，其中tablename替换为实际的表名。 SELECT a.count,b.nodename FROM (SELECT count() AS count,xcnodeid FROM tablename GROUP BY xcnodeid) a, pgxcnode b WHERE a.xcnodeidb.nodeid ORDER BY a.count desc; 返回如下类似信息。若各DN上数据分布差小于10%，表明数据分布均衡。若大于10%，则表示数据出现倾斜。 gaussdb>SELECT a.count,b.nodename FROM (select count() as count,xcnodeid FROM staffs GROUP BY xcnodeid) a, pgxcnode b WHERE a.xcnodeidb.nodeid ORDER BY a.count desc; count nodename + 11010 datanode4 10000 datanode3 12001 datanode2 8995 datanode1 10000 datanode5 7999 datanode6 9995 datanode7 10000 datanode8 (8 rows)

本章节主要介绍导入过程存储倾斜即时检测的最佳实践。 导入过程中对DN导入行数进行统计，导入完成后计算倾斜率，超过一定阈值时，立即进行告警。倾斜率通过（DN导入行数最大值DN导入行数最小值）/导入总行数计算。目前，只支持INSERT和COPY导入。 说明 必须设置enablestreamoperatoron，确保计划下发到DN，DN一次性返回导入行数，从而可以在CN计算倾斜率。 使用方法 1.设置参数（表倾斜告警阈值tableskewnesswarningthreshold和表倾斜告警最小行数tableskewnesswarningrows）； −表倾斜告警阈值取值范围0~1，默认值为1，即关闭状态，取其他值时为开启状态。 −表倾斜告警最小行数取值范围0~2147483647，默认值为100,000。当导入总行数超过该值与导入DN数之积时，才可能触发告警，从而不会在小数据量导入的场景进行无意义的告警。 show tableskewnesswarningthreshold; set tableskewnesswarningthreshold xxx; show tableskewnesswarningrows; set tableskewnesswarningrows xxx; 2.执行导入，使用INSERT或者COPY； 3.发现并处理告警，告警信息包括表名、最小行数、最大行数、总行数、平均行数、倾斜率，以及提示信息（检查数据分布或者修改参数）。 WARNING: Skewness occurs, table name: xxx, min value: xxx, max value: xxx, sum value: xxx, avg value: xxx, skew ratio: xxx HINT: Please check data distribution or modify warning threshold

本节主要介绍编辑同步任务 数据复制服务支持编辑实时同步任务的配置信息，包括源库信息、目标库信息。创建实例后，对于如下状态的任务，您可再次编辑并提交同步任务。 创建中 配置 前提条件 已登录数据复制服务控制台。 方式一 步骤 1 在“实时同步管理”页面的任务列表中，选择要修改的任务，单击操作列“编辑”按钮。 步骤 2 进入“源库及目标库”页面，填写源库和目标库信息，单击“下一步”。 步骤 3 在“设定同步”页面，选择编辑同步对象，单击“下一步”。 步骤 4 在“预检查”页面，进行同步任务预校验，校验是否可进行实时同步。 步骤 5 在“任务确认”页面，设置同步任务的启动时间，并确认同步任务信息无误后，单击“启动任务”，提交同步任务。 步骤 6 同步任务提交后，您可在“实时同步管理”页面，查看并管理自己的任务。 方式二 步骤 1 在“实时同步管理”界面，选择指定同步任务，单击任务名称。 步骤 2 单击“进入”，进入“源库及目标库”页面。 步骤 3 执行步骤2到步骤6。

本节主要介绍修改任务信息 灾备任务创建成功后，支持对部分任务信息进行修改，以方便区分和识别灾备任务。 支持可修改的任务信息如下： 任务名称 描述 任务启动时间 前提条件 已登录数据复制服务控制台。 操作步骤 步骤 1 在“实时灾备管理”页面，选择指定的灾备任务，单击任务名称。 步骤 2 进入“基本信息”页签，在“任务信息”模块下，选择需要修改的任务信息。 对于任务名称、描述，可以单击，进行修改。 单击，提交修改。 单击，取消修改。 表 实时灾备任务信息 任务信息 描述 任务名称 任务名称在450位之间，必须以字母开头，不区分大小写，可以包含字母、数字、中划线或下划线，不能包含其他的特殊字符。 描述 描述不能超过256位，且不能包含!<>&'"特殊字符。 对于任务启动时间，当灾备任务为“等待启动”状态时，才可以进行修改。 需要在“任务信息”模块下的“计划启动时间”处，单击“修改”，选择指定时间，单击“确定”即可。 步骤 3 修改完成后，可在“基本信息”页签下查看修改结果。

本节主要介绍查看迁移日志 迁移日志记录了数据迁移过程中的信息，包含告警、错误和提示等类型的信息。迁移过程中，可以通过查看迁移日志信息，帮助您分析系统中存在的问题。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务。 操作步骤 步骤 1 在“实时迁移管理”界面，选中指定迁移任务，单击任务名称。 步骤 2 在“迁移日志”页签，查看当前迁移任务的日志，可以根据“级别”筛选查看内容。 您可查看到日志对应的时间，级别和描述。

本节主要介绍查看灾备数据 灾备数据记录了灾备任务完成的记录，您可以通过该功能，了解灾备的完整性。 数据复制服务支持通过管理控制台查看灾备数据的初始化进度及数据健康报告。 前提条件 已登录数据复制服务管理控制台。 已成功创建数据灾备任务。 操作步骤 说明 任务列表中，仅展示当前登录用户所创建的全部任务，同一租户下的不同用户之间的任务不可见。 步骤 1 在“实时灾备管理”页面，选择指定的灾备任务，单击任务名称。 步骤 2 页面跳转至“基本信息”页签，单击“灾备数据”页签。 初始化进度 仅展示了初次创建灾备环境时，历史数据导入的进度信息，帮助用户了解灾备环境创建进度，完成历史数据导入后，意味着初始化已完成，该模块数据将不再更新。 数据健康报告 支持用户修改对比策略，周期性展示主实例与备实例的数据一致性对比结果，用于帮助用户审视灾备环境的数据健康情况。 只有灾备中的任务才会进行健康对比。 仅保留最近30次健康对比报告。 数据健康报告是为了用户定期且长期掌握主实例与备实例的数据一致性，为避免长期对比对主实例的性能损耗，对于特大表（比如超亿行的表）的对比，建议使用对比灾备项。 修改对比策略 修改对比策略不会影响当前进行的健康对比任务，修改后的设置在下次生效。 1、在“数据健康报告”页签的“健康对比策略”区域，单击“修改对比策略”，进入修改对比策略界面。 2、在“修改对比策略”界面设置各个参数。 开启状态：关闭健康对比策略后，下一次的健康对比将不会再进行，历史健康报告仍可正常查看。 对比频率：提供“每周对比”和“每天对比”两种对比频率。 对比时间：对比频率选择“每周对比”时，可设置周一到周日的一天或多天为对比时间。 时区：默认为本地时区。 生效时间：设置对比策略生效的时间段，建议设置在业务低峰期进行对比。生效时间内未完成健康对比会自动中断，已完成的对比结果仍可查看。 对比类型：默认为行对比+用户对比+对象对比。 3、单击“确定”，完成修改对比策略。 修改成功后，将在生效时间启动对比任务，您可以取消进行中的任务，取消后，已经对比成功的健康报告仍可查看。

本节主要介绍续传灾备任务 灾备过程中可能因外部因素导致灾备暂时故障，用户根据灾备日志信息解决问题后，可以通过续传功能继续灾备，常见场景如存储空间不足。 说明 如果因为非网络原因导致灾备失败，系统默认进行三次自动续传，若三次续传后仍无法恢复灾备，可手动进行续传。 如果因为网络原因导致灾备失败，系统自动续传，直到恢复灾备。 前提条件 已登录数据复制服务控制台。 已成功创建灾备任务，并且灾备失败。 方式一 在“实时灾备管理”页面任务列表中，选择需要启动的任务，单击操作列“续传”，重新提交灾备任务。 方式二 步骤 1 在“实时灾备管理”页面任务列表中，选择需要启动的任务，单击任务名称。 步骤 2 跳转至“基本信息”页签，切换至“灾备进度”页签，单击左上角“续传”，重新提交灾备任务。

本节主要介绍修改流速模式 流速模式支持限速和不限速，默认为不限速。DRS提供创建任务后修改流速模式，目前仅以下实时同步链路支持限速功能： 入云 MySQL>MySQL Oracle>MySQL Oracle>DRDS Oracle>PostgreSQL PostgreSQL>PostgreSQL 出云 MySQL>MySQL 自建自建 说明 限速模式只对全量同步阶段生效，增量同步阶段不生效。 增量阶段修改限速后，待任务再次进入全量阶段会生效。如增量中的任务修改限速，编辑任务新加同步对象后，限速会在同步任务的全量阶段生效。 前提条件 已登录数据复制服务控制台。 已创建同步任务。 方法一 步骤 1 在“基本信息”页签的“同步信息”区域，单击“流速模式”后的“修改”。 步骤 2 在弹出的对话框中修改流速模式。 方法二 步骤 1 在“实时同步管理”页面的同步列表中，选择需要修改流速模式的任务，单击操作列的“更多>限速”，或“限速”。 步骤 2 在弹出的对话框中修改流速模式。

本节主要介绍删除迁移任务 对于备份迁移任务，您可选择删除迁移任务。被删除后的任务将不会再出现在任务列表中，请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 步骤 1 在“备份迁移管理”页面的迁移列表中，选择需要删除的任务，单击操作列的“删除”按钮。 步骤 2 单击“确定”，提交删除任务。

本节主要介绍续传迁移任务 迁移中可能因外部因素导致迁移暂时故障，用户根据迁移日志信息解决问题后，可以通过续传功能继续迁移，常见场景如存储空间不足。 对于以下状态的任务，可以通过续传功能继续迁移任务。 迁移失败 已暂停 说明 如果因为非网络原因导致迁移失败，系统默认进行三次自动续传，若三次续传后仍无法恢复，可手动进行续传。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务，并且迁移失败。 方式一 在“实时迁移管理”页面任务列表中，选择需要启动的任务，单击操作列“续传”，重新提交迁移任务。 方式二 步骤 1 在“实时迁移管理”页面任务列表中，选择需要启动的任务，单击任务名称。 步骤 2 跳转至“基本信息”页签，切换至“迁移进度”页签，单击左上角“续传”，重新提交迁移任务。

本节主要介绍查看灾备日志 灾备日志记录了数据灾备同步过程中的信息，包含告警、错误和提示等类型的信息。数据灾备过程中，可以通过查看灾备日志信息，帮助您分析系统中存在的问题。 前提条件 已登录数据复制服务控制台。 操作步骤 步骤 1 在“实时灾备管理”界面，选中指定灾备任务，单击任务名称。 步骤 2 在“灾备日志”页签，查看当前灾备任务的日志。

本节主要介绍删除同步任务 对于已结束或者配置失败的实时同步任务，您可选择删除同步任务。被删除后的任务将不会再出现在任务列表中，请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 步骤 1 在“实时同步管理”页面的任务列表中，选择要删除的任务，单击“删除”。 步骤 2 单击“确定”，提交删除任务。

本节主要介绍续传同步任务 实时同步中可能因外部因素导致同步暂时故障，用户根据同步日志信息解决问题后，可以通过续传功能继续同步，常见场景如存储空间不足。 对于以下状态的任务，可以通过续传功能继续同步任务。 同步失败 已暂停 说明 如果因为非网络原因导致同步失败，系统默认进行三次自动续传，若三次续传后仍无法恢复，可手动进行续传。 如果因为网络原因导致同步失败，系统自动续传，直到恢复同步。 前提条件 已登录数据复制服务控制台。 方式一 在“实时同步管理”页面任务列表中，选择需要启动的任务，单击操作列“续传”，重新提交同步任务。 方式二 步骤 1 在“实时同步管理”页面任务列表中，选择需要启动的任务，单击任务名称。 步骤 2 跳转至“基本信息”页签，切换至“同步进度”页签，单击左上角“续传”，重新提交同步任务。 批量续传 步骤 1 在“实时同步管理”页面的同步任务列表中，选择需要续传的任务。 步骤 2 单击左上方的“批量操作”，选择“批量续传”。 步骤 3 在弹出的确认对话框中，确认任务信息后，单击“是”，提交续传任务。