本节为您介绍数据库迁移工具提供任务批量删除功能。 数据库迁移工具提供任务批量删除功能，用户可勾选要删除任务，再点击“批量删除”按钮，一次性删除多个迁移任务。 操作步骤 1. 进入“数据库迁移工具”，点击“数据传输”展开菜单，点击“迁移评估”。 2. 勾选要删除的任务，然后点击 “批量删除“按钮，再点击“确定”即可完成任务信息删除。

本文为您介绍访问天翼云云搜索服务Elasticsearch实例的方法和使用场景。 Kibana访问 Elasticsearch实例支持通过Kibana前端可视化界面连接。用户可通过登录页面输入用户名和密码进行访问，默认用户名为admin，密码为创建实例时设置的管理员密码。 Curl命令行方式 在开启安全认证的情况下，用户可以通过Curl命令行与Elasticsearch实例进行交互。例如，可以使用Curl发送HTTP请求来执行各种操作，如创建索引、查询数据、更新文档等。这种方式适合快速测试和管理实例。 Python客户端访问 支持通过官方的Elasticsearch Python客户端（elasticsearchpy）访问实例。Python客户端提供丰富的API，用于查询、索引、删除数据，适合需要通过Python脚本进行大规模数据处理、分析以及自动化管理的场景。 Java客户端访问 提供对Elasticsearch的Java API支持，使用RestHighLevelClient类与实例进行交互。Java客户端广泛应用于企业级Java应用中，适合复杂的集成场景，如与Spring框架结合进行实时搜索和分析。 Go客户端访问 提供轻量且高效的连接方式，适合基于Go语言开发的高并发、低延迟的应用。Go客户端提供对Elasticsearch REST API的完整支持，适合需要高性能和可扩展性的场景。

本文以“CentOS 7.6 64位”操作系统为例,采用fdisk和parted分区工具为扩容后的磁盘分配分区。 操作场景 扩容成功后，需要将扩容部分的容量划分至原有分区内，或者对扩容部分的云硬盘分配新的分区。 本文以“CentOS 7.6 64bit”操作系统为例，采用fdisk和parted分区工具为扩容后的磁盘分配分区。不同操作系统的操作可能不同，本文仅供参考。 为扩容后的磁盘分配分区，您可以根据业务需要以及实际的磁盘情况在以下列表中选择合适的扩容方式，具体如下： 云硬盘 场景 扩容方式 系统盘 扩容的容量划分至原有的MBR分区内 扩大原有MBR分区 系统盘 将扩容的容量划分至新的MBR分区 新增MBR分区 数据盘 将扩容的容量划分至原有的MBR分区或GPT分区内 扩大原有分区（MBR分区或GPT分区） 数据盘 将扩容的容量划分至新的MBR分区或GPT分区内 新增MBR分区或GPT分区 约束与限制 扩容时请谨慎操作，误操作可能会导致数据丢失或者异常，建议扩容前对数据进行备份，推荐使用云硬盘备份。 当磁盘已经投入使用后，请在扩容前务必检查磁盘的分区形式，具体说明如下： 分区形式 注意事项 MBR分区 容量最大支持2TB（2048GB），超过2TB的部分无法使用。 GPT分区 容量最大支持18EB（19327352832GB）。云硬盘服务支持的最大数据盘容量为32TB（32768GB），即您最大可将数据盘扩容至32TB。 MBR分区需扩容至2TB以上 必须将磁盘分区形式由MBR切换成GPT，期间会中断业务，并且更换磁盘分区形式时会清除磁盘的原有数据，请在扩容前先对数据进行备份。

产品架构 通过和其他产品、服务组合，弹性云主机可以实现计算、存储、网络、镜像安装等功能： 弹性云主机在不同可用区中部署（可用区之间通过内网连接），部分可用区发生故障后不会影响同一区域内的其它可用区。 可以通过虚拟私有云建立专属的网络环境，设置子网、安全组，并通过弹性IP实现外网链接（需带宽支持）。 通过镜像服务，可以对弹性云主机安装镜像，也可以通过私有镜像批量创建弹性云主机，实现快速的业务部署。 通过云硬盘服务实现数据存储，并通过云硬盘备份服务实现数据的备份和恢复。 云监控是保持弹性云主机可靠性、可用性和性能的重要部分，通过云监控，用户可以观察弹性云主机资源。 云硬盘备份可为云硬盘创建备份，利用备份数据回滚云硬盘，以最大限度保证用户数据正确性和安全性，确保云硬盘安全。 云主机备份提供对弹性云主机的备份保护服务。支持对弹性云主机中的所有云硬盘（系统盘和数据盘）进行备份，并利用备份数据恢复弹性云主机数据。 图 ECS产品架构 访问方式 公有云提供了Web化的服务管理平台，即管理控制台和基于HTTPS请求的API（Application programming interface）管理方式。 API方式 如果用户需要将公有云平台上的弹性云主机集成到第三方系统，用于二次开发，请使用API方式访问弹性云主机，如有需求，请联系天翼云客户经理。 控制台方式 其他相关操作，请使用管理控制台方式访问弹性云主机。 如果用户已注册公有云，可直接登录管理控制台，从主页选择“弹性云主机”。

本节为您介绍数据迁移工具取消添加任务操作。 1. 点击取消，可以成功取消任务创建，返回任务管理主界面

本章节主要介绍整库同步功能。 前提条件 已拥有数据集成角色权限 完成来源数据源以及目标源源数据源的接入工作。 完成对来源数据源以及目标数据源的元数据采集。 使用限制 来源数据源以及目标数据源完成授权。 来源数据表以及目标数据表完成授权。 来源数据表以及目标数据表完成建模。 使用说明 整库同步任务采用引导式配置方式，一共分为以下5个步骤： 1.新建整库同步任务 2.定义来源端与目标端 3.配置资源队列 4.配置目标表映射 5.调度信息配置 配置过程 第一步：新建整库同步任务 在整库同步任务管理页面，点击新建任务按钮，新建任务。 在弹出的弹窗中，输入任务的基础信息 第二步：定义来源端与目标端 来源端配置 整库同步来源端有两种数据表同步方式 全表同步 全表同步表示将所选的来源库中的所有表同步至目标库中 部分表同步 部分表同步表示将来源库中的部分表同步至目标库中，用户可自行选择需要同步的数据表。 来源配置还包括编码、并发度、每次抽取数据量等。 目标端配置 目标端选择需要存放数据表的数据源，并支持配置写入方式为覆盖或追加。支持压缩格式配置与并发度配置。

本章节介绍如何在控制台下载备份文件。 操作场景 用户可以下载手动备份和自动备份文件，用于本地存储备份或者恢复数据库。 说明 下载备份需要该节点具备OBS商用能力。 操作步骤 步骤 1 登录管理控制台。 步骤 2 单击管理控制台左上角的，选择区域和项目。 步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。 步骤 4 在“备份管理”页面，选择需要下载的可用备份，单击操作列中的“下载”。 您也可进入目标实例的“基本信息”页面，在左侧导航栏选择“备份恢复”，单击操作列中的“下载”。 步骤 5 在弹出框中选择下载方式。 说明 若备份文件大于400MB，建议您使用OBS Broswer下载。 1、在弹出框中，单击“OBS Browser下载”，单击“确定”，通过OBS Browser客户端下载RDS备份文件 。 下载客户端工具OBS Browser。 解压并安装OBS Browser。 登录客户端工具OBS Browser。 登录对象存储客户端相关操作，请参见《对象存储客户端指南》的“登录客户端”章节。 配置OBS Browser不启用证书校验。 配置OBS Browser相关操作，请参见《对象存储工具指南》中“系统配置”的内容。 挂载外部桶相关操作，请参见《对象存储客户端指南》的“配置挂载外部桶”章节。 下载备份文件 在OBS Browser界面，单击添加成功的外部桶的桶名，进入对象列表页面，在右侧搜索栏，输入关系型数据库“下载备份文件”页面中提示的下载备份存储文件名称并检索，选中待下载的文件后，单击“下载”。 备份文件下载完成后，配置OBS Browser启用证书校验。 2、在弹出框中，单击“直接下载”，单击“确定”，通过浏览器直接下载数据库实例的备份文件 。 步骤 6 您可根据业务需要，参考7.5.7 通过备份文件恢复数据(SQL Server)，在本地进行数据恢复。

本文主要介绍OBS的流程简介。 OBS最基础的入门操作包括创建桶、上传对象和下载对象，通过这三个操作就能完成数据上传和下载。 以下章节介绍如何使用OBS管理控制台来完成下图中所示的任务。 1. 注册天翼云帐号，为帐号充值。 2. 除了控制台以外，通过其他方式访问OBS均需要提前获取访问密钥（AK/SK）用以鉴权。 3. 使用SDK、API和obsutil工具时需要提前获取终端节点（Endpoint）。 4. 使用工具（OBS Browser+、obsutil、obsfs）和SDK前，需要先下载对应工具或SDK源码，并进行初始化配置。 5. 桶是OBS中存储对象的容器，在上传对象前需要先创建桶。并行文件系统与OBS桶操作类似。 6. 将文件上传至OBS。并行文件系统与OBS桶操作类似。 7. 从OBS中下载文件。并行文件系统与OBS桶操作类似。 8. 为节省空间和成本，可以删除无用的文件，可以删除单个文件也可以批量删除多个文件。 9. 如果不再需要一个桶，可以将其删除。

本章节帮助用户完成云主机备份任务的创建,快速完成云主机数据保护。 帮助用户完成云主机备份任务的创建，快速完成云主机数据保护。 前提条件 启用数据库服务器备份特性前，已成功安装客户端。该能力仅在部分资源池支持。 如果您想使用弹性云主机的备份创建镜像，请确保弹性云主机在备份前已完成如下操作： Linux弹性云服务器优化并安装Cloudinit工具 Windows弹性云服务器优化并安装Cloudbaseinit工具 注意 建议在业务量较小的时间段执行应用一致性备份。 操作步骤 1. 登录天翼云官网，注册天翼云账号。 2. 登录云主机备份管理控制台。 1. 登录管理控制台。 2. 选择“存储 > 云主机备份”。 3. 在界面右上角单击“创建云主机备份”。 4. 在服务器列表中勾选需要备份的主机以及或磁盘，勾选后将在已勾选服务器列表区域展示，如下图所示。 注意 考虑到恢复后数据的一致性问题，我们推荐您对整个服务器进行备份。若您希望选择部分磁盘备份以节省成本，请尽量确保这些磁盘的数据不受其他未备份磁盘的数据影响，否则可能会导致数据不一致问题。例如，Oracle应用的数据分散在不同磁盘上，如果只备份了部分磁盘，会导致恢复后数据不一致（已备份磁盘恢复到历史时间点数据，未备份磁盘仍保留当前数据），甚至导致应用无法启动。 图 选择服务器 说明 所选云主机的状态必须为“运行中”或“已停止”。 5. 在下方的“备份配置”区域为已选择的云主机配置备份方式，如下图所示。 图 配置备份方式

本节为您介绍云迁移服务CMS中数据迁移工具查看告警操作。 左侧导航栏单击“告警中心”后，可以查看告警列表。

本章节主要介绍节点数据血缘的配置数据血缘。 在DataArts Studio平台，自动分析血缘是通过在数据开发模块中配置数据处理迁移类型的节点产生的，当前支持采集节点静态配置产生的血缘和部分节点实例上的血缘。详情请参见下方 自动分析血缘。 另外，DataArts Studio平台还支持手动配置血缘方式，当用户手动配置血缘时，自动分析血缘将不生效。详情请参见下方 手动配置血缘。 自动分析血缘 自动分析血缘是通过在数据开发模块中配置数据处理迁移类型的节点产生的，当作业中包含如下节点时，系统支持自动解析血缘。 SQL类型节点 DataArts Studio目前支持对DLI SQL、DWS SQL和MRS Hive SQL节点的血缘解析，可以支持多SQL解析及列级血缘解析，当语句中有临时表时，会自动在数据目录中创建相关的临时表实体。 − DLI SQL 支持解析DLI中表与表之间数据插入产生的血缘。 支持通过建表语句产生的OBS文件到DLI表之间的血缘。 − DWS SQL 支持Create table like/as等DDL操作产生的DWS表之间的血缘。 支持Insert into等DML操作产生的DWS表之间的血缘。 − MRS Hive SQL 支持Create table like/as等DDL操作产生的MRS表之间的血缘。 支持Insert into/overwrite等DML操作产生的MRS表之间的血缘。 数据集成类型节点 目前支持对CDM Job节点、ETL Job节点和OBS Manager节点的血缘解析。 − CDM Job 支持MRS Hive、DLI、DWS、RDS、OBS以及CSS之间表文件迁移所产生的血缘。 − ETL Job 支持DLI、OBS、MySQL以及DWS之间的ETL任务产生的血缘。 − OBS Manager 支持OBS之间目录和文件复制迁移产生的血缘。 说明 当前血缘解析能力，单条sql语句不支持sql中含有分号的场景。

本文为您介绍天翼云CLI工具的核心功能 终端多种云资源管控 支持在终端环境执行命令，完成云主机、VPC、存储等多种天翼云产品的创建、配置、查询、销毁操作。 您可在命令行中，通过以下指令，查询天翼云CLI支持的产品列表： python ctyuncli help 列出所有产品 内置鉴权封装，简化 API 调用 无需手动处理接口签名、身份校验、请求报文组装等底层逻辑，一条命令即可调用天翼云开放 API，相比直接对接原生 OpenAPI 大幅降低使用门槛。 多格式结构化数据输出 table 格式可视化展示资源列表，终端查看信息清晰直观； JSON 结构化输出便于程序读取解析，适配后续自动化处理与工具对接。 标准化 AI 智能体调用入口 可作为标准 Tools 对接各类大模型 Agent 框架，Agent 能够直接下发 CLI 命令调用天翼云 API，无需手动封装鉴权、请求逻辑，快速搭建 AI 驱动的智能云上调度流程。

本节主要介绍物理机或其他公有云主机迁移至天翼云ECS 当需要实现物理机的上云迁移，把物理机迁移至天翼云ECS；或者把其他公有云主机迁移至天翼云ECS时，可以采用RDA主机迁移服务实现源端服务器到天翼云ECS的快速迁移。本章节主要介绍将物理机或其他公有云主机迁移至天翼云ECS的迁移场景和操作步骤。 测试资源准备 开通相关资源，建立迁移链路并测试连通性。获取迁移目的端所在账号的AK/SK。 RDA工具安装和配置 参考用户指南完成RDA工具的安装和配置。 待迁移主机添加配置 在RDA控制台完成源端主机资源添加，完成性能采集（可选）。 数据迁移 配置目的端，推送agent并创建启动迁移任务。在线迁移，增量同步。 割接校验 停止源端应用并进行最后一次增量迁移，完成后进行业务割接校验。

产品优势 低成本：分层存储 对象存储承载向量数据的持久化与无限扩展，本地 SSD 缓存与内存索引承载活跃数据。系统按访问模式自动完成三层之间的调度，低频数据长期低成本留存，高频查询保持毫秒级检索性能，契合 AI Agent 与 SaaS 应用中“高用户量、小规模、低频查询”的业务形态。 高扩展：存算分离与横向扩展 存算分离：向量数据统一持久化在共享对象存储层，计算节点仅承载索引与查询逻辑，数据与计算状态解耦。任一计算节点均可直接访问全量数据，无需局部数据迁移，天然适配 Serverless 部署，计算资源可随查询负载独立扩缩。 横向扩展：接入层为去中心化无状态网关，按请求压力实时扩容；存储层读写分离，读写链路调度至独立节点组分别伸缩；多池化架构以数据池为粒度划分冗余与故障隔离边界，在提供全局扩展能力的同时缩小故障域。 安全可靠：多维权限控制 桶、索引、向量默认私有，仅资源所有者可访问。所有者可通过访问策略将特定资源授权给其他用户，权限粒度细化至桶级或索引级，支持 IAM 策略和桶策略两类授权方式。 IAM 策略：由天翼云 IAM 服务提供，面向所有云服务，按用户或角色授权，覆盖桶、索引及服务级权限。 桶策略：面向桶及桶内索引、向量，定义被授权用户允许或拒绝的操作，支持复杂策略组合。 广兼容：多语言 SDK 提供 Python、Go 等主流开发语言的 SDK 封装接口，可直接集成到现有应用，降低二次开发与系统对接成本。 简便运维：配额管理 支持对桶容量和桶内索引数量设置配额上限，避免资源超用，便于容量规划与成本控制。

本文介绍云容器引擎Serverless版的产品优势。 开箱即用 一键创建 Kubernetes 集群、直接部署应用程序，无需管理Kubernetes节点和服务器。 原生兼容 提供完善的Kubernetes兼容能力，支持原生Kubernetes应用和生态，可以轻松迁移已有的Kubernetes应用程序。 安全隔离 Pod基于弹性容器实例ECI服务运行，实现了安全隔离的容器运行环境，避免了容器实例间相互影响的问题。 降低成本 提供按需创建、按量计费的模式，避免了不必要的资源浪费和成本费用，同时Serverless也大大降低了运维成本。 服务集成 支持与天翼云基础服务无缝集成，可以使用一体化控制台高效操作。

本章节主要介绍如何使用Data Studio图形界面客户端连接集群。 Data Studio是一款运行在Windows操作系统上的SQL客户端工具，有着丰富的GUI界面，能够管理数据库和数据库对象，编辑、运行、调试SQL脚本，查看执行计划等。在DWS 管理控制台下载Data Studio软件包，解压后免安装即可使用。 DataStudio可供下载的版本分为“Windows x86”和“Windows x64”两种版本，分别支持32位和64位Windows操作系统。 连接集群前的准备 已获取DWS集群的数据库管理员用户名和密码。 已获取DWS集群的公网访问地址，含IP地址和端口。具体请参见获取集群连接地址。 已配置DWS集群所属的安全组，添加入规则允许用户的IP地址使用TCP访问端口。 具体请参见《虚拟私有云用户指南》中“安全性 > 安全组 > 添加安全组规则”章节。 使用Data Studio连接到集群数据库 1. DWS 提供了基于Windows平台的Data Studio图形界面客户端，该工具依赖JDK，请先在客户端主机上安装JDK。 须知 仅支持Java 1.8版本的JDK。 在Windows操作系统中，您可以访问JDK官方网站，下载符合操作系统版本的JDK，并根据指导进行安装。 2. 登录DWS 管理控制台。 3. 单击“连接管理”。 4. 在“下载客户端和驱动”页面，下载“Data Studio图形界面客户端”。 请根据操作系统类型，选择“Windows x86”或“Windows x64”，再单击“下载”，可以下载与现有集群版本匹配的Data Studio工具。 如果同时拥有不同版本的集群，单击“下载”时会下载与集群最低版本相对应的Data Studio工具。如果当前没有集群，单击“下载”时将下载到低版本的Data Studio工具。DWS 集群可向下兼容低版本的Data Studio工具。 单击“历史版本”可根据集群版本下载相应版本的Data Studio工具，建议按集群版本下载配套的工具。 5. 解压下载的客户端软件包（32位或64位）到需要安装的路径。 6. 打开安装目录，双击Data Studio.exe，启动Data Studio客户端，如下图所示。 说明 若您的电脑阻止应用运行，可对Data Studio.exe文件属性勾选解除锁定即可启动。 7. 在主菜单中选择 “文件>新建连接” ，如下图所示。 8. 在弹出的“新建/选择数据库连接”页面中，如下所示，输入连接参数。 配置连接参数 字段名称 说明 举例 数据库类型 选择“GaussDB A” GaussDB A 名称 连接名称。 dwsdemo 主机 所要连接的集群IP地址（IPv4）或域名。 端口号 数据库端口。 8000 数据库 数据库名称。 gaussdb 用户名 所要连接数据库的用户名。 密码 所要连接数据库的登录密码。 保存密码 在下拉列表中选择： “仅当前会话”：仅在当前会话中保存密码。 “不保存”：不保存密码。 启用SSL 启用时，客户端将使用SSL加密连接方式。SSL连接方式安全性高于普通模式，建议开启。 当“启用SSL”设置为开启时，请先参见使用SSL进行安全的TCP/IP连接章节下载SSL证书，并解压证书文件。然后单击“SSL”页签，设置如下参数。 配置SSL参数 字段名称 说明 客户端SSL证书 选择SSL证书解压目录下的“sslcertclient.crt”文件。 客户端SSL密钥 客户端SSL秘钥只支持PK8格式，请选择SSL证书解压目录下的“sslcertclient.key.pk8”文件。 根证书 当“SSL模式”设为“verifyca”时，必须设置根证书，请选择SSL证书解压目录下的“sslcertcacert.pem”文件。 SSL密码 客户端pk8格式SSL秘钥密码，默认密码为“Gauss@MppDB”。 SSL模式 DWS支持的SSL模式有： require verifyca DWS不支持“verifyfull”模式。 9. 单击“确定”建立数据库连接。 如果启用了SSL，在弹出的“连接安全告警”提示对话框中单击“继续”。 登录成功后，将弹出“最近登录活动”提示框，表示Data Studio已经连接到数据库。用户即可在Data Studio界面的“SQL终端”窗口中执行SQL语句。 Data Studio中执行增删改查操作后不支持回滚数据。

本章节主要介绍任务运维功能。 管理数据集成、数据研发、数据治理模块生成的代码任务，同时可以查看和管理任务及其上下游依赖任务的状态，包含周期任务和手动任务。 周期任务 存放并管理调度系统按照调度配置自动定时运行的任务，可对周期任务进行查看实例、查看任务血缘、补数据、暂停、增删改查等操作进行管理 周期任务血缘图 单击周期任务操作栏的血缘图按钮，会弹出新的画布页面为您展示以当前任务为中心节点的血缘图。血缘图支持可视化动态呈现该节点的上下游依赖关系，默认展示当前任务（选中节点）及上下游第一层节点。如果周期任务没有上下游节点，则血缘图仅展示当前任务一个节点。 同时，您也可以调整周期任务血缘图页面范围；以下以某个周期任务为例： 编号区域 描述 ①任务信息 展示当前选中任务的概要信息。如：任务名称、调度周期、优先级、运维负责人等内容展示，你还可以点击查看实例，跳转到这个任务的实例列表页。 ②画布调整区 可以快捷调整画布的内容展示层级、大小、全屏等 展示层级：默认为1层，展示的是以当前节点的上下游第一层节点。 缩小：缩小画布中的元素显示比例。 放大：放大画布中的元素显示比例。 居中：画布中的元素基于画布进行居中展示。 全屏：全屏显示画布内容。 ③任务依赖关系图 展示实例的调度依赖关系图，支持向上向下展开更多节点；如果周期任务没有任务依赖关系，则图展示只有一个此任务的节点。

本节介绍了数据库迁移相关问题与处理方法。 TaurusDB支持导入哪些数据库引擎的数据 相同引擎数据库之间数据导入导出，称之为同构型数据库之间数据导入导出。 不同引擎数据库之间数据导入导出，称之为异构型数据库之间数据导入导出。例如，从Oracle导入数据到TaurusDB支持的数据库引擎。 异构型数据库之间由于格式不同，不支持直接导入导出。但只要导入导出的格式数据兼容，理论上，导入表数据也是可行的。 异构型数据库之间数据导入导出，一般需要第三方软件，通过数据复制的方式来实现。比如，先使用工具从Oracle中，以文本的格式导出表记录，然后利用Load语句导入到支持的数据库引擎。

快照 系统通过快照技术，快速备份数据。快照包含HBase快照、HDFS快照快照。 HBase快照 HBase快照是HBase表在特定时间的一个备份，该备份文件不复制业务数据，不影响RegionServer。HBase快照主要复制表的元数据，包含table descriptor，region info和HFile的引用信息。通过这些元数据信息可以恢复快照时间点之前的数据。 HDFS快照 HDFS快照是HDFS文件系统在特定时间点的只读备份副本，主要用于数据备份、用户误操作保护和灾难恢复的场景。 任意HDFS目录均可以配置启用快照功能并创建对应的快照文件，为目录创建快照前系统会自动启用此目录的快照功能。创建快照不会对正常的HDFS操作有任何影响。每个HDFS目录最多可创建65536个快照。 如果一个HDFS目录已创建快照，那么在快照完全删除以前，此目录无法删除或修改名称。该目录的上级目录或子目录也无法再创建快照。 DistCp DistCp（distributed copy）是一个用于在本集群HDFS中或不同集群HDFS间进行大量数据复制的工具。在HBase、HDFS或Hive元数据的备份恢复任务中，如果选择将数据备份在备集群HDFS中，系统将调用DistCp完成操作。主备集群请选择安装相同版本的MRS软件版本并安装集群系统。 DistCp使用Mapreduce来影响数据的分布、异常处理及恢复和报告，此工具会把指定列表中包含的多个源文件和目录输入不同的Map任务，每个Map任务将复制列表中指定文件对应分区的数据。 使用DistCp在两个集群的HDFS间进行数据复制，集群双方需要分别配置互信（同一个FusionInsight Manager管理下的集群不需要配置互信）和启用集群间拷贝功能。集群数据备份到另一个集群的HDFS时，需要安装Yarn组件，否则备份失败。

本文主要介绍基于天翼云弹性文件服务,如何在同账号不同资源池之间实现弹性文件系统之间的数据迁移。 应用场景 本文适用于同账号不同资源池文件系统之间的数据迁移。例如当您需要将业务从 A 省迁移至 B 省的资源池，以提高访问效率。本文以北京5资源池和上海7资源池的 Linux 云主机为背景，提供操作指导。 前提条件 已拥有两个 NFS 协议的弹性文件系统； 准备一台与源文件系统在同一 VPC 网络下的弹性云主机和一台与目标文件系统在同一 VPC 网络下的弹性云主机，并为这两台弹性云主机配置弹性 IP，以实现基于公网的数据迁移。 两个资源池的文件系统分别作为源文件系统和目标文件系统，源文件系统指含业务数据的源文件系统，目标文件系统指即将投入使用的新文件系统。 准备工作 北京5资源池和上海7资源池分别创建一个文件系统和一台弹性云主机，具体操作请参考创建文件系统、创建弹性云主机。 将不同资源池中的文件系统分别挂载至对应资源池的弹性云主机上，具体操作请参考挂载NFS文件系统到弹性云主机 (Linux)。 操作步骤 不同资源池的两个弹性文件系统之间的数据迁移可以分为几个关键步骤： 挂载文件系统 > 安装迁移工具 >迁移存量数据> 迁移增量数据源> 迁移结果检查 。具体操作步骤如下： 1. 将两个资源池的弹性文件系统分别挂载到对应云主机 将弹性文件系统挂载至云主机中，这里设定上海7为源文件系统，将其挂载到同一资源池弹性云主机的“/mnt/localpath/”目录上，北京5为目标文件系统，同样将其挂载到同一资源池的弹性云主机的 “/mnt/localpath/”目录上。 2. 安装迁移工具 执行以下命令安装 rsync 命令工具： plaintext yum install y rsync 3. 迁移存量数据 执行以下命令，将上海7弹性文件系统中的数据迁移到北京5中： plaintext rsync avP /mnt/localpath/ root@IP:/mnt/localpath/ 我们还可以利用 rsync 并发拷贝迁移数据，由于并发操作，每个 ssh 连接操作均要求输入密码，因此在并发迁移数据过程中会要求多次输入密码，这里我们配置无需密码通过 ssh 执行 rsync 来迁移文件。在上海7中的弹性云主机中执行 sshkeygen 命令生成密钥，之后使用 sshcopyid 将公钥拷贝至北京5的弹性云主机，执行以下命令： plaintext sshkeygensshcopyid i ~/.ssh/idrsa.pub IP 执行以下命令，实现并发数据迁移： plaintext threads ; src ; dest ; rsync av f"+ /" f" " $src $dest && (cd $src && find . type f print0 xargs 0 n1 P$threads I% rsync av % $dest/%) 4. 迁移增量数据 执行以下命令，实现增量数据的迁移： plaintext rsync avP delete /mnt/localpath/ root@IP:/mnt/localpath/ 5. 检查迁移结果 在完成数据迁移后，执行以下命令： plaintext rsync rvn /mnt/localpath/ root@IP:/mnt/localpath/ 如果源文件系统与目标文件系统数据一致，则应显示上面信息，中间不包含任何文件路径。

本章主要介绍翼MapReduce的启用集群间拷贝功能。 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时，需要使用DistCp工具。DistCp工具依赖于集群间拷贝功能，该功能默认未启用。拷贝数据的集群双方都需要配置。 管理员可以根据以下指导，在FusionInsight Manager修改参数以启用集群间拷贝功能。启用之后即可创建将数据备份至远端HDFS（RemoteHDFS）的备份任务。 对系统的影响 启用集群间复制功能需要重启Yarn，服务重启期间无法访问。 前提条件 拷贝数据的集群的HDFS的参数“hadoop.rpc.protection”需使用相同的数据传输方式。默认设置为“privacy”表示加密，“authentication”表示不加密。 对于安全模式的集群，集群之间需要配置系统互信。 操作步骤 1.登录其中一个集群的FusionInsight Manager。 2.选择“集群 > 待操作集群的名称 > 服务> Yarn > 配置”，单击“全部配置”。 3.左边菜单栏中选择“Yarn > 集群间拷贝”。 4.修改参数“dfs.namenode.rpcaddress”，在“haclusterX.remotenn1”右侧填写对端集群其中一个NameNode实例的业务IP和RPC端口，在“haclusterX.remotenn2”右侧填写对端集群另外一个NameNode实例的业务IP和RPC端口。 “haclusterX.remotenn1”和“haclusterX.remotenn2”不区分主备NameNode。NameNode RPC端口默认为“8020”，不支持通过Manager修改。 修改后参数值例如：“10.1.1.1:8020”和“10.1.1.2:8020”。 说明 如果本集群数据要备份至多个集群的HDFS中，可以继续配置对应的NameNode RPC地址至haclusterX1、haclusterX2、haclusterX3、haclusterX4。 5.单击“保存”，并在确认对话框中单击“确定”。 6.重启Yarn服务。 7.登录另外一个集群的FusionInsight Manager，重复2~6。

产品优势 对比 SDK 与原生 OpenAPI，天翼云 CLI 无需搭建开发环境、不用编写大量业务代码，仅通过简易脚本即可实现批量操作；工具内置 API 鉴权、请求封装能力，省去底层接口适配工作，同时支持 table/JSON 格式输出，批量数据查看、二次处理更便捷，大幅降低批量自动化运维的上手与落地成本。

前提条件 创建私有镜像前，请您务必执行以下操作： 请将云主机中的敏感数据删除后再创建私有镜像，避免数据安全隐患。 确保云主机处于运行中或关机状态。 检查云主机的网络配置，确保网卡属性为DHCP方式，按需开启远程桌面连接功能。详情请参见设置网卡属性为DHCP（Windows）和开启远程桌面连接功能。 有些云主机正常运行或者高级功能依赖某些驱动，例如：GPU加速型云主机依赖Tesla驱动和GRID/vGPU驱动。因此，需要提前安装特殊驱动。详情请参见安装Windows特殊驱动。 检查云主机中是否已安装一键式重置密码插件，保证镜像创建的新云主机可以使用控制台的“重置密码”功能进行密码重置。详情请参见安装一键式重置密码插件（Windows）。 检查云主机中是否已安装CloudbaseInit工具，保证镜像创建的新云主机可以使用控制台的“用户数据注入”功能注入初始化自定义信息（例如为云主机设置登录密码）。详情请参见安装并配置CloudbaseInit工具。 检查并安装PV driver和UVP VMTools驱动，确保镜像创建的新云主机同时支持KVM虚拟化和XEN虚拟化，并且可以提升云主机网络性能。 详细操作请参见优化过程（Windows）中的步骤2~步骤5。 执行Sysprep操作，确保镜像创建的新云主机加入域后SID唯一。对于集群部署场景，SID需要保持唯一。详情请参见执行Sysprep。 说明 如果待创建私有镜像的云主机使用的是公共镜像，那么默认已安装一键式重置密码插件和CloudbaseInit工具，指导中均提供了验证是否安装的方法，您可以参考相应内容确认。

本文为您介绍分布式消息服务MQTT常用业务应用场景。 分布式消息服务MQTT广泛应用于移动互联网以及物联网领域，包括智能抄表、智能家居、即时聊天等多种应用场景。 智能抄表 电表、水表、燃气表已是每个家庭必备，集成消息队列 MQTT 系统后，再无需进行人工抄表，所有住户的用电、用水、燃气、供暖数据都可由数据后台一键抄取，省时省力避免上门催收的尴尬，助力能源管理部门提供更优质服务。 智能家居 通过门监测住户出入行为，同时结合实时气温与时间，控制空调、灯具、电视机、音箱等的启动和关闭。 即时聊天 MQTT作为一种轻量级、可扩展的通信协议，提供了一种可靠的、实时的消息传递机制，使得即时聊天应用能够高效地处理用户之间的实时通信需求，为实时通信提供了有效的解决方案。

镜像文件属性 条件 操作系统 Windows Server 2008相关版本、Windows Server 2012相关版本、Windows Server 2016相关版本 支持32位和64位 操作系统不能与特定的硬件绑定 操作系统必须支持全虚拟化 所支持的操作系统版本请参考 镜像格式 VMDK、VHD、QCOW2、RAW、VHDX、QED、VDI、QCOW、ZVHD2和ZVHD 镜像大小 镜像大小不超过128GB。 网络能力 必选项，不设置会导致云主机启动异常或网络能力异常，包括： 可选项，即增值能力，主要包括： 开启网卡多队列 开启网卡多队列功能可以将网卡中断分散给不同的CPU处理，实现负载均衡，从而提升网络PPS和带宽性能。操作方法请参考 工具 强烈建议安装CloudbaseInit工具。 CloudbaseInit是开源的云初始化工具，使用安装了CloudbaseInit的镜像创建云主机时可以通过“用户数据注入”功能，注入初始化自定义信息（例如为云主机设置登录密码）；还可以通过查询、使用元数据，对正在运行的云主机进行配置和管理。不安装CloudbaseInit工具，将无法对云主机进行自定义配置，只能使用镜像原有密码登录云主机。 安装方法请参考 插件 为了保证使用私有镜像创建的新云主机可以实现一键式重置密码功能，建议您在创建私有镜像前安装密码重置插件CloudResetPwdAgent。详情请参见 驱动 其他限制 暂不支持创建带有数据盘的镜像，镜像文件中必须只能包含系统盘，且系统盘大小范围为：[40GB, 1024GB] 镜像文件的初始密码至少包含以下4种字符：大写字母、小写字母、数字、特殊字符（!@$%^+[{}]:,./?） 镜像启动分区和系统分区必须包含在同一个磁盘中。 外部镜像文件必须包含可用的Administrator账号和密码。

产品优势 低成本：分层存储 对象存储承载向量数据的持久化与无限扩展，本地 SSD 缓存与内存索引承载活跃数据。系统按访问模式自动完成三层之间的调度，低频数据长期低成本留存，高频查询保持毫秒级检索性能，契合 AI Agent 与 SaaS 应用中“高用户量、小规模、低频查询”的业务形态。 高扩展：存算分离与横向扩展 存算分离：向量数据统一持久化在共享对象存储层，计算节点仅承载索引与查询逻辑，数据与计算状态解耦。任一计算节点均可直接访问全量数据，无需局部数据迁移，天然适配 Serverless 部署，计算资源可随查询负载独立扩缩。 横向扩展：接入层为去中心化无状态网关，按请求压力实时扩容；存储层读写分离，读写链路调度至独立节点组分别伸缩；多池化架构以数据池为粒度划分冗余与故障隔离边界，在提供全局扩展能力的同时缩小故障域。 安全可靠：多维权限控制 桶、索引、向量默认私有，仅资源所有者可访问。所有者可通过访问策略将特定资源授权给其他用户，权限粒度细化至桶级或索引级，支持IAM策略和桶策略两类授权方式。 IAM 策略：由天翼云 IAM 服务提供，面向所有云服务，按用户或角色授权，覆盖桶、索引及服务级权限。 桶策略：面向桶及桶内索引、向量，定义被授权用户允许或拒绝的操作，支持复杂策略组合。 广兼容：多语言 SDK 提供 Python、Go 等主流开发语言的 SDK 封装接口，可直接集成到现有应用，降低二次开发与系统对接成本。 简便运维：配额管理 支持对桶容量和桶内索引数量设置配额上限，避免资源超用，便于容量规划与成本控制。

工具介绍 使用开源Redis自带的压测工具redisbenchmark进行性能测试，它是Redis官方的性能测试工具，可以有效地测试Redis服务的性能。 下面是对Redis进行SET和GET命令的压测命令例子。 redisbenchmark h ${host} p ${port} a ${password} c ${connection} n ${requestnum} d ${datasize} r 1000000000 t set,get threads ${threads} 参数说明如下： 参数 说明 h Redis实例的内网连接地址。 p Redis实例的服务端口，默认为6379。 a Redis实例的密码。 c 并发执行的连接数量。 n 测试的总请求数量，可设置较大的值以持续压测。 t 测试的命令，例如SET、GET等。多个命令可以用逗号隔开。 d 命令（SET等）所操作的值的数据大小，单位为字节（Byte）。 r 使用的Key的随机范围，即使用多少个不同Key。 threads 启动多线程压测，并指定线程个数。 更详细的redisbenchmark说明可以自行参考官方文档或执行redisbenchmark h命令查看。 安装方法 使用预编译好的工具(仅限Linux x8664操作系统) 1. 下载安装包并上传到机器上： redis724.tar.gz 2. 在安装包所在的目录，执行下面的命令即可完成安装： tar zxf redis724.tar.gz ; chmod R 700 ./redis724 ; bash ./redis724/env.sh ; source ~/.bashrc

本章节主要介绍天翼云物理机的成本优势、性能优势、安全可靠、高效部署、快速响应、灵活组网、高可靠存储等。 成本优越 天翼云物理机： 以租用的方式提供，与公有云产品无缝连接，高可用，易扩展，只需支付实例费用，免安装免运维，无需投入大量资金。 传统IDC物理机： 功能单一，扩展性差，需投入大量人力成本和物料成本，包括服务器、系统、数据库等软硬件费用，及机房机柜费用和运维成本。 性能卓越 采用市场主流硬件设备，并继承传统物理服务器特性，为用户提供专属的物理机稳定性能，无虚拟化开销和性能损失，100%释放算力资源。 结合天翼云全新分布式4.0架构，基于深度学习智能调度引擎，超大规模部署，支持高带宽、低时延云存储、云网络访问性能，带宽最高可达10Gbits，时延低至25us等；满足企业数据库、大数据、容器、HPC、AI等关键业务部署密度和性能诉求。 安全可靠 不同用户全面资源隔离，用户独享计算资源，数据安全有保障。 支持VPC、安全组隔离；支持主机安全相关组件集成。 支持云磁盘作为系统盘和数据盘，支持硬盘备份恢复能力；支持对接专属存储，满足企业数据安全和监管的业务安全和可靠性诉求。

本章节主要提供工具指南的预览和下载。 点此预览、下载：《数据仓库服务工具指南》

本章节主要介绍DataArts Studio的开发一个Python脚本流程。 本章节介绍如何在数据开发模块上开发并执行Python脚本示例。 环境准备 已开通弹性云主机，并创建ECS，ECS主机名为“ecsdgc”。 说明 本示例主机选择“CentOS 8.0 64bit with ARM(40GB)”的公共镜像，并且使用ECS自带的Python环境，您可登陆主机后使用python命令确认服务器的Python环境。 已开通数据集成增量包，CDM集群名为“cdmdlfpyhthon”，提供数据开发模块与ECS主机通信的代理。 请确保ECS主机与CDM集群网络互通，互通需满足如下条件： − CDM集群与ECS主机同区域情况下，同虚拟私有云、同子网、同安全组的不同实例默认网络互通；如果同虚拟私有云但是子网或安全组不同，还需配置路由规则及安全组规则，配置路由规则请参见《虚拟私有云》帮助文档中的“添加路由信息”章节，配置安全组规则请参见《虚拟私有云》帮助文档中的“安全组 > 添加安全组规则”章节。 − CDM集群与ECS主机处于不同区域的情况下，需要通过公网或者专线打通网络。通过公网互通时，需确保CDM集群已绑定EIP，数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 − 此外，您还必须确保该ECS主机与CDM集群所属的企业项目必须相同，如果不同，需要修改工作空间的企业项目。

本章节介绍注册中心迁移方案 MSE Nacos Sync迁移方案 本文介绍基于Nacos Sync 注册中心的迁移方案。 迁移方案简介 Nacos sync 是一个支持多种注册中心的同步组件，目前支持Nacos 和ZooKeeper 注册中心 的双向同步，另外还支持Eureka 和Consul数据同步到Nacos。 迁移工具介绍 在迁移过程中，Nacos sync能够将源集群上的服务信息同步到目标集群实例上，从而实现配置中心之间的平滑迁移。 Nacos Sync 本身是无状态的，将任务等状态数据保存在数据库中，所以水平扩展非常方便。Nacos Sync 通过定时任务补偿机制处理宕机节点未处理完毕的任务数据。注册配置中心实例已经内置同步工具，无需用户额外安装，迁移方法可以参考章节：迁移上云。 Nacos Sync适配ZooKeeper、Nacos和Eureka 的服务注册逻辑，能够实现从ZooKeeper、Nacos和Eureka 自动获取服务，一键同步，操作非常简单。 支持的注册中心类型 源注册中心 目标注册中心 说明 Nacos Nacos Nacos原生服务类型。 ZooKeeper Nacos 基于Curator实现的服务发现功能和Dubbo服务。 ZooKeeper ZooKeeper 服务和配置。 Eureka Nacos Eureka原生服务类型。Eureka原生服务名为大写，但Nacos Sync会将服务名转换成小写。 从Dubbo Nacos迁移到MSE 本文介绍如何从Dubbo+Nacos 迁移服务到MSE。

本节为您介绍云迁移服务CMS中数据库迁移工具提供任务删除功能。 数据库迁移工具提供任务删除功能，用户可通过点击评估任务的“删除”按钮，删除评估任务。 操作步骤 1. 进入“数据库迁移工具”，点击“数据传输”展开菜单，点击“迁移评估”。 2. 点击“删除”按钮，并点击“确定“按钮，即可完成任务信息删除。