数据集成工具_数据集成工具文档介绍内容-天翼云

跨区域复制简介
由于业务原因,您需要将OBS数据从一个区域的数据中心迁移至另一个区域的数据中心。出于对数据安全性以及可用性的考虑,您希望对所有写入OBS的数据,都在另一个区域的数据中心显式地创建一个备份,以防止在数据发生不可逆损毁时,有安全、可用的备份数据。约束与限制在使用跨区域复制过程中,存在如下的约束与限制: 桶版本限制桶版本号为3.0及以上的桶支持跨区域复制功能。桶版本号可以在OBS管理控制台上,进入桶概览页后,在“基本信息”中查看。

来自：
帮助文档
对象存储
用户指南
跨区域复制
跨区域复制简介
新建维度表
主要参数说明如下: 填写参数参数说明数据源需通过集群注册Hive组件,且在引擎管理中将集群与调度资源组绑定,系统自动生成内置的Hive数据源,如果有多个,下拉单选。数据库名该数据源下已创建的数据库,下拉单选。表物理类型表的物理类型。存储格式必选,下拉单选,默认值为:ORC;可选项为:TextFile、SequenceFile、Parquet、ORC、Avro、RCFile。

来自：
帮助文档
大数据管理平台 DataWings
用户指南
数据建模
规范建模
维度建模
可视化建模
新建维度表
SQL操作
删除行:删除选中行包括数据信息。导出:支持SQL格式和CSV格式导出,最多支持1万行数据。导出更多:若用户需要导出超出1万行的数据,单击此处会跳转到数据导出模块,方便用户使用导出功能。说明结果集涉及到视图时,不可进行编辑操作。结果集类型为元数据时,不可进行编辑或分页操作结果集涉及多张表时,不可进行编辑操作结果集仅涉及1张表,但该表主键列未全部包含在查询结果中时或无主键时,不可进行编辑操作。虚表不能进行编辑操作(例如存储过程执行中生成的表)。

来自：
帮助文档
数据管理服务
用户指南
MySQL数据库管理（开发工具）
SQL操作
安全方案
数据容灾:在RocketMQ中,数据容灾是指保护消息数据免受损失的能力。RocketMQ支持配置多个副本,将消息数据复制到不同的节点上。这样即使某个节点发生故障,其他副本仍然可以提供数据服务,确保消息数据的可用性。支持TLS传输加密客户端可以设置TLS或非TLS连接。如下图所示: 权限控制权限控制主要为 RocketMQ 提供 Topic 资源级别的高级访问控制功能。

来自：
帮助文档
分布式消息服务RocketMQ
产品简介
安全方案
新建复合指标
说明如果系统中已有的编码和模板中的编码相同,系统则认为是数据重复。 − 不更新:当数据重复时,不会替换系统中原有的数据。 − 更新:当数据重复时系统中的原有数据为草稿状态,则会覆盖生成新的草稿数据。系统中的原有数据为发布状态,则会生成下展数据。单击“添加文件”,选择编辑完成的导入模板。单击“上传文件”,上传完成后,自动跳转到“上次导入”页签,查看已导入的数据。单击“关闭”。导出复合指标可通过导出的方式将复合指标导出到本地。在复合指标列表选中待导出的指标。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据架构
指标设计
技术指标
新建复合指标
配置迁移实例
在实例配置第一个步骤的【配置源库及目标库信息】页面,填入源库与目标库的相关配置信息,包括数据库类型、IP地址端口、数据库账号、数据库密码等信息,根据“数据库来源”和实例的选择,动态展示“打通网络配置”所需要操作的流程,包括公网、VPC、对等连接等操作。完成上述信息的填写并完成网络打通后,点击源数据库和目标数据库的“测试连接”按钮进行数据库连接测试,检查数据库能否正常连接。 5、进入下一步,选择待迁移对象。

来自：
帮助文档
数据传输服务DTS
用户指南
数据迁移
实例配置和实例编辑
配置迁移实例
本地磁盘存储
数据存储挂载到容器上的路径。请不要挂载在系统目录下,如“/”、“**/var/run”**等,会导致容器异常。建议挂载在空目录下,若目录不为空,请确保目录下无影响容器启动的文件,否则文件会被替换,导致容器启动异常,工作负载创建失败。注意挂载高危目录的情况下 ,建议使用低权限帐号启动,否则可能会造成宿主机高危文件被破坏。权限:只读:只能读容器路径中的数据卷。读写:可修改容器路径中的数据卷,容器迁移时新写入的数据不会随之迁移,会造成数据丢失。

来自：
帮助文档
云容器引擎
用户指南
存储管理
本地磁盘存储
初始化
否表4 请求参数mdm说明(仅集群版支持)参数类型描述是否必须ipString元数据管理服务的地址(仅集群版支持)。如果指定元数据管理服务的地址,必须同时指定集群中的2个IP地址。取值:IPv4或[IPv6]地址。否metaDirString元数据服务的数据目录(仅集群版支持),用于存储元数据服务的相关数据信息。说明为了提升读写性能,建议元数据服务的数据目录与安装目录、存储数据的数据目录分开。取值:数据目录名不能含逗号。默认目录为安装目录。

来自：
帮助文档
存储资源盘活系统
API参考
初始化
初始化
操作系统更新
操作背景为保证RDS-PostgreSQL实例的数据库安全和数据库性能,系统会在合适期间对操作系统进行更新。同时操作系统的补丁更新不会变更您的数据库实例版本信息。为不影响您的数据库实例使用体验,RDS-PostgreSQL会在您设置的可运维时间段内,通过特定方式及时修复操作系统漏洞,加强您的数据库整体安全状况。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
实例操作
操作系统更新
监控概述
点击导航栏中的“运维”“监控”,进入“监控”页面,查看系统(集群版)、存储池(集群版)、服务器、数据目录、卷的性能表现。说明监控数据以服务器系统时间为准进行记录。时间被调整,或者集群中的服务器时间不统一,可能导致监控数据不准确。但用户的业务数据不会受到影响。曲线图中指示图标为灰色表示未显示该项的数据,点击对应的图标即可显示。

来自：
帮助文档
存储资源盘活系统
用户指南
运维
监控
监控概述
查看共享带宽监控
在目标共享带宽实例操作列,单击“查看监控图表”,查看监控数据。本功能仅在部分资源池可见,请以控制台实际可见为准。

来自：
帮助文档
共享带宽
用户指南
运维与监控
查看共享带宽监控
产品优势
针对加密云硬盘的备份,备份数据自动加密保存到对象存储中,数据持久性高达99.999999999%。

来自：
帮助文档
云主机备份
产品简介
产品优势
空闲连接查杀
操作场景若您的数据库实例在查询结束后连接进程不主动关闭,此时就会产生空闲连接。空闲连接过多时,会影响您的数据库实例性能。您可以通过杀死空闲连接降低对数据库性能的影响。操作步骤登录天翼云门户。点击控制中心,进入控制中心后,选择目标资源池。在产品列表页面中找到【数据库】→【关系数据库PostgreSQL版】,点击进入控制台。在左侧菜单中点击【PostgreSQL】→【实例管理】,点击进入产品实例管理页。在【实例管理】的实例列表中选择目标实例,点击实例名称进入实例管理详情页。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
实例操作
空闲连接查杀
实例连接方式介绍
如果您使用天翼云以外的设备(例如本地设备、其他云厂商服务器等)连接文档数据库服务实例,建议使用弹性公网IP连接文档数据库服务实例。安全性稍低。公网连接需要购买弹性公网IP,并与文档数据库服务实例节点进行绑定。

来自：
帮助文档
文档数据库服务
快速入门
连接文档数据库服务实例
实例连接方式介绍
设置权限
DRDS所支持的用户权限如下: 权限类型权限简述全部所有权限无无权限 SELECT 读取表内容 INSE...数据到表 UPDATE 更新表中数据 DELETE 删除表中数据 TRUNCATE 删除表中所有行

来自：
帮助文档
分布式关系型数据库
用户指南
实例管理
管理
用户管理
设置权限
备份弹性云主机
操作场景云服务备份提供申请即用的备份服务,使您的数据更加安全可靠。例如,当云主机或磁盘出现故障或者人为错误导致数据误删时,可以自助快速恢复数据。本节操作介绍备份云主机和云硬盘的操作步骤。您可以通过云服务备份产品架构、备份机制(全量备份和增量备份)、备份的方式及适用场景了解更多产品详情。

来自：
帮助文档
弹性云主机
用户指南
云备份
备份弹性云主机
参考：任务状态含义
实时灾备任务状态和说明状态说明创建中正在创建数据复制服务需要用到的灾备实例。配置灾备实例创建成功,但还没有启动任务,可以继续配置任务。等待启动已经下发了定时启动任务到灾备实例上,等待灾备实例启动任务。启动中正在启动灾备任务。启动失败实时灾备任务启动失败。初始化正在进行业务数据库到灾备数据库的全量数据初始化。初始化完成已完成灾备任务的初始化。灾备中持续进行从业务数据库到灾备数据库的增量数据灾备。

来自：
帮助文档
数据库复制
快速入门
创建数据库复制实时灾备
参考：任务状态含义
选择表模型
在设计数据仓库模型的时候,最常见的有两种:星型模型与雪花模型。选择哪一种模型需要根据业务需求以及性能的多重考量来定。星型模型由包含数据库核心数据的中央事实数据表和为事实数据表提供描述性属性信息的多个维度表组成。维度表通过主键关联事实表中的外键。如下图。 −所有的事实都必须保持同一个粒度。 −不同的维度之间没有任何关联。星型模型雪花模型是在基于星型模型之上拓展来的,每一个维度可以再扩散出更多的维度,根据维度的层级拆分成颗粒度不同的多张表。如下图。

来自：
帮助文档
数据仓库服务
最佳实践
调优表实践
选择表模型
编辑管道
约束与限制系统创建的数据管道不支持编辑操作。操作步骤登录管理控制台。单击页面左上方的,选择“安全 > 态势感知(专业版)”,进入态势感知(专业版)管理页面。在左侧导航栏选择“工作空间 > 空间管理”,并在工作空间列表中,单击目标工作空间名称,进入目标工作空间管理页面。在左侧导航栏选择“威胁运营 > 安全分析”,进入安全分析页面。在左侧数据空间导航栏中,单击数据空间栏或数据空间栏后的,展开已创建的管道。单击管道名称后的“更多 > 编辑”。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
威胁运营
安全分析
管理管道
编辑管道
DRDS如何设置允许执行跨分片的SQL语句？
DRDS默认禁止执行跨分片的增删改数据的SQL语句,用户通过修改默认属性允许执行跨分片的增删改数据的SQL语句,修改方法如下: 在天翼云官网首页的顶部菜单栏,选择【产品 > 数据库 > 关系型数据库 > 分布式关系型数据库】,进入分布式关系型数据库产品页面。然后单击【管理控制台】,进入【概览】页面。在左侧导航栏,选择【DRDS > 实例管理】,进入实例列表页面。然后在顶部菜单栏,选择区域和项目。在实例列表中,找到目标DRDS实例,单击【管理】,进入实例【基本信息】页面。

来自：
帮助文档
分布式关系型数据库
常见问题
操作类
DRDS如何设置允许执行跨分片的SQL语句？
云硬盘加密概述
云硬盘加密是指在创建云主机(选择系统盘、数据盘)时或者单独创建数据盘时勾选加密选项,创建完成后云主机操作系统内数据会在云硬盘所在宿主机被自动加密,无需自建和维护密钥管理基础设施,即可轻松保护数据的隐私性和自主性。云硬盘加密采用行业标准的AES-256加密算法。使用云硬盘加密功能,系统会将从云主机传输到云硬盘的数据自动进行加密,并在读取数据时自动解密。

来自：
帮助文档
弹性云主机
用户指南
云硬盘
加密云硬盘
云硬盘加密概述
保护Always on Availability Groups模式下的SQL Server
由于SQL Server自身的机制,在恢复主时,可能会触发同步,使备节点上的数据也被覆盖,导致备份时刻之后新产生的数据丢失,所以建议只有在主备节点均不可用时才进行整机恢复,防止非预期的数据丢失。

来自：
帮助文档
云主机备份
最佳实践
通过自定义脚本实现数据库备份
保护Always on Availability Groups模式下的SQL Server
保护Always on Availability Groups模式下的SQL Server
由于SQL Server自身的机制,在恢复主时,可能会触发同步,使备节点上的数据也被覆盖,导致备份时刻之后新产生的数据丢失,所以建议只有在主备节点均不可用时才进行整机恢复,防止非预期的数据丢失。

来自：
帮助文档
云服务备份
最佳实践
通过自定义脚本实现数据库备份
保护Always on Availability Groups模式下的SQL Server
迁移作业责任人
数据开发模块提供了迁移作业责任人的功能,您可以将责任人A的所有作业一键迁移到责任人B名下。操作步骤登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。详见下图:选择数据开发在数据开发主界面的左侧导航栏,选择“数据开发 > 作业开发”。在作业目录顶部,单击,选择“责任人配置”。详见下图:责任人配置分别设置“当前责任人”和“目标责任人”,单击“迁移”。提示迁移成功后,单击“关闭”。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
作业开发
（可选）管理作业
迁移作业责任人
删除卷
对于上云卷,如果删除卷的时候未删除云上数据,后期可以使用卷还原功能进行卷数据还原。删除卷时,应确保卷不包含快照、一致性快照。注意对于上云卷,选择强制删除卷,且同时删除云上数据,可能会有云上数据残留,需要对云上数据进行手动删除。如果卷存在关联克隆卷,且克隆卷未处于“删除中”或“断开链接中”状态,则禁止删除源卷。如果卷有关联的快照或一致性快照,只能强制删除卷。强制删除卷时,将同时删除此卷的快照和一致性快照中的卷快照。同时也会产生数据残留风险,请谨慎操作。图1 删除卷

来自：
帮助文档
存储资源盘活系统
用户指南
卷操作
删除卷
产品价格
云数据库GeminiDB Influx接口按照数据库计算实例规格、数据库存储空间和备份空间进行收费,计费模式支持按需和包年包月两种模式。包年订购提供一年85折、两年7折、三年5折的折扣优惠。

来自：
帮助文档
云数据库GeminiDB
GeminiDB Influx接口
计费说明
产品价格
开启和关闭SSL安全连接
在服务列表中选择“数据库 > 云数据库 GeminiDB Influx 接口”。在实例管理页面,单击目标实例名称,进入基本信息页面。在数据库信息区域,单击SSL后的,开启SSL安全连接。图开启SSL安全连接关闭SSL安全连接登录管理控制台。在服务列表中选择“数据库 > 云数据库 GeminiDB Influx 接口”。在实例管理页面,单击目标实例名称,进入基本信息页面。在数据库信息区域,单击SSL后的,关闭SSL安全连接。图关闭SSL安全连接

来自：
帮助文档
云数据库GeminiDB
GeminiDB Influx接口
用户指南
连接管理
开启和关闭SSL安全连接
重置密码
注意事项为保证数据库安全,账号密码建议设置为强密码并定期更换。操作步骤在天翼云官网首页的顶部菜单栏,选择【产品 > 数据库 > 关系型数据库 > 关系数据库SQL Server版】,进入关系数据库SQL Server产品页面。然后单击【管理控制台】,进入TeleDB数据库【概览】页面。在左侧导航栏,选择【SQL Server > 实例管理】,进入实例列表页面。然后在顶部菜单栏,选择区域和项目。在实例列表中,单击目标实例名称,进入实例【基本信息】页面。

来自：
帮助文档
关系数据库SQL Server版
用户指南
账号与权限
重置密码
产品价格
产品介绍打造的分布式key-Value 数据库服务,兼容Redis 协议,主要用于持久化数据的存储或缓存数据的存储;DCS 提供单机、主备、集群多种实例类型,支持自动容灾切换、在线扩容、数据备份、实例监控等数据库服务。资费标准包括单机实例、主备实例和集群实例。

来自：
帮助文档
分布式缓存服务Redis版
计费说明
专属云计费说明
产品价格
配置DLI源端参数
cdm 数据库名称写入数据的数据库名称。 dli 表名写入数据的表名。 car_detail 分区导入前清空数据,如果设置为true时,呈现此参数。表示分区信息。 year=2020,location=sun

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
管理作业
配置作业源端参数
配置DLI源端参数
可靠性与一致性说明
天翼云混合存储网关的缓存模式采用同步IO(Sync IO)落盘,确保掉电数据不丢失。天翼云混合存储网关基于天翼云云硬盘的高可靠性,确保了缓存盘的数据可靠性。网关将缓存盘的新数据刷新上传到对象存储桶,天翼云对象存储(CT-ZOS)数据设计持久性高达99.9999999999%(12个9)保证了数据的安全可靠。

来自：
帮助文档
混合存储网关
产品介绍
可靠性与一致性说明
添加节点
在天翼云官网首页的顶部菜单栏,选择产品数据库 > 关系型数据库 > 分布式关系型数据库,进入分布式关系型数据库产品页面。然后单击管理控制台,进入概览页面。在左侧导航栏,选择DRDS > 实例管理,进入实例列表页面。然后在顶部菜单栏,选择区域和项目。在实例列表中,找到目标实例,然后在操作列,选择更多 > 添加节点。在节点增加页面,配置所需的计算节点数量。在页面右下角阅读并勾选协议后,单击提交。

来自：
帮助文档
分布式关系型数据库
用户指南
实例管理
管理
节点管理
添加节点

天翼云最新活动

618智算钜惠季

爆款云主机2核4G限时秒杀，88元/年起！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云脑AOne

连接、保护、办公，All-in-One！

中小企业应用上云专场

产品组合下单即享折上9折起，助力企业快速上云

息壤高校钜惠活动

天翼云息壤杯高校AI大赛，数款产品享受线上订购超值特惠

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

物理机

镜像服务

弹性伸缩服务

弹性高性能计算

科研助手

一站式智算服务平台

智算一体机

人脸检测

人脸活体检测

推荐文档

导入数据

产品定义

变更备案

7天无理由退款如何操作？

PostgreSQL

全面了解天翼云⑧：NFS安装教程