数据集成工具_数据集成工具文档介绍内容-天翼云

通过公网连接TaurusDB实例
port 数据库端口,在目标实例的“基本信息”页面,“网络信息”模块的“数据库端口”。用户名,即TaurusDB数据库管理员帐号,默认为root。示例: 使用root用户连接数据库实例。 mysql -h 10.xx.xx.xx -P 3306 -u root -p 出现如下提示时,输入数据库帐号对应的密码: Enter password: 说明若连接失败,请确保各项前提条件正确配置后,重新尝试连接。

来自：
帮助文档
云数据库TaurusDB
快速入门
连接实例
通过公网连接TaurusDB实例
通过公网连接TaurusDB实例
配置脱敏规则
输入“原始数据”,单击“测试”,在“脱敏结果”文本框中展示已完成脱敏的数据。测试确认无误后,单击“保存”。

来自：
帮助文档
数据安全中心
用户指南
数据隐私保护
数据脱敏
配置脱敏规则
升级实例版本和规格
版本升级后您可正常继续使用原有配置和存储数据,升级不影响系统原有配置和存储数据。仅2.0.0及以上版本支持升级实例。升级实例规格仅支持“运行状态”为“已关机”的实例升级。升级实例规格不支持降低规格。升级实例版本步骤1.登录日志审计(原生版)控制台。2.单击图标,选择您待升级日志审计实例的资源池。3.选择需要升级的版本,单击“版本”列的“升级”按钮。4.在弹出的对话框中单击“确定”,即可升级实例。升级实例规格步骤1.登录日志审计(原生版)控制台。2.单击图标,选择您待升级日志审计实例的资源池。

来自：
帮助文档
日志审计（原生版）
快速入门
升级实例版本和规格
参考：任务状态含义
全量迁移正在进行源数据库到目标数据库的全量迁移任务。全量迁移失败实时迁移任务全量迁移失败。增量迁移持续进行从源数据库到目标数据库的增量数据迁移。增量迁移失败增量数据迁移失败。故障恢复迁移实例发生故障,系统自动恢复迁移任务。结束任务释放执行迁移任务所使用的迁移实例和资源。结束任务失败释放迁移任务所使用的迁移实例和资源失败。已结束释放迁移任务所占迁移实例成功。说明已删除的迁移任务在状态列表中不显示。

来自：
帮助文档
数据库复制
快速入门
创建数据库复制实时迁移
参考：任务状态含义
应用场景
适用于高性能、高可靠应用场景,例如企业应用、大型开发测试环境、部署分布式文件系统和数据库应用等。专属云(存储独享型)可支持的三种应用场景如下:有高性能、数据安全和业务稳定需求的场景可对接专属云中的弹性云主机、物理机等计算服务,适用于有高性能、稳定性以及数据安全和监管的业务诉求的场景。

来自：
帮助文档
专属云（存储独享型）
产品介绍
应用场景
配置MongoDB/DDS源端参数
从MongoDB、DDS迁移数据时,CDM会读取集合的首行数据作为字段列表样例,如果首行数据未包含该集合的所有字段,用户需要自己手工添加字段。作业中源连接为配置MongoDB连接,即从本地MongoDB或DDS导出数据时,源端作业参数如下表所示。表 MongoDB/DDS作为源端时的作业参数参数名说明取值样例数据库名称选择待迁移的数据库。 mongodb 集合名称相当于关系数据库的表名。单击输入框后面的按钮可进入选择集合名的界面,用户也可以直接输入集合名称。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
管理作业
配置作业源端参数
配置MongoDB/DDS源端参数
IPsec VPN入门概述
环境要求本地数据中心的网关设备必须配置公网IP地址。本地数据中心的网关设备必须支持IKEv1或IKEv2协议,支持任意一种协议的设备均可以和VPN网关建立IPsec VPN连接。本地数据中心和天翼云VPC间互通的网段没有重合。使用流程创建VPN网关创建VPN网关并开启IPsec VPN功能,一个VPN网关可以建立多条IPsec连接。创建用户网关通过创建用户网关,您可以将本地数据中心VPN网关设备的信息注册到天翼云上。

来自：
帮助文档
VPN连接
快速入门
IPsec VPN 快速入门
IPsec VPN入门概述
应用场景
同时对于重点保护数据,可通过对象存储(经典版)Ⅰ型的多副本冗余功能,实现异地数据容灾。建议搭配服务 CDN加速。

来自：
帮助文档
对象存储（经典版）I型
产品简介
应用场景
回收站
3、选择“数据库> 关系型数据库”。进入关系型数据库信息页面。 4、在左侧导航栏,单击“回收站”。 5、在“回收站”页面,单击“回收站策略”,设置已删除实例保留天数,可设置范围为1~7天。 6、单击“确定”,完成设置。重建实例在回收站保留期限内的主实例可以通过重建实例恢复数据。 1、登录管理控制台。 2、单击管理控制台左上角的,选择区域和项目。 3、选择“数据库> 关系型数据库”。进入关系型数据库信息页面。 4、在左侧导航栏,单击“回收站”。

来自：
帮助文档
关系数据库SQL Server版
用户指南
管理数据库实例
回收站
回收站
3、选择“数据库> 关系型数据库”。进入关系型数据库信息页面。 4、在左侧导航栏,单击“回收站”。 5、在“回收站”页面,单击“回收站策略”,设置已删除实例保留天数,可设置范围为1~7天。 6、单击“确定”,完成设置。重建实例在回收站保留期限内的主实例可以通过重建实例恢复数据。 1、登录管理控制台。 2、单击管理控制台左上角的,选择区域和项目。 3、选择“数据库> 关系型数据库”。进入关系型数据库信息页面。 4、在左侧导航栏,单击“回收站”。

来自：
帮助文档
关系数据库MySQL版
用户指南
实例管理
回收站
比较参数模板
操作场景您可以比较同数据库类型的实例参数模板,以了解当前实例参数的差异项。您也可以比较同数据库类型的默认参数模板,以了解当前参数模板的配置情况。比较当前实例参数模板步骤 1 登录管理控制台。步骤 2 单击管理控制台左上角的,选择区域和项目。步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“实例管理”页面,单击实例名称,进入实例的“基本信息”页签。步骤 5 在左侧导航栏中选择“参数修改”,在“参数”子页签中单击“比较参数”。

来自：
帮助文档
关系数据库MySQL版
用户指南
参数管理
比较参数模板
比较参数模板
操作场景您可以比较同数据库类型的实例参数模板,以了解当前实例参数的差异项。您也可以比较同数据库类型的默认参数模板,以了解当前参数模板的配置情况。比较当前实例参数模板步骤 1 登录管理控制台。步骤 2 单击管理控制台左上角的,选择区域和项目。步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“实例管理”页面,单击实例名称,进入实例的“基本信息”页签。步骤 5 在左侧导航栏中选择“参数修改”,在“参数”子页签中单击“比较参数”。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
参数模板管理
比较参数模板
规格
标准存储访问时延低和吞吐量高,因而适用于有大量热点文件(平均一个月多次)或小文件(小于1MB),且需要频繁访问数据的业务场景,例如:大数据、移动应用、热点视频、社交图片等场景。低频访问存储适用于不频繁访问(平均一年少于12次)但在需要时也要求快速访问数据的业务场景,例如:文件同步/共享、企业备份等场景。归档存储适用于很少访问(平均一年访问一次)数据的业务场景,例如:数据归档、长期备份等场景。归档存储安全、持久且成本极低,可以用来替代磁带库。

来自：
帮助文档
对象存储
产品简介
规格
存储类别简介
标准存储访问时延低和吞吐量高,因而适用于有大量热点文件(平均一个月多次)或小文件(小于1MB),且需要频繁访问数据的业务场景,例如:大数据、移动应用、热点视频、社交图片等场景。低频访问存储适用于不频繁访问(平均一年少于12次)但在需要时也要求快速访问数据的业务场景,例如:文件同步/共享、企业备份等场景。归档存储适用于很少访问(平均一年访问一次)数据的业务场景,例如:数据归档、长期备份等场景。归档存储安全、持久且成本极低,可以用来替代磁带库。

来自：
帮助文档
对象存储
用户指南
存储类别简介
删除量
时间粒度删除量查询的时间粒度,可以选择:按五分钟查询:统计信息按每5分钟展示,可以选择查询今日、昨日或按日历选择任意1天的数据。按小时查询:统计信息按每小时展示,可以查询今日、昨日、近7日或按日历选择任意7天内的数据。按天查询:统计信息按天展示,可以查询今日、昨日、近7日、近30天或按日历按钮选择任意90天内的数据。数据位置删除量查询的数据位置,可以选择:全部数据位置:展示所有数据位置的删除量之和。具体数据位置:根据显示的数据位置进行选择,查看对应数据位置的删除量。

来自：
帮助文档
对象存储（经典版）I型
控制台指南
统计概览
统计
删除量
产品优势
数据安全深度优化持久化内核机制,提供 RDB+AOF快照流水的持久化落盘方式,在提供高速数据读写能力的同时满足数据持久化需求。数据容灾能力强,支持数据自动备份,可设置备份策略或一键手动备份,数据可一键恢复,可有效防范数据误操作,极大降低业务数据损失的可能。简单易用高度兼容Redis协议。按key水平扩展的透明访问能力,应用程序无缝接入。

来自：
帮助文档
分布式缓存服务Redis版
产品介绍
产品优势
错误日志
通过控制台下载错误日志在天翼云官网首页的顶部菜单栏,选择【产品数据库 > 关系型数据库 > 关系数据库SQL Server版】,进入关系数据库SQL Server产品页面。然后单击【管理控制台】,进入TeleDB数据库【概览】页面。在左侧导航栏,选择【SQL Server > 实例管理】,进入实例列表页面。然后在顶部菜单栏,选择区域和项目。在实例列表中,单击目标实例名称,进入实例【基本信息】页面。

来自：
帮助文档
关系数据库SQL Server版
用户指南
日志管理
错误日志
包年/包月
数据安全要求高:对于对数据安全性要求较高的业务,包年/包月计费模式可确保资源的持续使用,降低因资源欠费而导致的数据安全风险。适用计费项包年/包月包含以下计费项。表适用计费项计费项说明数据库实例 GaussDB实例对CN、DN节点进行收费,管理节点CMS、GTM不收费。数据库存储对数据库存储空间进行计费,包年/包月计费方式的存储空间如果超过当前容量,超出的部分将按需计费。

来自：
帮助文档
云数据库GaussDB
计费说明
计费模式
包年/包月
操作流程
源库连通性检查检查数据传输服务器能否连通源数据库。源数据库的模式名表名是否合法检查源数据库的模式名表名是否合法,名称不可以包含+"%'<>,.字符。源库参数wal_level是否为logical 勾选增量迁移时,检查源库wal_level参数值是否为logical。目标库用户权限检查检查目标库用于DTS任务的用户是否具有相应的权限。目标库连通性检查检查数据传输服务器能否连通目标数据库。

来自：
帮助文档
数据传输服务DTS
最佳实践
本地PostgreSQL迁移到RDS for PostgreSQL
操作流程
变更
扩容:当集群数据节点(ess)的写入与查询压力大、响应时间过长时,可以通过扩容数据节点的“节点存储容量”保证数据的持久性。如果因数据量过大或操作不当导致数据节点状态异常时,可以扩容“节点数量”保证集群的可用性。冷数据节点(ess-cold)主要用于分担ess数据节点的压力,当发现冷数据有丢失的风险时,可以扩容冷数据节点的“节点存储容量”保证冷数据的持久性,同时也支持扩容节点个数保证集群的可用性。

来自：
帮助文档
云搜索服务
计费说明
变更
IAM用户权限管理最佳实践
自定义数据权限注意如需要数据权限管控,则需要通过Resource五元组配置资源路径。

来自：
帮助文档
微服务云应用平台
最佳实践
IAM用户权限管理最佳实践
产品定义
存储功能:管控层存储域名解析数据、配置数据和日志数据,确保数据的安全性和可靠性。解析层:解析层通过部署解析服务器集群向外提供服务,主要职能为: 域名解析:解析层接收来自管控层的域名解析记录数据,并对解析请求进行响应,将域名解析为对应的IP地址,实现计算机之间的连接。

来自：
帮助文档
内网DNS
产品简介
产品定义
使用DCS迁移介绍
迁移概览 DCS Redis支持备份文件导入和在线迁移两种迁移方式: 备份文件导入方式,数据来源分为OBS桶和Redis实例两种方式 OBS桶导入方式:您需要先将源Redis的数据备份并下载,然后将备份数据文件上传到与DCS Redis实例同一租户下相同Region下的对象存储服务(OBS)中,DCS从对象存储服务(OBS)中读取备份数据,并将数据迁移到DCS Redis中。支持从其他云厂商Redis服务、自建Redis迁移到DCS Redis 。

来自：
帮助文档
分布式缓存服务Redis版
操作指导
使用DCS迁移数据
使用DCS迁移介绍
功能特性
功能介绍 Dedicated HSM提供以下功能: 生成、存储、导入、导出和管理加密密钥(包括对称密钥和非对称密钥) 使用对称和非对称算法...数据使用加密哈希函数计算消息摘要和基于哈希的消息身份验证代码对数据进行加密签名(包括代码签名)并验证签名以加密方式生成安全随机数据 Dedicated HSM支持的密码算法支持国际通用密码算法,满足用户各种加密算法需求。

来自：
帮助文档
数据加密
产品介绍
专属加密
功能特性
重启集群
确认集群无执行中的任务,如导入数据、搜索数据等。须知快速重启集群过程中会导致集群不可用。如果快速重启失败,将有可能会丢失数据或导致集群不可用,请谨慎操作。当集群处于可用状态时,请排查集群没有正在处理业务数据的任务,再执行快速重启操作。如果集群正在处理业务数据,如导入数据、搜索数据时,一旦快速重启集群,有可能导致数据丢失,如传输的数据丢失等。所以,建议停止所有集群任务后,再快速重启集群。 1.登录云搜索服务管理控制台。

来自：
帮助文档
云搜索服务
用户指南
使用Elasticsearch搜索数据
管理Elasticsearch类型集群
重启集群
产品架构
云主机备份由存储库、备份策略和备份副本组成,基于云硬盘快照技术为弹性云主机提供数据保护能力。通过云主机备份,您可以方便地保护和恢复弹性云主机的数据。云硬盘快照技术、存储库和备份策略的组合,提供了可靠的数据保护机制,帮助您应对数据丢失或损坏的风险,并在需要进行恢复时,提供快速而可靠的恢复能力。在备份过程中,备份的数据会保存到对象存储中,对象存储是一种高可用、可扩展的分布式存储服务,可以提供安全和可靠的数据存储。通过备份到对象存储,可以确保备份数据的持久性和可用性,以便在需要时进行恢复。

来自：
帮助文档
云主机备份
产品简介
产品架构
文件格式介绍
3.从JSON文件复制数据 a.示例一:从行分隔/串连的多个对象中提取数据。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
进阶实践
文件格式介绍
共享磁盘及使用方法
比如,将一块共享磁盘格式化为ext3文件系统后挂载给云主机 A和云主机 B,云主机 A在某一时刻向磁盘上的区域 R和区域 G写了文件系统的元数据,下一时刻云主机 B又向区域 E和区域 G写了自己的元数据,则云主机 A写入的数据将会被替换,随后读取区域 G的元数据时即会出现错误。数据缓存导致数据不一致当一个共享磁盘同时挂载给两台云主机时,若云主机 A上的应用读取区域 R和区域 G的数据后将数据记录在缓存中,此时云主机 A上的其他进程或线程访问该部分数据时,直接访问缓存中的数据即可。

来自：
帮助文档
专属云（存储独享型）
产品介绍
共享磁盘及使用方法
创建克隆卷
写策略克隆卷的写策略:回写:指数据写入到内存后即返回客户端成功,之后再异步写入磁盘。适用于对性能要求较高,稳定性要求不高的场景。透写:指数据同时写入内存和磁盘,并在都写成功后再返回客户端成功。适用于稳定性要求较高,写性能要求不高,且最近写入的数据会较快被读取的场景。绕写:指数据直接写到磁盘,不写入内存。适用于稳定性要求较高,性能要求不高,且写多读少的场景。默认为源卷的写策略。数据目录克隆卷的数据的存储位置(仅单机版支持)。如果创建克隆卷时不指定数据目录,默认与源卷配置保持一致。

来自：
帮助文档
存储资源盘活系统
用户指南
卷操作
创建克隆卷
作业开发
SQL作业如何指定表的部分字段进行表数据的插入当前DLI不支持指定部分列字段进行表数据插入。如需执行插入操作,需要所有表字段数据一起插入。

来自：
帮助文档
数据湖探索
常见问题
操作类
SQL作业相关问题
作业开发
使用大模型学习机微调自己的文本生成模型
准备训练数据模型训练支持多种输入格式,主要分为格式化数据(Formatted Dataset)与原始文本数据(Raw text file)。 2.1 格式化数据(Formated Dataset) 格式化数据一般用于对话领域,以json形式进行组织,可以在/root/text-generation-webui/training/formats目录下找到各类格式的配置文件。

来自：
帮助文档
弹性云主机
最佳实践
大模型学习机最佳实践
使用大模型学习机微调自己的文本生成模型
产品定义
功能特点:1、规格丰富高IO:高性能、高扩展、高可靠,适用于性能相对较高,读写速率要求高,有实时数据存储需求的应用场景。超高IO:低时延、高性能,适用于低时延,高读写速率要求,数据密集型应用场景。2、弹性扩展按需扩容:可根据业务需求扩容存储池。性能线性增长:支持在线扩容DSS下的磁盘,并且性能线性增长,满足业务需求。3、安全可靠三副本冗余:数据持久性高达99.9999999%。数据加密:系统盘和数据盘均支持数据加密,保护数据安全。

来自：
帮助文档
专属云（存储独享型）
产品介绍
产品定义

天翼云最新活动

618智算钜惠季

爆款云主机2核4G限时秒杀，88元/年起！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云脑AOne

连接、保护、办公，All-in-One！

中小企业应用上云专场

产品组合下单即享折上9折起，助力企业快速上云

息壤高校钜惠活动

天翼云息壤杯高校AI大赛，数款产品享受线上订购超值特惠

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

弹性云主机

GPU云主机

镜像服务

弹性伸缩服务

弹性高性能计算

一体化计算加速平台·异构计算

一站式智算服务平台

智算一体机

人脸检测

推荐文档

FTP访问

恢复文件和文件夹备份

产品规格

安装网页防篡改集中管理中心