数据集成工具_数据集成工具文档介绍内容-天翼云

续订
在天翼云官网首页的顶部菜单栏,选择【产品数据库 > 关系型数据库 > 分布式关系型数据库】,进入分布式关系型数据库产品页面。然后单击【管理控制台】,进入【概览】页面。在左侧导航栏,选择【DRDS > 实例管理】,进入实例列表页面。然后在顶部菜单栏,选择区域和项目。实例列表中选择要续订的实例,在【更多】中选择【续订】按钮。选择续订的时长,并完成订单支付。说明更多信息,请您参考费用中心-续订管理。

来自：
帮助文档
分布式关系型数据库
计费说明
续订
卸载本地客户端
d.卸载完成后,本地客户端状态变为“已失联”,当确认不再需要此本地客户端记录及其相关备份数据时,可点击“操作>更多>删除备份资源”进行此本地客户端记录及其相关备份数据的删除。

来自：
帮助文档
云备份
用户指南
客户端管理
文件备份客户端
卸载客户端
卸载本地客户端
创建实例账号
文档数据库服务支持通过多种不同方式创建用户帐号,此处列举通过shell命令创建用户帐号以及管理控制台创建用户帐号。通过shell命令创建用户帐号操作步骤通过shell连接至实例,请参见文档数据库服务-快速入门-连接文档型数据库服务实例教程。选择admin库。 use admin 以创建testUser用户为例,在shell中输入以下创建用户命令。

来自：
帮助文档
文档数据库服务
用户指南
数据库管理
创建实例账号
结构化方式
相对时间:表示查询距离当前时间1分钟、5分钟、15分钟等时间区间的日志数据。例如当前时间为19:20:31,设置相对时间1小时,表示查询18:20:31\~19:20:31的日志数据。整点时间:表示查询最近整点1分钟、15分钟等时间区间的日志数据。例如当前时间为19:20:31,设置整点时间1小时,表示查询18:00:00\~19:00:00的日志数据。自定义:表示查询指定时间范围的日志数据字段提取。

来自：
帮助文档
云日志服务
用户指南
日志搜索与分析
云端结构化解析
结构化方式
Kafka性能调优
生产者将记录发送到 Kafka 代理,后者存储数据。主题跨代理对记录进行分区。在使用记录时,每个分区最多可使用一个消费者来实现数据并行处理。复制用于在节点之间复制分区。这可以防止节点(代理)发生服务中断。将副本组之间的单个分区指定为分区领导者。生产者流量将根据由ZooKeeper管理的状态路由到每个节点的领导者。 2. 调优方案选择 Kafka性能体现在两个主要方面:吞吐量和延迟。吞吐量是指数据的最大处理速率,通常吞吐量越高越好。延迟是指存储或检索数据所花费的时间。通常,延迟越低越好。

来自：
帮助文档
翼MapReduce
最佳实践
Kafka性能调优
查看任务详情
本节主要介绍查看任务详情备份迁移任务的配置信息,包括任务信息、备份文件信息和数据库信息。迁移任务创建成功后,您可查看迁移任务详细信息。前提条件已登录数据复制服务控制台。操作步骤说明任务列表中,仅展示当前登录用户所创建的全部任务,同一租户下的不同用户之间的任务不可见。步骤 1 在“备份迁移管理”界面,选择指定的迁移任务,单击任务名称。步骤 2 在“基本信息”页签,查看当前迁移任务的详细信息。您可查看到当前迁移任务下对应的任务信息、备份文件信息和数据库信息。

来自：
帮助文档
数据库复制
用户指南
备份迁移
任务管理
查看任务详情
消费位点提交
这两个参数组合的结果就是,每次 poll 数据前会先检查上次提交位点的时间,如果距离当前时间已经超过参数auto.commit.interval.ms规定的时长,则客户端会启动位点提交动作。因此,如果将enable.auto.commit设置为 true,则需要在每次 poll 数据时,确保前一次 poll 出来的数据已经消费完毕,否则可能导致位点跳跃。

来自：
帮助文档
分布式消息服务Kafka
最佳实践
消费者实践
消费位点提交
禁用或启用实例
前提条件已登录数据管理服务。登录用户的角色为超级管理员、系统管理员、运维管理员、团队管理员或者实例Owner。注意事项禁用实例:已启用的实例可进行此操作,实例被禁用后,将无法进行登录、查询等操作,请谨慎操作。启用实例:已被禁用的实例可进行此操作,启用实例后,即恢复登录、查询等操作。操作步骤登录数据管理服务。在左侧菜单栏中点击数据资产 >实例管理 ,进入实例列表界面。在列表中找到目标实例,在操作栏中找到更多 > 禁用实例/启用实例。

来自：
帮助文档
数据管理服务
用户指南
数据资产
实例管理
实例列表
禁用或启用实例
目标库处于只读状态(super-read-only)
修复方法在目标库执行以下命令,取消数据库只读状态。 set global read_only=0; 检查目标库是否存在因为Out of memory导致的进程重启,若存在,提升数据库的内存。数据库恢复正常可写后,重新启动任务。

来自：
帮助文档
数据传输服务DTS
故障排除
失败案例
全量迁移/同步案例
目标库处于只读状态(super-read-only)
创建存储网络
1.概述科研助手提供非持久化的智能边缘云存储,如果您需要持久化存储数据,需要先创建存储网络后方可申请智能边缘云存储,具体创建说明如下: 2.操作步骤 1)登录科研助手管理控制台。 2)在控制台左侧导航栏中,选择【数据存储】。 3)在【数据存储】菜单的选项中,选择【存储网络】。 4)在【存储网络】页面,点击左上角的【创建存储网络】按钮。 5)在【初始化存储网络】页面,选择对应的资源池和可用区后,点击【初始化】,完成存网络创建;点击【取消】,放弃存储网络创建。

来自：
帮助文档
科研助手
用户指南
数据存储
存储网络
创建存储网络
DML同步报表不存在的错误（Table xxx doesn't exist）
修复方法可采取以下方案进行修复: 方案一:联系数据库运维工程师在目标库手动创建缺失的表,然后重启任务。注意若源库该表存在存量数据,此方法恢复任务后该表的数据会不一致。方案二:重新建一个DTS同步任务。

来自：
帮助文档
数据传输服务DTS
故障排除
失败案例
增量迁移/同步案例
DML同步报表不存在的错误（Table xxx doesn't exist）
对象存储如何计费
对象存储标准型总计三个计费项:存储费用、公网流出流量费用、CDN回源流出流量、请求费用,说明如下: 存储费用:即存储容量费用,按用户数据占用的存储空间量收取费用。公网流出流量费用:按存储数据被调用或下载产生的公网流量收取费用。 CDN回源流出流量:数据从媒体存储传输到天翼云CDN所产生的回源流量。请求费用:请求费用按照发送到对象存储的请求指令次数进行计算,实际上每调用一次API都计算一次请求次数。更详细的计费项说明可参考计费项。

来自：
帮助文档
媒体存储
常见问题
计费常见问题
对象存储如何计费
副本集主备切换
文档数据库服务产品的副本集规格实例,支持手动进行主备节点切换,步骤如下: 进入TeleDB数据库控制台。点击“DDS”>“实例管理”进入实例列表页面。点击需要手动主备切换的副本集实例的实例ID,进入到该实例详情页。副本集实例下拉至“节点信息”栏,可手动点击“Secondary”节点操作列的“主备切换”按钮,等待主备切换完成。注意仅实例状态是“运行中”的副本集规格实例支持手动进行主备节点切换。实例在主备切换过程中,数据库将停止服务,请谨慎操作。

来自：
帮助文档
文档数据库服务
用户指南
实例变更
实例的主备切换
副本集主备切换
续订实例
约束限制按需付费的数据库实例冻结后,在实例保留期内,您充值账户余额后会自动续订,无需手动续订。操作步骤登录天翼云门户。点击控制中心,进入控制中心后,选择目标资源池。在产品列表页面中找到【数据库】→【关系数据库PostgreSQL版】,点击进入控制台。在左侧菜单中点击【PostgreSQL】→【实例管理】,点击进入产品实例管理页。在【实例管理】的实例列表中选择目标实例,单击“更多”选择“续订”操作,进入续订页面,对实例进行续订操作。在续订页面选择续订的时长,完成付款即可。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
实例生命周期管理
续订实例
Redis使用规范
本节主要介绍Redis常见使用规范,包括业务使用规范、SDK使用规范等业务使用规范规范规范说明级别备注业务数据分离防止由于Redis故障或不可用影响所有相关业务收到干扰建议业务数据分离,避免多个应用使用一个Redis实例,不相干的业务拆分,公共数据做服务化完善redis的容错处理缓存可能会遇到基础设施的故障或主备切换,应用需要对可能的故障和慢请求做容错处理。

来自：
帮助文档
分布式缓存服务Redis版
最佳实践
Redis使用规范
CDN加速助力手机应用快速更新
方案效果可降低源站99%以上应用更新类业务产生的下行流量,客户端可就近接入服务节点获取最新应用数据包,用户下载体验升级,相关投诉和用户流失问题显著下降。业务正常状态码分布占99.5%以上,应用更新中断、更新失败、更新异常等现象不再频发,应用更新的可用性提高,用户黏性增加。提供完善全面的业务分布统计分析数据,助力客户对客户端的地域分布、运营商分布、业务活跃度等信息了如指掌,为客户提供业务决策依据和数据保障。

来自：
帮助文档
CDN加速
最佳实践
CDN加速助力手机应用快速更新
如何创建迁移任务
操作场景在“存储对象存储对象存储迁移服务迁移任务”控制台界面,您可以创建迁移任务,将其它云厂商存储的数据迁移到天翼云对象存储(ZOS)。前提条件您已经在天翼云对象存储ZOS开通Bucket。您的源端存在待迁移的数据。请确保您的业务处于空闲阶段或非高峰期,避免迁移执行时影响您的业务。请确保您的源端数据已经解冻,并在迁移完成前保持解冻状态,避免因源端数据未解冻迁移失败。

来自：
帮助文档
对象存储
控制台指南
对象存储迁移服务
迁移任务教程
如何创建迁移任务
创建容灾管理中心
容灾形态为同城主备,且生产中心为三方数据中心时:生产中心为三方数据中心时,当前多活容灾平台尚未提供针对该类型数据中心的网络配置服务,用户需自行在第三方数据中心中完成相关网络配置。容灾中心网络配置内容同上表。容灾形态为异地主备,且生产中心为天翼云时:生产中心、容灾中心网络配置内容同上表。容灾形态为异地主备,且生产中心为三方数据中心时:生产中心为三方数据中心时,当前多活容灾平台暂未提供该类型数据中心的网络配置服务,因此用户需自行在第三方数据中心中完成相关网络配置。容灾中心网络配置内容同上表。

来自：
帮助文档
多活容灾服务
用户指南
容灾管理中心
创建容灾管理中心
VPN网关常见问题
VPN网关在完成两侧配置后,如果协商生效选择了“立即协商”,则会自动触发建立连接;如果协商生效选择了“流量触发”,则不会自行建立连接,需要由...数据流来触发协商。如果云上与用户侧数据中心没有交互数据流,IPsec VPN的连接状态会一直处于“第一阶段协商未成功”状态。所谓的数据流,可以是真实的业务访问数据,也可以是主机间ping测数据。推荐您在首次建立连接时,分别验证两侧的交互数据流均可触发建立连接。

来自：
帮助文档
VPN连接
常见问题
VPN网关常见问题
集群扩容
为保证用户的数据安全建议在开始扩容操作之前创建手动快照。

来自：
帮助文档
数据仓库服务
用户指南
变配与扩容
节点变更
集群扩容
索引配置
索引是一种数据存储结构,能减少日志数据的查询耗时。通过对日志配置相应索引后,可以对索引字段的数据进行相应的查询与分析。索引需配置合适的字段类型才能分析出您所需要的结果。索引概念索引配置是指对原始日志数据分词后的字段增加索引能力。

来自：
帮助文档
云日志服务
用户指南
查询与分析
索引配置
查询实例默认参数模板列表v2
of Objects查询结果主体listpageNumInteger当前页的页码1navigatePagesInteger导航页数的数量8t...数据条目数量1pagesInteger总页数1firstPageInteger第一页的页码1sizeInteger当前页包含的数据条目数量1isLastPageBoolean指示当前页是否是最后一页truehasPreviousPageBoolean指示是否有前一页数据可用falseisFirstPageBoolean指示当前页是否是第一页

来自：
帮助文档
文档数据库服务
API参考
API
2022-08-23
Ⅰ类型资源池API
参数管理
查询实例默认参数模板列表v2
恢复默认参数v2
1sizeInteger当前页包含的数据条目数量。1isLastPageBoolean指示当前页是否是最后一页。truehasPreviousPageBoolean指示是否有前一页数据可用。falseisFirstPageBoolean指示当前页是否是第一页。

来自：
帮助文档
文档数据库服务
API参考
API
2022-08-23
Ⅰ类型资源池API
参数管理
恢复默认参数v2
全量SQL洞察
单击页面左上角的,选择“数据库 > 数据管理服务 DAS”,进入数据管理服务页面。在产品概览中单击“进入DBA智能运维”。选择目标实例,单击“详情”,进入DBA智能运维总览页面。单击“全量SQL洞察”,进入全量SQL洞察页面。单击SQL审计页签。在“SQL审计”页签中,查看SQL审计任务。您可以通过选择数据起止时间、任务创建时间、节点等查询条件获取当前实例SQL审计任务。单击“新增SQL审计任务”按钮,可自选时间范围添加SQL审计任务。

来自：
帮助文档
数据管理服务
用户指南
DBA智能运维
PostgreSQL
全量SQL洞察
XEN实例变更为KVM实例（Windows-自动配置）
说明重装操作系统会清除系统盘数据(包括系统盘内存储的快照),但不影响数据盘的数据。变更规格完成后,如已确认业务恢复正常,请在快照页面手动删除快照。

来自：
帮助文档
弹性云主机
用户指南
实例
变更规格
XEN实例变更为KVM实例（Windows-自动配置）
云原生监控插件
采集周期 :采集监控数据的周期。数据保留期 :监控数据保留的时长。存储 :选择用于存储监控数据的磁盘类型和大小。调度策略 :可单独配置插件各个组件的节点亲和性和污点容忍能力。可以配置多个调度策略,不配置亲和节点键和容忍节点污点键则默认不开启对应的调度策略。作用范围:可选择调度策略生效的插件实例,默认对全部实例生效。当指定组件实例名称时,将覆盖全部实例所配置的调度策略。亲和节点标签键:填写节点标签键,为插件实例设置节点亲和性。

来自：
帮助文档
云容器引擎
用户指南
插件管理
云原生监控插件
资源包概述
资源包种类资源包类型存储类型资源包描述单AZ存储容量包标准存储用于抵扣单AZ冗余策略下标准存储产生的数据存储容量费用,支持自定义规格包订购,1GB起订低频存储用于抵扣单AZ冗余策略下低频存储产生的数据存储容量费用,支持自定义规格包订购,1GB起订归档存储用于抵扣单AZ冗余策略下归档存储产生的数据存储容量费用,支持自定义规格包订购,1GB起订多AZ存储容量包标准存储用于抵扣多AZ冗余策略下标准存储产生的数据存储容量费用,支持自定义规格包订购,1GB起订低频存储用于抵扣多AZ冗余策略下低频存储产生的数据存储容量费用

来自：
帮助文档
对象存储
计费说明
计费模式
包年包月（资源包）计费
资源包概述
术语解释
公钥可对会话进行加密、验证数字签名,只有使用对应的私钥才能解密会话数据,从而保证数据传输的安全性。公钥是密钥对外公开的部分,私钥则是非公开的部分,由用户自行保管。通过加密算法得到的密钥对可以保证在世界范围内是唯一的。使用密钥对的时候,如果用其中一个密钥加密一段数据,只能使用密钥对中的另一个密钥才能解密数据。例如:用公钥加密的数据必须用对应的私钥才能解密;如果用私钥进行加密也必须使用对应的公钥才能解密,否则将无法成功解密。

来自：
帮助文档
证书管理服务
产品介绍
术语解释
对象存储到本地
普通恢复:当同步类型选择普通恢复时,支持两种场景:对象存储到本地文件系统/NAS存储:可以将对象存储中的数据同步到本地文件系统/NAS存储中。对象存储到ZFS文件系统:可以将对象存储中的数据同步到ZFS文件系统中,并结合ZFS快照对每次同步的数据打快照,形成可恢复的快照点实现历史数据的恢复。同步策略类型:“手动同步”“定期同步”和“间隔同步”。手动同步:需手动启动规则。定期同步:可指定每个月的某几天或者每个星期的某几天中的某几个时间点开始同步,规则会在设置的时间自动开始运行。

来自：
帮助文档
多活容灾服务
用户指南
资源同步管理
对象存储数据灾备
对象存储到本地
术语解释
用户可以像使用物理硬盘一样格式化并建立文件系统来使用块存储,可满足大部分通用业务场景下的数据存储需求。文件存储文件存储也称为文件级存储或基于文件的存储,数据会以单条信息的形式存储在文件夹中。当用户需要访问该数据时,用户的计算机需要知道相应的查找路径。存储在文件中的数据会根据数量有限的元数据来进行整理和检索,这些元数据会告诉计算机文件所在的确切位置。对象存储对象存储,也称为基于对象的存储,是一种扁平结构,其中的文件被拆分成多个部分并散布在多个硬件间。

来自：
帮助文档
媒体存储
产品介绍
术语解释
实例监控
选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。详见下图:选择数据开发在数据开发主界面的左侧导航栏,选择“运维调度 > 实例监控”。选择作业名称,在作业的“操作”列,单击“重跑”设置重跑作业实例;或单击作业名称左边的复选框,再选择“重跑”按钮设置作业实例重跑。详见下图:设置作业重跑参数说明参数说明重跑类型选择需要重跑的实例。重跑当前实例重跑当前作业以及上下游作业实例: 开始时间重跑用户设置的时间段内的实例。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
运维调度
实例监控
使用限制
指标指标数据基础规格:指标数据最多保存7天。指标项资源(例如,集群、组件、主机等)被删除后,其关联的指标项在数据库中最多保存30天。维度每个指标的维度最多为20个。指标查询接口单次最大可同时查询20个指标。统计周期最大统计周期为1小时。单次查询返回指标数据单个指标单次查询最大返回1440个数据点。上报自定义指标单次请求数据最大不能超过40KB。

来自：
帮助文档
应用运维管理
产品简介
使用限制

天翼云最新活动

12.12年度钜惠

爆款云主机2核2G仅需28.8元/年，X实例35.1元/半年起！ 8代机+XSSD新客专享2.5折！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云AI产品特惠

人脸识别+文字识别焕新，新用户免费试用

中小企业服务商合作专区

国家云助力中小企业腾飞，高额上云补贴重磅上线

出海产品促销专区

爆款云主机低至2折，高性价比，不限新老速来抢购！

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

息壤智算

应用商城

定价

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

弹性云主机

多活容灾服务

GPU云主机

镜像服务

弹性高性能计算

一体化计算加速平台·异构计算

天翼云CTyunOS系统

算力互联调度平台

一站式智算服务平台

推荐文档

系统访问

如何选择云主机？

监控应用运行状态