数据集成工具_数据集成工具文档介绍内容-天翼云

存储桶（Bucket）概述
区域属性 OOS的资源池分布在全国多个省、市、自治区及直辖市的资源池,这些资源池间的存储桶(Bucket)、文件(Object)、访问密钥(...数据的就近读取和写入。你可以通过设置区域属性,选择存放数据的地域。注意创建存储桶(Bucket)时选择的数据位置和调度策略可以在此进行修改,索引位置无法进行修改。如果您可见的数据位置只有一个,那么也无法修改。

来自：
帮助文档
对象存储（经典版）I型
控制台指南
存储桶管理
存储桶（Bucket）概述
修改分区平衡
数据量大的Topic进行分区平衡的时间会比较长,建议根据Topic的消费情况,适当调小Topic老化时间,使得Topic的部分历史数据被及时清理,加快迁移速度。分区平衡前的准备工作在不影响业务的前提下,适当调小Topic老化时间并等待消息老化,减少迁移数据,加快迁移速度,分区平衡任务结束后可重新调整为初始值。确保分区平衡的目标Broker磁盘容量充足。

来自：
帮助文档
分布式消息服务Kafka
用户指南
Topic管理
修改分区平衡
操作类
云存储网关和OOS的之间的数据传输是怎样的? 对于云存储网关,后端以切片形式上传。云存储网关会根据数据热度做读缓存。当访问的是冷数据,如果本地没有缓存数据,则直接访问OOS,此时就会有下载动作,对应产生下行流量。对特定存储桶创建卷后,文件系统可以感知OOS侧的操作吗? 不可以。卷创建完成后,云存储网关不会感知OOS侧对数据的增加或删改操作,为了避免出现数据不一致导致的云存储网关服务故障,请不要从OOS侧发起对已创建卷存储桶的操作。如何获取部署网关的IP?

来自：
帮助文档
云存储网关
常见问题
操作类
调度作业
“KAFKA” “KAFKA”触发事件类型的参数连接名称选择数据连接,需先在“管理中心”创建kafka数据连接。 Topic 选择需要发往kafka的消息Topic。事件处理并发数选择作业并行处理的数量,最大并发数为128。事件检测间隔配置时间间隔,检测通道下是否有新的消息。时间间隔单位可以配置为秒或分钟。读取策略选择数据的读取位置:从上次位置读取:首次启动时,从最新的位置读取数据。后续启动时,则从前一次记录的位置读取数据。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
作业开发
调度作业
GC
GC指标说明表指标类别指标指标说明数据类型GC详情dataSendSize发送到网关数据大小Longjvm.gc.count.delta最近发生的收集次数Longjvm.gc.count已发生的收集数Longjvm.gc.time.delta最近发生的gc时间Longjvm.gc.time已发生的gc时间Longjvm.direct.poolJVM直接内存池大小Long

来自：
帮助文档
应用性能监控
产品介绍
指标总览
JVM监控
GC
与其他服务的关系
服务名称一站式智算服务平台与其他服务之间的关系相关内容对象存储使用对象存储存储用户的数据和模型详细内容参见对象存储并行文件服务HPFS 使用HPFS并行文件服务存储用户的数据和模型详细内容参见并行文件服务HPFS

来自：
帮助文档
一站式智算服务平台
产品介绍
与其他服务的关系
NVIDIA GPU云主机
GPU图像加速基础型图像加速基础型GPU云主机基于NVIDIA GRID虚拟化GPU技术,公共镜像集成GRID驱动,并包含NVIDIA GRID vWS的软件License,能够有效降低小规模需求的使用成本,同时主机共享宿主机的CPU资源,适用于图像渲染和小规模AI推理等场景。

来自：
帮助文档
GPU云主机
产品简介
产品规格
NVIDIA GPU云主机
PG控制台程序部署
部署监控采集数据服务参考文档《部署监控数据采集服务》。部署北向接口服务如果有送北向的需求,请参考文档《部署北向接口服务》。

来自：
帮助文档
分布式融合数据库HTAP
私有云产品历史版本
V1.1.0版本产品文档
安装部署手册
安装过程
PG控制台程序部署
业务分析报表
热门分析报表说明支持三个月内、最长时间跨度为一个月的热门数据统计,包括热门Referer、热门域名、TOP客户端IP统计,可根据访问次数优先和流量优先两种维度的排列。并支持数据下载导出,表格内容与页面一致。热门URL。热门URL可展示TOP100的URL及对应的流量、流量占比、访问次数、访问占比。选择“流量优先”时按照流量大小排序,选择“访问次数”时按照访问次数排序,并支持表格导出。 TOP客户端IP。

来自：
帮助文档
Web应用防火墙（边缘云版）
安全运营
统计分析报表
业务分析报表
PG控制台程序部署
《部署监控数据采集服务》。

来自：
帮助文档
分布式融合数据库HTAP
私有云产品历史版本
V1.0.0版本产品文档
安装部署手册
安装过程
PG控制台程序部署
产品功能
Gzip压缩多路传输支持多路传输功能,开启多路传输功能后,有利于提升数据传输效率,在单条路径质量波动较大时有显著的效果。多路传输智能选路实时探测节点间实时探测获取当前网络状况,并上报智能选路中心,作为选路依据。-快速选路利用加速节点间实时探测的RTT值,结合天翼云自研的最优链路算法,获取最优传输路径,保障回源效果。稳健选路利用加速节点间实时探测的RTT和丢包率数据,结合天翼云自研的最优链路算法,获取最优传输路径,保障回源效果。

来自：
帮助文档
应用加速（文档停止维护）
产品介绍
产品功能
Redis实例CPU使用率高问题排查和解决
优化业务,例如避免频繁执行数据排序操作。可选: 根据业务情况,选择下述方法对实例进行调整: 调整实例为读写分离实例,对高消耗命令或应用进行分流。扩容实例增强实例处理能力。是否存在Redis的持久化重写操作对于主备和集群实例,DCS Redis实例默认开启AOF数据落盘,实例开启了AOF持久化功能后,Redis会定期进行AofRewrite的磁盘整理,AOF磁盘持久化整理一般在以下2种场景执行: 数据量写入不大,AOF文件不大时,固定在每天的凌晨1-4点进行AOF持久化重写。

来自：
帮助文档
分布式缓存服务Redis版
故障排除
Redis实例CPU使用率高问题排查和解决
重装操作系统
重装操作系统将清除系统盘上的所有数据,包括系统分区和其他所有分区。因此,请务必提前备份好重要的数据。重装操作系统不会影响数据盘上的数据,您的数据盘中的信息将保持不变。在重装操作系统后的几分钟内,系统将注入密码或密钥信息。在此期间,请不要执行任何其他操作,以避免导致密码或密钥信息注入失败,从而无法登录到您的云主机。请耐心等待注入过程完成。约束与限制如果您使用了私有镜像创建的弹性云主机,请确保原有镜像仍然存在,以便成功完成重装操作。

来自：
帮助文档
弹性云主机
用户指南
云主机实例
管理实例状态
重装操作系统
产品使用须知
弹性云主机使用须知违法行为:禁止使用弹性云主机从事任何违法活动,包括但不限于网络攻击、黑客行为、非法数据获取、侵犯他人隐私、网络钓鱼、传播恶意软件等。网络攻击:禁止使用弹性云主机进行任何形式的网络攻击,如分布式拒绝服务攻击(DDoS)、端口扫描、入侵他人系统等。未授权访问:禁止使用弹性云主机未经授权地访问、入侵或侵犯他人的系统、网络或数据。虚假行为:禁止使用弹性云主机从事虚假活动,如冒充他人身份、伪造数据、欺骗或误导他人。

来自：
帮助文档
弹性云主机
产品概述
产品使用须知
Upload Part
是Content-MD5该分片数据的128位采用base64编码的MD5值。这个头可以用来验证该分片数据是否与原始数据值保持一致。尽管这个值是可选的,我们仍然推荐使用Content-MD5机制来执行端到端的一致性校验。类型:字符串。否x-amz-limit文件上传限制的速率。类型:字符串。

来自：
帮助文档
对象存储（经典版）I型
API参考
存储桶（Bucket）和文件(Object）
关于Object的操作
Upload Part
移除节点
步骤 2 登录服务器,执行如下命令完成CCE组件和LVM数据的清理。将如下脚本写入clean.sh文件。

来自：
帮助文档
云容器引擎
用户指南
节点管理
移除节点
云硬盘快照计费说明
欠费如果用户账户出现欠费,按需计费模式的云资源将被冻结进入欠费保留期,您将不能正常访问及使用云资源,保留期内云资源的业务中断,但对于您存储在...数据予以保留。欠费保留期内的云资源仍持续按需计费,此期间用户可以进行账号充值,充值时系统将会自动优先扣除欠费金额。充值成功至账户未欠费状态后,云资源的冻结状态将自动解除,相应云资源可恢复业务。若欠费保留期结束后用户账户仍没有充值成功,云资源将被释放,业务数据将无法恢复。注意欠费保留期的时长为15天。

来自：
帮助文档
云硬盘
计费说明
云硬盘快照计费说明
产品规格和价格
资源包请按节点购买,同一节点下同一类型的多个资源包可以累加后进行费用抵扣; 备份功能费按照备份云主机的系统盘、数据盘空间总和进行收取,可根据本节点下所有待备份云主机的磁盘空间进行资源包大小评估;存储资源费用根据备份数据实际占用的存储空间收费。

来自：
帮助文档
云主机备份
计费说明
产品规格和价格
产品应用场景
场景优势及时发送告警信息:云监控会根据您设置的告警策略,在监控数据达到告警阈值时发送告警信息,让您及时获取异常通知。灵活设置告警规则:用户根据需要设置告警策略后,当监控数据达到告警阈值将触发告警通知,相关告警信息会立即发送给告警规则下的联系人,帮助用户及时了解到云服务的异常状况,从而采取相应措施对异常情况进行处理。搭配使用云主机、云硬盘、弹性IP、物理机、弹性伸缩、负载均衡等。

来自：
帮助文档
云监控服务
产品简介
产品应用场景
文件增量迁移
CDM支持对文件类数据源进行增量迁移,全量迁移完成之后,第二次运行作业时可以导出全部新增的文件,或者只导出特定的目录/文件。目前CDM支持以下文件增量迁移方式: 1.增量导出指定目录的文件 −适用场景:源端数据源为文件类型(OBS/HDFS/FTP/SFTP)。这种增量迁移方式,只追加写入文件,不会更新或删除已存在的记录。 −关键配置:文件/路径过滤器+定时执行作业。 −前提条件:源端目录或文件名带有时间字段。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
进阶实践
增量迁移原理介绍
文件增量迁移
计费模式
:100M/200M/400M/600M旗舰版云防火墙(含WAF/防篡改模块)云防火墙:100M/200M/300M/400M/500M/8...数据库审计云数据库审计

来自：
帮助文档
安全专区
计费说明
计费模式
包年/包月计费操作
成功退订的包年/包月集群无法恢复,同时集群中的用户数据、自动快照也会自动删除且无法再访问。退订包年/包月集群时不会删除手动快照。操作步骤登录数据仓库服务(DWS)管理控制台。选择“集群 > 专属集群”。默认显示用户所有的集群列表。在集群列表中,在指定集群所在行的“操作”列,选择“更多 > 退订”。在弹出退订对话框中,单击“确定”。跳转至CBC退订资源页面,选择退订理由,单击“退订”,在弹出退订对话框中,单击“退订”。订单退订后会自动刷新页面。

来自：
帮助文档
数据仓库服务
用户指南
创建与删除集群
包年/包月计费操作
产品优势
通过云-边-端协同,将数据处理下沉至边缘,提高数据处理响应的速度,同时提升数据存储、处理的安全性,敏感数据处理只在边缘进行,更适合对低时延、高效率、高安全性有要求的客户,如工业互联、智慧交通、智慧园区等。与其它服务对比 ECX与其他服务相比,具有覆盖范围广、低时延等优势。服务位置及覆盖提供能力适用场景 ECX 各地市,全网边缘提供多元算力,满足多种业务需求,用户通过就近部署业务,有效降低网络时延。直播、视频、边缘渲染加速、游戏等。

来自：
帮助文档
智能边缘云
产品简介
产品优势
KafkaConsumer监控
表 KafkaConsumer监控指标说明指标类别指标指标名称指标说明单位数据类型默认聚合方式主题 (topic,kafka的topic监控数据。)

来自：
帮助文档
应用性能管理
产品介绍
指标总览
消息队列
KafkaConsumer监控
编辑安全组
文档数据库服务支持修改实例的安全组,步骤如下: 进入TeleDB数据库控制台。点击“DDS”>“实例管理”菜单,进入实例列表页。选择需要修改的实例,点击该实例的实例ID,进入实例详情。在“网络”栏中找到“安全组”信息,点击“编辑”按钮(部分资源池为“修改”按钮)。在“编辑用户安全组”弹窗中,选择需要修改的安全组,点击“确定”按钮,即可完成安全组修改。

来自：
帮助文档
文档数据库服务
用户指南
数据库管理
编辑安全组
重启实例或节点
文档数据库服务产品支持用户手动重启状态为“运行中”的实例,步骤如下: 进入TeleDB数据库控制台。点击“DDS”>“实例管理”进入实例列表页。在实例列表,选择您需要重启的实例,在操作列点击“重启”按钮,即可完成实例重启操作。对于分片集群实例,点击实例ID进入实例详情页,还支持对Mongos节点、Shard节点单独进行重启。

来自：
帮助文档
文档数据库服务
用户指南
实例生命周期管理
重启实例或节点
如何处理DRDS逻辑库与MySQL实例的先后关系？
DRDS本身不存储数据,将实际库表数据存储在MySQL上,因此创建逻辑库之前需关联至少一个MySQL实例到DRDS,即一般先开通好MySQL实例,再关联到DRDS。相反,如果想取消关联MySQL,则必须先删除逻辑库,才允许取消关联MySQL。注意注销DRDS实例之前,请用户确认删除逻辑库信息。

来自：
帮助文档
分布式关系型数据库
常见问题
操作类
如何处理DRDS逻辑库与MySQL实例的先后关系？
查看科研文件
在控制台左侧导航栏中,选择【数据存储】。在【数据存储】弹出的选项中,选择【科研文件管理】。在【科研文件管理】中,展示了当前可用区的科研文件列表。在科研文件列表中,可以查看和删除科研文件。点击可用区下拉框,可以切换可用区,查看其他可用区的科研文件。

来自：
帮助文档
科研助手
用户指南
数据存储
科研文件管理
查看科研文件
到期
到期处理到期后,服务资源进入15天保留期,您将不能正常使用智能视图服务(资源冻结),但对于您存储在智能视图服务中的数据予以保留。若您在保留期内续费,续费周期自资源续订解冻开始,计算新的服务有效期,按照新的服务有效期计算费用。若保留期到期您仍未续费,存储在智能视图服务中的数据将被删除、服务资源将被释放。

来自：
帮助文档
智能视图服务
计费说明
到期
什么是媒体存储
媒体存储(CT-XStor,原对象存储融合版)是天翼云基于分布式数据存储和媒体处理技术,为客户提供海量视频、图片及其他非结构化数据存取与处理的云服务,具有弹性灵活、安全可靠、高性价比等优点,支持多种存储协议及多档资源类型,深度匹配各类行业场景应用。更多关于媒体存储介绍可参考:产品定义。

来自：
帮助文档
媒体存储
常见问题
一般性问题
什么是媒体存储
查看身份提供商
查看身份提供商会展示身份提供商的详细信息和对应身份提供商的登录地址,可以下载之前配置的元数据和更新元数据文件。

来自：
帮助文档
统一身份认证（一类节点）
用户指南
身份提供商管理
查看身份提供商
购买
在官网首页,单击左上角“产品”,【大数据>数据计算与分析>翼MapReduce】。在【翼MapReduce】界面,单击【立即开通】。在翼MapReduce服务集群创建页面根据实际需求选择集群类型、节点规格、购买时长等后,勾选相关协议,单击【立即购买】,详情请参考快速创建集群。按照页面提示,进入支付页面完成付款。

来自：
帮助文档
翼MapReduce
计费说明
购买

天翼云最新活动

618智算钜惠季

爆款云主机2核4G限时秒杀，88元/年起！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云脑AOne

连接、保护、办公，All-in-One！

中小企业应用上云专场

产品组合下单即享折上9折起，助力企业快速上云

息壤高校钜惠活动

天翼云息壤杯高校AI大赛，数款产品享受线上订购超值特惠

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

弹性云主机

物理机

GPU云主机

轻量型云主机

多活容灾服务

弹性伸缩服务

弹性高性能计算

天翼云CTyunOS系统

一站式智算服务平台

推荐文档

玩转天翼云⑥：Windows主机开启2个远程终端

【2019】633号关于调整非经营性互联网信息服务备案编号的通知

接入机集群管理