数据集成工具_数据集成工具文档介绍内容-天翼云

扩容磁盘
天翼云支持的最大数据盘容量为32TB(32768GB),即您最大可将数据盘扩容至32TB。MBR分区需扩容至2TB以上必须将磁盘分区形式由MBR切换成GPT,期间会中断业务,并且更换磁盘分区形式时会清除磁盘的原有数据,请在扩容前先对数据进行备份。操作步骤在控制中心扩容磁盘容量。登录云主机扩展分区和文件系统。一、在控制中心扩容磁盘容量登录控制中心。单击控制中心左上角的,选择专属云资源池。单击“专属存储>磁盘”,进入磁盘主页面。

来自：
帮助文档
专属云（存储独享型）
用户指南
扩容磁盘
基本概念
用于处理端到端流式数据,对源端产生的事件进行实时抽取、转换和分析并加载至目标端。

来自：
帮助文档
事件总线
产品简介
基本概念
查询分析
数据标签分为请求数据标签与返回数据标签。应用域名应用的域名。服务端IP应用服务端的ip。客户端IP发起请求的ip。登录账号根据账号查询日志。请求方法针对邮件内容进行关键词查询。结果成功或失败。请求关键字支持对请求中的内容进行关键词查询。响应关键字支持对响应中的内容进行关键词查询。文件名称请求携带的文件名称。文件MD5文件的Md5值。审计日志ID唯一标识审计记录的ID。会话ID会话的ID。查看告警日志1.登录API风险监测实例。2.在左侧导航栏选择“查询分析 > 告警日志”,进入告警日志页面。

来自：
帮助文档
数据安全专区
用户指南
API风险监测操作指导
查询分析
JVM监控
表 JVM监控采集参数参数名数据类型应用类型默认值Agent支持的起始版本Agent支持的终止版本描述调用链堆栈采集阈值integerJAVA02.0.4-请求时延超过阈值时自动打印堆栈。表 JVM监控指标说明指标类别指标指标名称指标说明单位数据类型默认聚合方式类加载(classLoading,JVM类加载数量的统计信息。)

来自：
帮助文档
应用性能管理
产品介绍
指标总览
基础监控
JVM监控
节点扩容
背景信息 V2.15版本起,数据湖、数据分析、数据服务、实时数据流与自定义场景支持节点扩容功能。 V2.17版本起,云搜索场景支持节点扩容功能。 V2.17版本起,新增master扩容功能,支持对Hive、HDFS、YARN、ZooKeeper、Kyuubi等服务的部分角色实例进行扩容。数据分析与云搜索场景暂不支持master扩容。仅支持对状态为“运行中”的集群进行节点扩容操作。操作步骤 Core与Task扩容登录翼MapReduce管理控制台。

来自：
帮助文档
翼MapReduce
用户指南
管理集群
节点管理
节点扩容
如何创建迁移任务
操作场景在“存储对象存储对象存储迁移服务迁移任务”控制台界面,您可以创建迁移任务,将其它云厂商存储的数据迁移到天翼云对象存储(ZOS)。前提条件您已经在天翼云对象存储ZOS开通Bucket。您的源端存在待迁移的数据。请确保您的业务处于空闲阶段或非高峰期,避免迁移执行时影响您的业务。请确保您的源端数据已经解冻,并在迁移完成前保持解冻状态,避免因源端数据未解冻迁移失败。

来自：
帮助文档
对象存储
控制台指南
对象存储迁移服务
迁移任务教程
如何创建迁移任务
创建容灾管理中心
容灾形态为同城主备,且生产中心为三方数据中心时:生产中心为三方数据中心时,当前多活容灾平台尚未提供针对该类型数据中心的网络配置服务,用户需自行在第三方数据中心中完成相关网络配置。容灾中心网络配置内容同上表。容灾形态为异地主备,且生产中心为天翼云时:生产中心、容灾中心网络配置内容同上表。容灾形态为异地主备,且生产中心为三方数据中心时:生产中心为三方数据中心时,当前多活容灾平台暂未提供该类型数据中心的网络配置服务,因此用户需自行在第三方数据中心中完成相关网络配置。容灾中心网络配置内容同上表。

来自：
帮助文档
多活容灾服务
用户指南
容灾管理中心
创建容灾管理中心
审计
用户操作后多久可以通过云审计查询到数据:5分钟。其它限制请参考使用限制-云审计。

来自：
帮助文档
海量文件服务 OceanFS
用户指南
高级管理
审计
VPN网关常见问题
VPN网关在完成两侧配置后,如果协商生效选择了“立即协商”,则会自动触发建立连接;如果协商生效选择了“流量触发”,则不会自行建立连接,需要由...数据流来触发协商。如果云上与用户侧数据中心没有交互数据流,IPsec VPN的连接状态会一直处于“第一阶段协商未成功”状态。所谓的数据流,可以是真实的业务访问数据,也可以是主机间ping测数据。推荐您在首次建立连接时,分别验证两侧的交互数据流均可触发建立连接。

来自：
帮助文档
VPN连接
常见问题
VPN网关常见问题
工作负载类
排查项四:节点磁盘空间不足新建节点会给节点绑定一个100G的docker专用数据盘。若数据盘空间不足,会导致重新拉取镜像失败。数据盘当k8s事件中包含以下信息,表明节点上用于存储镜像的磁盘空间已满,需要清理镜像,或扩容磁盘。

来自：
帮助文档
云容器引擎
常见问题
工作负载类
术语解释
主备实例具有以下特征:实例包含一个主节点和一个备节点,支持数据持久化。主备节点通过数据同步的方式保持一致。备节点对用户不可见,不支持客户端直接读写数据。当主节点故障后,备节点自动升级为主节点,无需用户操作。区域区域(Region):从地理位置和网络时延维度划分,同一个Region内共享弹性计算、块存储、对象存储、VPC网络、弹性公网IP、镜像等公共服务。

来自：
帮助文档
云堡垒机（原生版）
产品介绍
术语解释
开源对比
开箱即用,按需使用,支持弹性扩容运维监控缺乏配套的监控运维能力提供多维度的数据可视化监控,快速定位、处理问题增强能力功能单一,无法支持多种场景需求功能丰富,支持消息重试、消息查询、消息轨迹查询、数据自动清理等定制化功能延迟消息/定时消息仅支持18个固定延迟时长,最长延迟2小时。支持秒级的任意延迟时长,最长延迟40天 ACL访问控制访问控制配置复杂灵活配置,一键生效

来自：
帮助文档
分布式消息服务RocketMQ
产品简介
开源对比
添加审核人
在数据架构中,业务流程中的步骤都需要经过审批,因此,需要先添加审核人。只有工作空间管理员角色的用户才具有添加审核人的权限。添加审核人审核人必须是当前工作空间下具有审核权限的成员,需要先在“DataArts Studio首页-空间管理”的工作空间内编辑并添加空间成员。 1.在DataArts Studio控制台首页,选择实例,点击“进入控制台”,选择对应工作空间的“数据架构”模块,进入数据架构页面。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据架构
准备工作
添加审核人
分布式锁
业务场景分析多个并发请求同时修改同一份数据, 比如多个营业员并发对同一个客户的资料进行修改。同时修改同一份数据会并发冲突,导致数据不正确的可能,对业务产生不可预估的影响。目前几乎很多大型网站及应用都是分布式部署的,分布式场景中的数据一致性问题一直是一个比较重要的话题。解决方案对于分布式锁可以基于数据库实现分布式锁 ,但带来的问题是性能不足,无法满足大型应用的高并发使用场景。这时基于缓存(Redis等)去实现分布式锁,带来了显著性能优势。

来自：
帮助文档
分布式缓存服务Redis版
最佳实践
分布式锁
续费、到期与欠费
当欠费超过15天,将视为您主动放弃该服务,您保存在天翼云分布式缓存服务Redis版的全部数据将会被销毁,销毁后数据不可恢复。因此请您及时关注账户余额并及时续费以保证您的服务不受到影响。若您确认不再使用分布式缓存服务Redis版,请务必及时删除存储于分布式缓存服务Redis版上的数据。查看欠费账单欠费后,可以查看欠费详情或者消费账单,具体请参见文档费用中心-账单管理-查看消费账单。

来自：
帮助文档
分布式缓存服务Redis版
计费说明
续费、到期与欠费
新增SQL洞察任务
步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“实例管理”页面,选择目标实例,单击实例名称,进入实例的“基本信息”页签。步骤 5 在左侧导航栏选择“智能DBA助手 > 历史诊断”。步骤 6 选择“全量SQL > SQL洞察”。步骤 7 如果未开启全量SQL收集开关,RDS无法获取全量SQL数据进行分析,如需使用,请单击开启开关。开启后如需关闭,在右上角单击“日志管理”,设置全量SQL开关后,单击“确定”。说明收集全量SQL,实例性能损耗5%以内。

来自：
帮助文档
关系数据库MySQL版
用户指南
问题诊断和SQL分析
SQL分析
新增SQL洞察任务
SQL规范
首要原则:语句尽量简单,不在数据库做复杂运算,不用存储过程、函数数据库难于扩展,扩展能力远不如APP。大消耗性能的SQL很容易对其他SQL产生影响。MySQL优化器不足,处理复杂SQL时容易选择错误执行计划;MySQL没有SQL级并行、HashJoin、分析函数等特性,处理复杂SQL能力不强;在高并发的系统中,复杂SQL容易产生锁问题复杂SQL可拆分多个简单SQLselect,insert一定要带上字段名,尽量少用select *select的数据长度可以影响order by排序算法。

来自：
帮助文档
分布式关系型数据库
开发指南
SQL调优指南
SQL基础规范
SQL规范
移除存储池内的节点
节点涉及存储池的多个故障域,只能强制移除,强制移除节点可能造成数据丢失。

来自：
帮助文档
存储资源盘活系统
API参考
存储池（集群版）
移除存储池内的节点
报告订阅
功能介绍网站接入后,您可以通过创建报告订阅任务,向您的邮箱定时发送网站业务安全的服务报告,减少手动进入控制台手动获取统计数据的成本。前提条件已经订购边缘安全加速平台-安全与加速服务,若未订购,请参见服务开通。在控制台新增域名,请参见添加服务域名。配置了对应的安全防护策略,报告才会生成统计数据,您可以按需配置防护策略,请参见网站防护配置概述。说明默认脱敏显示您的联系方式等敏感信息,点击明文显示时,请您注意保护数据安全! 如何配置报告订阅任务登录边缘安全加速平台控制台。

来自：
帮助文档
边缘安全加速平台
安全与加速
运营管理
报告订阅
查询用户eip列表
page returnObj Array of Objects 返回数据对像数组 returnObj 表 page 参数参数类型说明示例下级对象 current Integer 当前分页 3 size Integer 分页数据记录数 10 total Integer 总数据量 54 表 returnObj 参数参数类型说明示例下级对象 id String eip id 7uyewjjw977343 name String

来自：
帮助文档
云堡垒机（原生版）
API参考
API
2023-08-10
堡垒机控制台
查询用户eip列表
术语解释
主备实例具有以下特征:实例包含一个主节点和一个备节点,支持数据持久化。主备节点通过数据同步的方式保持一致。备节点对用户不可见,不支持客户端直接读写数据。当主节点故障后,备节点自动升级为主节点,无需用户操作。区域区域(Region):从地理位置和网络时延维度划分,同一个Region内共享弹性计算、块存储、对象存储、VPC网络、弹性公网IP、镜像等公共服务。Region分为通用Region和专属Region:通用Region指面向公共租户提供通用云服务的Region。

来自：
帮助文档
云堡垒机（原生版）
产品介绍
术语解释
Map映射函数
函数列表函数名称语法说明mapmap(key1, value1[, key2, value2, ...])将key:value对编排为map...数据。map_from_arraysmap_from_arrays(keys, values) 将键数组和值数组合并为map类型数据。map_keysmap_keys(x) 提取Map中的所有键,并以数组形式返回。map_valuesmap_values(x) 提取Map中的所有值,并以数组形式返回。 map函数将key:value对编排为map类型。

来自：
帮助文档
云日志服务
用户指南
查询与分析
SQL统计分析
SQL函数
Map映射函数
以Go探针方式接入
步骤4:查看接入点信息及鉴权信息应用列表的接入指引会根据您所在资源池提供“通过 HTTP 上报数据”和“通过 gRPC 上报数据”的ENDPOINT(天翼云vpc网络接入点)、鉴权TOKEN信息。步骤5:接入验证通过以上步骤,最后就在APM控制台的应用列表页面选择目标应用,查看监控数据。

来自：
帮助文档
应用性能监控
快速入门
接入Go应用
以Go探针方式接入
集群创建类
Hive与Ranger的使用依赖元数据库配置,若创建集群时配置错误,将导致服务异常。此时,您可前往翼MR Manager进入Hive或Ranger的集群服务详情页,在运维操作中选择“元数据库配置”进行信息重置。

来自：
帮助文档
翼MapReduce
常见问题
集群创建类
产品定义
迁移源端服务器数据盘。启动目的端。说明源端:指的是您计划进行迁移的X86架构的物理服务器,或者位于私有云、公有云平台上的虚拟机。目的端:在创建迁移任务时,您可以选择一个ECS云主机作为目的端。目的端将承载源端迁移后的数据和应用程序,成为新的业务运行环境。在迁移过程中,源端服务器的数据会按照迁移策略进行传输,并覆盖目的端原有的数据。服务端:指主机迁移服务。

来自：
帮助文档
主机迁移服务SMS
产品介绍
产品定义
计费项
资费项计费项含义适用的计费模式云主机备份云主机备份功能费需要备份的云主机的磁盘空间:按照备份云主机的系统盘、数据盘空间总和进行收取。按需计费资源包云主机备份存储费备份数据所占用的存储空间费用:根据备份数据实际占用的存储空间收费。按需计费资源包

来自：
帮助文档
云主机备份
计费说明
计费项
删除参数模板
步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“参数模板管理”页面的“自定义”页签,选择需要删除的参数模板,单击“更多 > 删除”。步骤 5 单击“是”,删除。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
参数模板管理
删除参数模板
删除参数模板
步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“参数模板管理”页面的“自定义”页签,选择需要删除的参数模板,单击“更多 > 删除”。步骤 5 单击“是”,删除。

来自：
帮助文档
关系数据库MySQL版
用户指南
参数管理
删除参数模板
删除参数模板
步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在“参数模板管理”页面的“自定义”页签,选择需要删除的参数模板,单击“更多 > 删除”。步骤 5 单击“是”,删除。

来自：
帮助文档
关系数据库SQL Server版
用户指南
参数模板管理
删除参数模板
资产列表
数据库审计:是否已配置数据库审计; 日志审计:是否已配置日志审计; 主机安全:是否已安装终端安全EDR客户端。安全数据区域汇总展示服务器主机威胁、漏洞安全情况。分组浏览可选择服务器分组进行筛选资产。

来自：
帮助文档
安全专区
用户指南
资产管理
服务器主机
资产列表
RDS应用场景
读写分离 RDS for SQL Server2017企业版支持只读实例,主实例和只读实例都具有独立的连接地址,每个云数据库单机实例、主备实例最多支持创建5个只读实例。用户只需通过添加只读实例的个数,即可不断扩展系统的处理能力,无需更改应用程序。数据多样化存储关系型数据库服务支持与分布式缓存服务区Memcache、Redis和对象存储服务等存储产品搭配使用,实现多样化存储扩展。

来自：
帮助文档
关系数据库SQL Server版
产品简介
RDS应用场景
什么是态势感知？
利用大数据分析技术,态势感知可以对攻击事件、威胁告警和攻击源头进行分类统计和综合分析,为用户呈现出全局安全攻击态势。工作原理态势感知通过采集全网流量数据和安全防护设备日志信息,并利用大数据安全分析平台进行处理和分析,态势感知检测出威胁告警,实时为用户呈现完整的全网攻击态势,进而为安全事件的处置决策提供依据。

来自：
帮助文档
态势感知（专业版）
产品介绍
什么是态势感知？

天翼云最新活动

12.12年度钜惠

爆款云主机2核2G仅需28.8元/年，X实例35.1元/半年起！ 8代机+XSSD新客专享2.5折！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云AI产品特惠

人脸识别+文字识别焕新，新用户免费试用

中小企业服务商合作专区

国家云助力中小企业腾飞，高额上云补贴重磅上线

出海产品促销专区

爆款云主机低至2折，高性价比，不限新老速来抢购！

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

息壤智算

应用商城

定价

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

物理机

多活容灾服务

轻量型云主机

弹性伸缩服务

天翼云CTyunOS系统

训推服务

AI Store

模型推理服务

智算一体机

推荐文档

系统必备组件安装

C++ API

修改自动备份策略

云课堂第五课：CC攻击介绍及如何防御

方法调用说明

入驻条件

FTP搭建部署（附软件下载地址）

活动

息壤智算

应用商城

定价

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

物理机

多活容灾服务

轻量型云主机

弹性伸缩服务

天翼云CTyunOS系统

训推服务

AI Store

模型推理服务

智算一体机

推荐文档

系统必备组件安装

C++ API

修改自动备份策略

云课堂 第五课：CC攻击介绍及如何防御

方法调用说明

入驻条件

FTP搭建部署（附软件下载地址）

云课堂第五课：CC攻击介绍及如何防御