数据集成工具_数据集成工具文档介绍内容-天翼云

参数模板简介
参数模板简介数据库参数是数据库系统运行的关键配置信息,设置合适的的参数值能够提高数据库的稳定性和性能,更好的满足您的业务需求。为了方便您对实例的参数进行管理,天翼云关系数据库MySQL版提供参数模板,您可以根据您的业务场景将不同的参数设置保存为不同的参数模板。并根据业务的不同实现对实例参数的快速批量设置。参数模板类型天翼云关系数据库MySQL版参数模板分为系统参数模板和自定义参数模板两类。系统参数模板:天翼云关系数据库MySQL版根据通用场景,针对不同的数据库版本提供了不同的默认参数模板。

来自：
帮助文档
关系数据库MySQL版
用户指南
参数管理
参数模板简介
配置审计日志导出参数
管理审计日志每次导出到OBS的数据范围是从最近一次成功导出到OBS的日期至本次执行任务的日期。管理审计日志每达到10万条时,系统自动将前9万条审计日志转储保存到本地文件中,数据库中保留1万条。转储的日志文件保存路径为主管理节点“${BIGDATA_DATA_HOME}/dbdata_om/dumpData/iam/operatelog”,保存的文件名格式为“OperateLog_store_YY_MM_DD_HH_MM_SS.csv”,保存的审计日志历史文件数最大为50个。

来自：
帮助文档
翼MapReduce
用户指南
MRS Manager操作指导（适用于2.x及之前）
日志管理
配置审计日志导出参数
产品价格
产品介绍打造的分布式key-Value 数据库服务,兼容Redis 协议,主要用于持久化数据的存储或缓存数据的存储;DCS 提供单机、主备、集群多种实例类型,支持自动容灾切换、在线扩容、数据备份、实例监控等数据库服务。资费标准包括单机实例、主备实例和集群实例。

来自：
帮助文档
分布式缓存服务Redis版
计费说明
专属云计费说明
产品价格
配置DLI源端参数
cdm 数据库名称写入数据的数据库名称。 dli 表名写入数据的表名。 car_detail 分区导入前清空数据,如果设置为true时,呈现此参数。表示分区信息。 year=2020,location=sun

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
管理作业
配置作业源端参数
配置DLI源端参数
可靠性与一致性说明
天翼云混合存储网关的缓存模式采用同步IO(Sync IO)落盘,确保掉电数据不丢失。天翼云混合存储网关基于天翼云云硬盘的高可靠性,确保了缓存盘的数据可靠性。网关将缓存盘的新数据刷新上传到对象存储桶,天翼云对象存储(CT-ZOS)数据设计持久性高达99.9999999999%(12个9)保证了数据的安全可靠。

来自：
帮助文档
混合存储网关
产品介绍
可靠性与一致性说明
监控概述
点击导航栏中的“运维”“监控”,进入“监控”页面,查看系统(集群版)、存储池(集群版)、服务器、数据目录、卷的性能表现。说明监控数据以服务器系统时间为准进行记录。时间被调整,或者集群中的服务器时间不统一,可能导致监控数据不准确。但用户的业务数据不会受到影响。曲线图中指示图标为灰色表示未显示该项的数据,点击对应的图标即可显示。图1 监控(单机版)图2 监控(集群版)

来自：
帮助文档
存储资源盘活系统
用户指南
运维
监控
监控概述
产品定义
若您已有的云硬盘容量不足以满足业务增长对数据存储空间的需求,您可以根据需求进行扩容,最小扩容步长为1GB,单个云硬盘最大可扩容至32 TB。扩容云硬盘时还会受容量总配额影响,系统会显示您当前的剩余容量配额,新扩容的容量不能超过剩余容量配额。您可以申请足够的配额满足业务需求。安全可靠云硬盘支持备份、快照等数据冗余备份功能,为存储在云硬盘中的数据提供可靠保障,防止应用异常、黑客攻击等情况造成的数据错误。

来自：
帮助文档
云硬盘
产品简介
产品定义
扩容磁盘
操作场景随着业务数据的增加,原来申请的数据库磁盘容量可能会不足,需要为关系型数据库实例进行扩容。磁盘空间瞬时使用率达到97%,实例将显示“磁盘空间满”,此时数据库不可进行写入操作。您需要扩容至磁盘空间使用率小于85%才可使实例处于可用状态,使数据库恢复正常的写入操作。建议您设置“磁盘使用率”指标的告警规则,及时了解磁盘使用情况,起到预警作用。关系型数据库服务只支持扩容磁盘存储空间大小,不支持变更存储类型。磁盘扩容期间,服务不中断。说明关系型数据库实例支持无限次扩容。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
管理数据库实例
扩容磁盘
迁移文件时加解密
该加密算法在目的端为加密,在源端为解密,支持的源端与目的端数据源如下。源端支持的数据源:OBS、FTP、SFTP、HDFS(使用二进制格式传输时支持)、HTTP(适用于OBS共享文件的下载场景)。目的端支持的数据源:OBS、FTP、SFTP、HDFS(使用二进制格式传输时支持)。下面分别以OBS导出加密文件时解密、导入文件到OBS时加密为例,介绍AES-256-GCM加解密的使用方法。其它数据源的使用方法一样。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据集成
进阶实践
迁移文件时加解密
手动扩容磁盘
操作场景随着业务数据的增加,原来申请的数据库磁盘容量可能会不足,需要为关系型数据库实例进行扩容。磁盘空间瞬时使用率达到97%,实例将显示“磁盘空间满”,此时数据库不可进行写入操作。您需要扩容至磁盘空间使用率小于85%才可使实例处于可用状态,使数据库恢复正常的写入操作。建议您设置“磁盘使用率”指标的告警规则,及时了解磁盘使用情况,起到预警作用。磁盘扩容期间,服务不中断。关系型数据库服务只支持扩容磁盘存储空间大小,不支持变更存储类型。说明关系型数据库实例支持无限次扩容。

来自：
帮助文档
关系数据库MySQL版
用户指南
实例管理
手动扩容磁盘
创建/复制/编辑分类映射
在左侧导航栏选择“安全编排运营对象”,进入运营对象的数据类页面后,选择“分类&映射”页签,进入分类映射管理页面。在分类映射管理页面中,单击“创建”,进入创建分类映射页面。在创建分类映射页面中,配置分类映射参数信息。在左侧“基本信息配置”栏中,配置分类映射的基本信息,参数说明如下表所示。参数名称参数说明名称自定义分类映射名称。数据类选择对应的数据类。描述自定义分类映射描述信息。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
安全编排
运营对象管理
分类&映射
创建/复制/编辑分类映射
产品规格和价格
多AZ备份:备份数据冗余存储至多个可用区(AZ),可靠性更高。计费示例: 【案例一】备份普通云主机按需计费实例: 例如某用户有100GB的云主机,在苏州资源池购置400GB的云主机备份存储库A,并将该云主机绑定至存储库A中。则收取400GB的云主机备份存储库费用。【案例二】部署数据库等应用云主机按需计费实例: 例如某用户有100GB的部署数据库的云主机,在苏州资源池购置800GB的数据库服务器备份存储库A,并将该云主机绑定至存储库A中。则收取800GB的数据库服务器备份存储库费用。

来自：
帮助文档
云服务备份
计费说明
产品规格和价格
云硬盘卸载问题
卸载数据盘:数据盘支持离线卸载和在线卸载。说明 Linux数据盘挂载点通常为“/dev/vda”以外的挂载点,Windows系统的数据盘通常为C盘以外的盘符。离线卸载:云主机需处于“关机”状态,处于运行状态需关机后进行数据盘卸载。在线卸载:部分操作系统支持在线卸载,即在云主机处于“运行中”状态进行卸载。关于在线卸载的更多详细信息,请参见《弹性云主机用户指南》中的“存储 > **在线卸载磁盘”。

来自：
帮助文档
云硬盘
常见问题
云硬盘卸载问题
清理碎片
操作场景 ZOS采用分段上传的模式上传数据,在以下情况下可能会导致数据上传失败并产生碎片: 网络问题:上传数据时,网络连接不稳定或出现中断。中断上传任务:在上传数据的过程中人为中断了上传任务。设备故障:上传数据的设备发生故障,例如存储介质损坏或读写错误。特殊情况:突然断电、系统崩溃或其他意外情况可能导致数据上传中断或失败。上传失败而产生的碎片会存储到ZOS中,若您重新上传,数据会接着生成的碎片继续上传。若您不需要碎片,可以手动删除碎片。

来自：
帮助文档
对象存储
控制台指南
文件管理
删除
清理碎片
实时会话
提供当前数据库会话快照查询,并支持排序过滤展示。可基于用户、访问主机、库等多维度快速过滤识别到自定义慢SQL会话、活跃会话等。Kill会话功能应对紧急实例恢复,保障数据库的可用性。操作步骤 1、登录管理控制台。单击管理控制台左上角的,选择区域和项目。单击页面左上角的,选择“数据库 > 数据管理服务 DAS”,进入数据管理服务页面。在左侧的导航栏中单击“DBA智能运维 > 实例列表”页签,进入DBA智能运维实例列表页面。在实例列表页面右上角,按照引擎、实例名称或者实例IP筛选实例。

来自：
帮助文档
数据管理服务
用户指南
DBA智能运维
GaussDB
实时会话
概述
操作场景如果您需要在本地数据中心通过VPN连接或云专线以内网方式访问ZOS服务,可以通过配置终端节点连接终端节点服务来实现,具体方式如下: 在云上创建一个VPC,通过配置VPN或云专线将本地数据中心与VPC连接。在VPC中购买终端节点来实现与云上的ZOS和内网DNS类型的终端节点服务的连接,用于为本地数据中心提供通过内网连接到ZOS服务的功能。待终端节点连接建立并正常工作,本地数据中心就可通过内部网络方式访问ZOS服务。

来自：
帮助文档
VPC终端节点
快速入门
配置访问ZOS服务内网地址的终端节点
概述
通过psql命令行客户端连接实例（公网连接）
host_port :数据库端口,为“实例详情”页面中的数据库端口。 :用户名,即 PostgreSQL数据库帐号(默认管理员帐号为 root)。 :数据库名,即PostgreSQL实例里面的数据库,默认初始化的数据库名是postgres。示例: psql -h xx.xx.xx.xx -p xxxx -U root –d postgres

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
连接实例
通过psql命令行客户端连接RDS-PostgreSQL实例
通过psql命令行客户端连接实例（公网连接）
查看容器详情
查看数据挂载数据挂载页面展示了容器的数据挂载信息,包括数据卷名、源路径、目标路径、数据挂载方式、数据加载方式。查看软件信息软件页面展示了容器软件信息,包括软件名称、版本、文件路径等信息。查看配置信息配置页面展示了容器内的配置信息,包括配置项、值、安全建议等信息。

来自：
帮助文档
容器安全卫士
用户指南
容器安全
查看容器详情
到期欠费说明
资源释放时:欠费冻结期到期,销毁云硬盘资源,销毁存储在云硬盘中的数据,数据无法找回。资源使用建议按需计费模式的云硬盘进入欠费冻结期后将影响资源的正常使用,为避免因为账户欠费影响您的业务和数据,建议您开通帐户可用额度预警功能,并关注账户欠费等相关通知信息,以便及时充值,以确保帐户余额充足。

来自：
帮助文档
云硬盘
计费说明
云硬盘计费说明
到期欠费说明
基本概念
VPN网关需要与用户数据中心的对端网关配合使用。 VPN连接 VPN连接是VPN网关和对端网关之间的安全通道,使用IKE和IPsec协议对传输数据进行加密。 VPN连接使用IPsec协议对传输数据进行加密,保证数据安全可靠。 VPN网关带宽 VPN网关带宽指的是出云方向的带宽,即从VPC发往用户侧数据中心的带宽。天翼云保障您已购买的VPN网关带宽性能。按需按流量计费场景下,VPN网关的带宽大小不影响价格。

来自：
帮助文档
VPN连接
产品简介
基本概念
管理企业项目
当集群创建成功后,可以在企业管理的控制台中,执行迁出操作,将数据仓库服务(DWS) 集群从当前所属的企业项目中迁出到另一个企业项目中;或者执行迁入操作,在指定的企业项目中迁入另一个企业项目中的数据仓库服务(DWS) 集群。迁入迁出后,数据仓库服务(DWS) 集群与新的企业项目进行关联,数据仓库服务(DWS) 集群与原企业项目的关联关系将被自动解除。详细操作,请参考企业项目管理用户指南的“企业项目资源管理”章节。

来自：
帮助文档
数据仓库服务
用户指南
集群管理
管理企业项目
卷
客户端--HBlock当前卷上,客户端与HBlock卷之间的数据传输情况。读带宽客户端从HBlock卷读取数据的带宽。写带宽客户端向HBlock卷写入数据的带宽。总带宽客户端与HBlock卷之间的总带宽。读IOPS客户端从HBlock卷读取数据的IOPS。写IOPS客户端向HBlock卷写入数据的IOPS。总IOPS客户端与HBlock卷之间的总IOPS。读时延客户端从HBlock卷读取数据的时延。卷在一个采集周期内的读操作平均时延,反映HBlock单卷处理读请求的时长。

来自：
帮助文档
存储资源盘活系统
用户指南
运维
监控
卷
编辑同步实例
具体步骤 1、登录天翼云官网门户,进入数据传输服务DTS控制台。登录天翼云http://www.ctyun.cn。在天翼云门户首页顶部菜单栏,点击“控制中心”进入【控制中心】页面。在【控制中心】页面顶部的资源池下拉列表框中选择相应资源池(目前支持上海36/华东1/西南1/华北2/长沙42/杭州7 ),找到页面中的“数据库”服务列表,选择“数据传输服务DTS”,进入DTS控制台。 2、进入数据同步实例列表页面。在控制台左侧菜单栏点击“数据同步”,进入【数据同步】实例列表页面。

来自：
帮助文档
数据传输服务DTS
用户指南
数据同步
实例配置和实例编辑
编辑同步实例
编辑迁移实例
具体步骤 1、登录天翼云官网门户,进入数据传输服务DTS控制台。登录天翼云http://www.ctyun.cn。在天翼云门户首页顶部菜单栏,点击“控制中心”进入【控制中心】页面。在【控制中心】页面顶部的资源池下拉列表框中选择相应资源池(目前支持上海36/华东1/西南1/华北2/长沙42/杭州7 ),找到页面中的“数据库”服务列表,选择“数据传输服务DTS”,进入DTS控制台。 2、进入数据迁移实例列表页面。在控制台左侧菜单栏点击“数据迁移”,进入【数据迁移】实例列表页面。

来自：
帮助文档
数据传输服务DTS
用户指南
数据迁移
实例配置和实例编辑
编辑迁移实例
ALM-14013 NameNode FsImage文件更新失败
如果主NameNode数据目录的FsImage没有更新,则说明HDFS元数据合并功能异常,需要修复。在主NameNode节点上,系统每5分钟检测其上的FsImage文件的信息。如果在三个合并周期没有新的FsImage文件生成,则系统产生该告警。当新的FsImage文件生成并成功推送到主NameNode,说明HDFS元数据合并功能恢复正常,告警自动恢复。

来自：
帮助文档
翼MapReduce
用户指南
FusionInsight Manager操作指导（适用于3.x）
告警参考（适用于MRS 3.x版本）
ALM-14013 NameNode FsImage文件更新失败
监控
DBSS监控指标说明功能说明本节定义了数据库安全服务上报云监控服务的监控指标的命名空间,监控指标列表和维度定义,用户可以通过云监控服务提供管理控制台或API接口来检索数据库安全服务的监控指标和告警信息。命名空间 SYS.DBSS 说明命名空间是对一组资源和对象的抽象整合。在同一个集群内可创建不同的命名空间,不同命名空间中的数据彼此隔离。使得它们既可以共享同一个集群的服务,也能够互不干扰。

来自：
帮助文档
数据库安全
用户指南
监控
对称加密概述
对称加密是最常用的数据加密保护方式。KMS提供了简单易用的接口,方便您在云上轻松实现数据加解密功能。密钥管理服务支持主流的对称密钥算法并且提供足够的安全强度,保证数据加密的安全性。

来自：
帮助文档
密钥管理
用户指南
对称密钥运算
对称加密概述
流量
时间粒度流量查询的时间粒度,可以选择:按五分钟查询:统计信息按每5分钟展示,可以选择查询今日、昨日或按日历选择任意1天的数据。按小时查询:统计信息按每小时展示,可以查询今日、昨日、近7日或按日历选择任意7天内的数据。按天查询:统计信息按天展示,可以查询今日、昨日、近7日、近30天或按日历按钮选择任意90天内的数据。数据位置流量查询数据位置,可以选择:全部数据位置:展示所有数据位置的流量之和。具体数据位置:根据显示的数据位置进行选择,查看对应数据位置的流量。

来自：
帮助文档
对象存储（经典版）I型
控制台指南
统计概览
统计
流量
删除卷
对于上云卷,如果删除卷的时候未删除云上数据,后期可以使用卷还原功能进行卷数据还原。删除卷时,应确保卷不包含快照、一致性快照。注意对于上云卷,选择强制删除卷,且同时删除云上数据,可能会有云上数据残留,需要对云上数据进行手动删除。如果卷存在关联克隆卷,且克隆卷未处于“Deleting”或“Flattening”状态,则禁止删除源卷。如果卷有关联的快照或一致性快照,只能强制删除卷。强制删除卷时,将同时删除此卷的快照和一致性快照中的卷快照。同时也会产生数据残留风险,请谨慎操作。

来自：
帮助文档
存储资源盘活系统
API参考
卷管理
删除卷
弹性云主机配置
数据库:如果应用需要使用数据库,需要考虑数据库的类型和规模。对于大型数据库,需要选择配置较高的服务器,以保证数据库的性能和稳定性。应用软件:如果应用需要运行特定的软件,比如Web服务器、应用服务器、大数据平台等,需要选择配置适合运行这些软件的服务器。成本效益在云计算领域,用户只需按需购买和使用资源,不需要投资大额资金购买硬件设备,因此成本效益非常重要。价格:弹性云主机的价格与配置相关,一般来说,配置越高,价格越高。在选择配置时,需要根据应用的需求和预算来综合考虑。

来自：
帮助文档
弹性云主机
最佳实践
弹性云主机配置
关闭读写分离
3、选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。 4、在实例列表中,单击只读实例所在的主实例名称,进入主实例的“基本信息”页面。 5、在左侧导航栏中,单击“数据库代理”,选择“数据库代理”页面。 6、在代理实例模块上,单击“删除代理服务”,在弹框中单击“确定”,删除该代理服务。说明关闭数据库代理服务将同时关闭读写分离。关闭后,使用读写分离地址连接的业务将中断,请将应用连接切换到实例的地址。关闭读写分离功能后,只读实例还会继续收费。

来自：
帮助文档
关系数据库MySQL版
用户指南
数据库代理（读写分离）
关闭读写分离
管理只读实例
步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 在实例列表中,单击实例名称前的,单击目标只读实例的名称,进入实例的基本信息页面,即进入只读实例的管理页面。通过主实例管理步骤 1 登录管理控制台。步骤 2 单击管理控制台左上角的,选择区域和项目。步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。步骤 4 单击只读实例所在的主实例名称,进入主实例的“基本信息”页面。

来自：
帮助文档
关系数据库MySQL版
用户指南
只读实例
管理只读实例

天翼云最新活动

818算力跃迁·礼遇盛夏

爆款云主机2核2G限时秒杀，28.8元/年起！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云脑AOne

连接、保护、办公，All-in-One！

中小企业服务商合作专区

国家云助力中小企业腾飞，高额上云补贴重磅上线

出海产品促销专区

爆款云主机低至2折，高性价比，不限新老速来抢购！

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

弹性云主机

GPU云主机

镜像服务

一体化计算加速平台·异构计算

算力互联调度平台

智算一体机

人脸属性识别

是否戴口罩识别

人脸活体检测

推荐文档

删除备份数据

PostgreSQL

PostgreSQL