活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
- 免费体验DeepSeek，上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens，限时两周
- 云上钜惠 HOT 爆款云主机全场特惠，更有万元锦鲤券等你来领！
- 算力套餐 HOT 让算力触手可及
- 天翼云脑AOne NEW 连接、保护、办公，All-in-One！
- 一键部署Llama3大模型学习机 0代码一键部署，预装最新主流大模型Llama3与StableDiffusion
- 中小企业应用上云专场 产品组合下单即享折上9折起，助力企业快速上云
- 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛，数款产品享受线上订购超值特惠
- 天翼云电脑专场 HOT 移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！
- 天翼云奖励推广计划 加入成为云推官，推荐新用户注册下单得现金奖励
行业应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
数据集成工具_相关内容
- 变更数据库代理的规格3、选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。 4、在“实例管理”页面,选择指定的实例,单击实例名称。 5、在“数据库代理”页面,“代理实例信息”模块的“代理实例规格”处,单击“规格变更”。 您可以根据自己的需求缩小或扩大规格。 规格变更时会提示“修改CPU/内存后,将会重启数据库代理实例。请选择业务低峰期,避免业务异常中断。” 如果切换时间选择“可维护时间段”,任务在变更期间会导致数据库代理实例重启,业务暂时中断。
- 读写外部PostgreSQL数据（postgres_fdw）USER_NAME:目标数据库用户名称。 ROOT_PWD:目标数据库root用户密码。
- Zookeeper持久化数据的迁移在MSE ZooKeeper实例详情页面中,进入数据管理->Znode管理->点击数据导入。 点击上传文件,选中刚刚下载保存的快照文件,点击确定,等待集群重启完毕即可,预计需要等待2-5分钟。 验证数据迁移结果,可以在Znode管理中查看相应的节点数据验证。
- 管理数据库的DDL语句sharding: 分片信息,用于指定数据库分片到多个 RDS 数据源上。@@database name="{db_name}": 指定数据库名称。set datasource ="{rds1}:{rds_number1},{rds2}:{rds_number2}": 指定 RDS 数据源及其分片数量。and number={统一分片数量}: 指定统一分片数量。
- 配置Kafka之间的数据复制本节介绍如何配置Kafka之间的数据复制。 本章节介绍如何创建Kafka数据复制的Smart Connect任务,通过Smart Connect任务可以在两个Kafka实例之间,实现数据的单向或双向复制。 源Kafka实例中的数据会实时同步到目标Kafka实例中。 约束与限制 一个实例最多创建18个Smart Connect任务。 使用Kafka数据复制时,两个Kafka实例间只能通过内网连接。如果两个Kafka实例处于不同的VPC中,请先打通网络。
- 通过Flink作业处理OBS数据本章节主要介绍通过Flink作业处理OBS数据的最佳实践。 应用场景 MRS支持在大数据存储容量大、计算资源需要弹性扩展的场景下,用户将数据存储在OBS服务中,使用MRS集群仅做数据计算处理的存算分离模式。 本文将向您介绍如何在MRS集群中运行Flink作业来处理OBS中存储的数据。 方案架构 Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮点是流处理,是业界最顶级的开源流处理引擎。
- 测试步骤本章节会介绍通过测试工具测试性能的详细步骤。 请根据实际信息,替换数据库、连接IP与用户密码。 导入数据。 (1)使用mysql命令登录数据库,并创建测试数据库 “loadtest” 。 psql -h -p5432 "dbname=postgres user=root password=" <
数据到 “loadtest” 数据库。 - 通过负载均衡地址连接实例（推荐）将InfluxDB客户端安装包上传到弹性云主机(可通过xftp等文件传输工具上传)。 解压客户端工具包。 tar -xzf influxdb-1.7.9-static_linux_amd64.tar.gz 在“influx”工具所在目录下,连接数据库实例。 使用如下命令,进入InfluxDB目录。 cd influxdb-1.7.9-1 连接GeminiDB Influx实例。 .
- 数据库连接类问题Basic Auth Details User:rwuserl Password:购买GeminiDB Influx数据库实例时设置的密码。 InfluxDB Details Database:已创建的数据库名称,例如:telegraf。l User:rwuserl Password:购买GeminiDB Influx数据库实例时设置的密码。 单击“save”。 连接成功后您就可以根据业务需求创建相应的数据看板。
- 锁定/解锁数据库账号本节介绍了如何锁定/解锁数据库账号。 操作场景 通过控制台锁定/解锁数据库账号,数据库账号锁定后,无法登录RDS-PostgreSQL。 操作步骤 登录天翼云官网。 点击控制中心,进入控制中心后,选择目标资源池。 在产品列表页面中找到【数据库】→【关系数据库PostgreSQL版】,点击进入控制台。 在左侧菜单中点击【PostgreSQL】→【实例管理】,点击进入产品实例管理页。 在【实例管理】的实例列表中选择目标实例,点击实例名称进入实例管理详情页。 选择账号管理页签。
- 前提条件本章节会介绍通过常用工具Navicat连接PostgreSQL时需要哪些前提条件。 在进行本文操作之前,您需要完成以下准备工作: Navicat客户端与PostgreSQL数据库网络可达 安全组放开对应登录端口
- 连接RDS-PostgreSQL实例本章节会介绍如何通过工具pgAdmin来操作数据库。 pgAdmin是一个用于设计,维护和管理RDS-PostgreSQL的开源工具。 您可通过pgAdmin客户端可视化操作,连接RDS-PostgreSQL实例。 本章节使用的是pgAdmin版本为6.20,不同版本可能存在差异。 准备工作 准备可访问RDS-PostgreSQL实例的设备。 对RDS-PostgreSQL实例绑定网络地址,保证本地设备可以访问关系型数据库实例绑定的网络。
- Trino如何配置其他数据源？本章节主要介绍翼MapReduce组件Trino如何配置数据源。 增加数据源,在Trino安装目录配置对应的catalog文件即可,以MySQL数据源为例: 创建${trino_home}/etc/catalog/mysql.properties。
- 使用MirrorMaker跨集群数据同步本文主要介绍使用MirrorMaker跨集群数据同步。 应用场景 在以下场景,使用MirrorMaker进行不同集群间的数据同步,可以确保Kafka集群的可用性和可靠性。 备份和容灾:企业存在多个数据中心,为了防止其中一个数据中心出现问题,导致业务不可用,会将集群数据同步备份在多个不同的数据中心。 集群迁移:当今很多企业将业务迁移上云,迁移过程中需要确保线下集群和云上集群的数据同步,保证业务的连续性。 方案架构 使用MirrorMaker可以实现将源集群中的数据镜像复制到目标集群中。
- MRS HDFS数据迁移到OBS关键配置如下: CDM集群的规格,按待迁移的数据量选择,一般选择cdm.medium即可,满足大部分迁移场景。 CDM集群所在VPC、子网、安全组,选择与MRS集群所在的网络一致。 2.CDM集群创建完成后,选择集群操作列的“绑定弹性IP”,CDM通过EIP访问MRS HDFS。 说明 如果用户对本地数据源的访问通道做了SSL加密,则CDM无法通过弹性IP连接数据源。
- 配置Kafka数据转储至OBS表1-2 目标端参数说明 参数参数说明转储启动偏移量支持以下两种转储启动偏移量:最早:最小偏移量,即读取最早的数据。最新:最大偏移量,即获取最新的数据。数据转储周期两次转储的时间间隔,单位:秒,默认配置为300秒。若某个时间段内无数据,则此时间段不会生成打包文件AK访问密钥ID。SK与访问密钥ID结合使用的密钥。转储地址设置存储Topic数据的OBS桶的名称。选择:在下拉列表中选择已创建的OBS桶名称,或者单击“创建转储地址”,新创建一个OBS桶。
- 记录数据迁移入库时间本章节主要介绍记录数据迁移入库时间。 CDM在创建表/文件迁移的作业,支持连接器源端为关系型数据库时,在表字段映射中使用时间宏变量增加入库时间字段,用以记录关系型数据库的入库时间等用途。 前提条件 已创建连接器源端为关系型数据库,以及目的端数据连接。 创建表/文件迁移作业 1.在创建表/文件迁移作业时,选择已创建的源端连接器、目的端连接器。 图 配置作业 2.单击“下一步”,进入“字段映射”配置页面后,单击源字段图标。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
