活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
公共算力服务
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V4-Flash
  • GLM-5.1
  • Qwen3.5-122B-A10B
  • DeepSeek-V3.2(旗舰版)
  • GLM-5(正式版)
智算一体机
  • 智算一体机
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入AI Store公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 智教云电脑
  • WPS 365 天翼云版
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)
  • 琥珀数据压缩归档服务

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      数据集成工具_相关内容
      • 推理缓存加速方案概述
        组合优势 缓存自动卸载:显存减负与数据流转的核心枢纽 HPKV 系统构建了 GPU HBM → Host DRAM → Local NVMe SSD 或 Remote Storage/HPFS 的多级存储体系,通过跨请求的 KV Cache 深度复用,践行“以存代算”理念,有效消除推理服务中的冗余计算开销,显著降低首Token延迟(TTFT)并提升吞吐量,同时降低算力成本。通过智能沉降与基于热度、存储时长、容量的多策略驱逐机制,在各级存储间自动流转数据,精准淘汰冷数据,实现效率与成本的最优平衡。 智能数据预取:掩盖 I/O 延迟的启动加速核心 在推理任务排队等待阶段,通过与全局调度器的深度联动实现智能预取。系统提前将目标 KV Cache 从 SSD/HPFS 异步预取至 Host 内存和 GPU HBM,确保任务启动时数据“即取即用”,有效掩盖 I/O 延迟,将任务启动等待时间缩减 50% 以上,极大提升用户体验。 分布式存储层:容量与性能的弹性基石 深度集成高性能分布式文件系统 HPFS,将 KV Cache 存储容量从 GB 级显存无缝扩展至 PB 级,实现存储资源的独立弹性伸缩。其通过全链路 RDMA 与 IB/RoCE 高速网络协议,提供千万级 IOPS 与 TBps 级吞吐,同时保证亚毫秒级延迟,使海量历史上下文不仅能“存得下”,更能“取得快”。在多轮对话与高并发场景中,该架构以极速 I/O 替代 GPU重复计算,在充分释放昂贵 HBM 资源的同时,保障了推理服务的超低延迟响应,最终达成了存算效率与成本的最佳平衡。 生态兼容:多框架多硬件的广泛兼容 适配天翼云自研 CTyunOS 系列及主流 Linux 操作系统,广泛兼容多款国产化AI算力硬件。无缝对接 vLLM、SGLang 等主流开源大模型推理引擎,全面支持张量并行(TP)、流水线并行(PP)、数据并行(DP)、PD 分离等主流分布式策略及多种注意力机制的模型,灵活适配并支撑多样化的模型架构演进。
        来自:
        帮助文档
        并行文件服务 HPFS
        最佳实践
        HPFS 助力极速缓存最佳实践
        推理缓存加速方案概述
      • 数据迁移
        使用mysqldump迁移MySQL数据 说明:本章节会介绍如何使用mysqldump迁移MySQL数据库数据 迁移准备 关系型数据库服务支持开启公网访问功能,通过弹性公网IP进行访问。您也可通过弹性云服务器的内网访问关系型数据库。 1、准备弹性云服务器或可通过公网访问关系型数据库。 通过弹性云服务器连接关系型数据库实例,需要创建一台弹性云服务器。通过公网地址连接关系型数据库实例,需具备以下条件: (1)先对关系型数据库实例绑定公网地址。 (2)保证本地设备可以访问关系型数据库实例绑定的公网地址。 2、在准备的弹性云服务器或可访问关系型数据库的设备上,安装MySQL客户端。 该弹性云服务器或可访问关系型数据库的设备需要安装和RDS MySQL数据库服务端相同版本的数据库客户端,MySQL数据库或客户端会自带mysqldump和mysql工具。 导出数据 要将源数据库迁移到关系型数据库,需要先对其进行导出。 相应导出工具需要与数据库引擎版本匹配。 数据库迁移为离线迁移,您需要停止使用源数据库的应用程序。 登录已准备的弹性云服务器,或可访问关系型数据库的设备。 使用mysqldump将元数据导出至SQL文件。 MySQL数据库是关系型数据库服务管理所必须的数据库,导出元数据时,禁止指定alldatabase参数,否则会造成数据库故障。 mysqldump databases singletransaction orderbyprimary hexblob nodata routines events setgtidpurgedOFF u p h P sed e 's/DEFINER[ ][ ][^]//' e 's/DEFINER[ ].FUNCTION/FUNCTION/' e 's/DEFINER[ ].PROCEDURE/PROCEDURE/' e 's/DEFINER[ ].TRIGGER/TRIGGER/' e 's/DEFINER[ ].EVENT/EVENT/' > DBNAME为要迁移的数据库名称。 DBUSER为数据库用户。 DBADDRESS为数据库地址。 DBPORT为数据库端口。 BACKUPFILE为导出生成的文件名称。 根据命令提示输入数据库密码。 示例如下: mysqldump databases rdsdb singletransaction orderbyprimary hexblob nodata routines events setgtidpurgedOFF u root p h 192.168.151.18 P 3306 sed e 's/DEFINER[ ][ ][^]//' e 's/DEFINER[ ].FUNCTION/FUNCTION/' e 's/DEFINER[ ].PROCEDURE/PROCEDURE/' e 's/DEFINER[ ].TRIGGER/TRIGGER/' e 's/DEFINER[ ].EVENT/EVENT/' > dumpdefs.sql Enter password: 若使用的mysqldump低于5.6版本,需要去掉“setgtidpurgedOFF”。 命令执行完会生成“dumpdefs.sql”文件,如下: [rds@localhost ~]$ ll dumpdefs.sql rwr. 1 rds rds 2714 Sep 21 08:23 dumpdefs.sql 使用mysqldump将数据导出至SQL文件。 MySQL数据库是关系型数据库服务管理所必须的数据库,导出元数据时,禁止指定alldatabase参数,否则会造成数据库故障。 mysqldump databases singletransaction hexblob setgtidpurgedOFF nocreateinfo skiptriggers u p h P r 上命令的参数说明如步骤2所示。 根据命令提示输入数据库密码。 示例如下: mysqldump databases rdsdb singletransaction hexblob setgtidpurgedOFF nocreateinfo skiptriggers u root p h 192.168.151.18 P 8635 r dumpdata.sql 若使用的mysqldump低于5.6版本,需要去掉“setgtidpurgedOFF”。 命令执行完会生成“dumpdata.sql”文件,如下: [rds@localhost ~]$ ll dumpdata.sql rwr. 1 rds rds 2714 Sep 21 08:23 dumpdata.sql 导入数据 通过弹性云服务器或可访问关系型数据库的设备,用相应客户端连接关系型数据库实例,将导出的SQL文件导入到关系型数据库。 如果源数据库中包含触发器、存储过程、函数或事件调用,则需确保导入前设置目标数据库参数logbintrustfunctioncreatorsON。 导入元数据到关系型数据库。 先用mysql工具连接关系型数据库实例,输入密码后,执行导入命令。
        来自:
        帮助文档
        专属云(关系型数据库MySQL)
        用户指南
        数据迁移
      • 使用Robocopy工具迁移CIFS文件系统
        本文介绍如何使用Robocopy工具实现两个CIFS文件系统的数据迁移。 应用场景 本文适用于同地域同一VPC不同文件系统之间的数据迁移。Robocopy是Windows系统自带的目录复制命令,该功能可以创建两个文件结构完全相同的镜像副本而不用复制任何不需要的重复文件,同时还允许您保留所有相关文件信息,包括日期、时间戳等。 前提条件 已拥有两个CIFS协议文件系统,并且准备一台与源文件系统在同一VPC网络下的Windows弹性云主机。两个文件系统分别作为源文件系统和目标文件系统,源文件系统指含业务数据的旧文件系统,目标文件系统指即将投入使用的新文件系统。 准备工作 1. 注册天翼云官网账号,并完成实名认证,具体操作请参考注册天翼云账号。 2. 登录天翼云官网页面,找到控制中心,具体操作请参考天翼云控制中心。 3. 分别创建一个文件系统和一台弹性云主机,具体操作请参考创建弹性文件系统、创建弹性云主机。 4. 挂载文件系统至弹性云主机,具体操作请参考使用弹性云主机挂载文件系统。 操作步骤 两个CIFS文件系统之间的数据迁移可以分为几个关键步骤: 挂载文件系统>迁移数据>迁移应用 。具体操作步骤如下
        来自:
        帮助文档
        弹性文件服务 SFS
        用户指南
        数据迁移
        NAS文件系统之间的迁移
        使用Robocopy工具迁移CIFS文件系统
      • 产品特性
        AI网关 AI网关是一款面向AI场景的高信念网关解决方案,统一代理大模型API、MCP Server和Agent API,可以作为AI应用与大模型服务、工具和其他Agent之间的桥梁,助力企业提升AI服务的集成效率和治理能力。 功能集 功能 功能详情 实例管理 实例管理 支持网关实例的订购、查看、退订、版本升级、升降配等操作 实例管理 接入点管理 支持关联ELB,实现网关公网访问以及入站负载均衡 实例管理 可观测 支持实例级监控分析 实例管理 消费者认证 支持实例级的消费者认证 Model API管理 管理Model API 支持创建、编辑、调试和删除Model API Model API管理 策略与插件 支持绑定限流、跨域、熔断、黑白名单等多种策略 Model API管理 消费者认证 支持为Model API开启消费者认证鉴权 Model API管理 可观测 支持查看Model API的QPS、请求成功率和平均延迟等指标 MCP 管理 MCP服务 支持创建、编辑、发布、删除MCP服务 MCP 管理 策略与插件 支持绑定限流、跨域、熔断、黑白名单等多种策略 MCP 管理 消费者认证 支持为MCP服务开启消费者认证鉴权 MCP 管理 可观测 支持查看MCP服务的QPS、请求成功率和平均延迟等指标 Agent API管理 管理Agent API 支持创建、编辑、调试和删除Agent API Agent API管理 策略与插件 支持绑定限流、跨域、熔断、黑白名单等多种策略 Agent API管理 消费者认证 支持为Agent API开启消费者认证鉴权 Agent API管理 可观测 支持查看Agent API的QPS、请求成功率和平均延迟等指标 服务管理 LLM 服务 支持从大模型服务商导入服务 服务管理 Agent服务 支持从Agent服务提供商导入服务 服务管理 DNS 域名 指定域名作为上游服务 服务管理 固定地址 指定IP地址作为上游服务 服务管理 容器服务 支持从CCE发现并导入服务 服务管理 注册配置中心 支持从Nacos发现并导入服务 服务管理 函数计算 支持从函数计算发现并导入服务 域名管理 域名管理 支持域名管理,支持HTTP、HTTPS协议 域名管理 证书管理 支持证书管理 插件市场 插件管理 支持插件安装、卸载 插件市场 插件配置管理 支持插件配置启用、停用、绑定、解绑 插件市场 插件分类 丰富的插件分类,传输协议、安全防护、认证鉴权、流量管控等多种插件扩展支持 消费者管理 消费者管理 支持消费者新增、编辑、删除、启用、停用等 消费者管理 消费者授权 支持消费者授权、解除授权,支持实例级、API级、路由级多维授权范围
        来自:
        帮助文档
        云原生API网关
        产品介绍
        产品特性
      • 排查实例CPU使用率高问题
        本页介绍了排查实例CPU使用率高问题的方法。 CPU使用率过高的一般排查步骤如下: 1. 在DDS控制台找到目标实例,单击监控图标, 然后在CPU页签下,查看CPU使用率较高的时间段。 2. 登录对应的实例机器查看系统资源使用情况:首先使用Linux的系统监控工具(如top、htop)或Windows的任务管理器,查看系统整体的CPU使用率和其他资源使用情况。确认是否只有MongoDB进程占用大量CPU资源,还是其他进程也在竞争CPU资源。 3. 文档数据库服务查询性能分析工具与方式: 1. MongoDB Compass等工具来查看当前正在执行的查询(MongoDB Compass 的下载与使用请参见Mongodb的官网下载)。 2. 使用MongoDB shell的db.currentOp()命令,检查是否有某个查询或操作占用了大量CPU资源。 db.currentOp()命令解析: 例如:连接上Mongodb shell 执行以下操作: > db.users.find({ age: { $gte: 18 } }).limit(10) > db.currentOp() { "inprog" : [ { "opid" : 1290, // 操作的唯一标识符 "op" : "query", // 操作类型:查询 "ns" : "exampledb.users", // 操作涉及的命名空间 "query" : { "age" : { "$gte" : 18 } }, // 查询条件 "client" : "127.0.0.1:57852", // 客户端IP地址和端口 "desc" : "conn211", // 操作的描述信息 "active" : true, // 操作是否活动中 "secsrunning" : 5, // 操作已经运行的时间(以秒为单位) "oplog" : false, "numYields" : 0, "locks" : { "Global" : "r", // 全局读锁 "MMAPV1Journal" : "r" // MMAPv1引擎的日志读锁 }, "waitingForLock" : false, "msg" : "", "numYieldOps" : 0, "database" : "exampledb", "command" : { "find" : "users", // 执行的命令:查找操作 "filter" : { "age" : { "$gte" : 18 } }, // 过滤条件 "limit" : 10 // 限制结果数 }, "planSummary" : "COLLSCAN", // 查询执行计划摘要 "lsid" : { "id" : { "UUID" : "e45ea9176c614a5e86812da4af89aa29" }, // 会话ID "uid" : ObjectId("ea6a1a2570a062f88eac10f5") // 用户ID }, "$clusterTime" : { "clusterTime" : Timestamp(1657796621, 1), "signature" : { "hash" : { "BsonData" : "wDUTByvnZXjN+MJB/M9Rlg", "Length" : 28 }, "keyId" : 6963168194386045953 } }, "stale" : false, "txnNumber" : 11, "startAt" : ISODate("20230721T15:57:01.246Z"), "autocommit" : false, "lastWrite" : { "opTime" : { "ts" : Timestamp(1657796621, 1), "t" : 1 }, "lastWriteDate" : ISODate("20230721T15:57:01Z"), "majorityOpTime" : { "ts" : Timestamp(1657796621, 1), "t" : 1 }, "majorityWriteDate" : ISODate("20230721T15:57:01Z") }, "activeShards" : {}, "numShards" : 0, "shardName" : "", "hashed" : false, "batchSize" : 0, "mode" : "scanned" } ] } 4. 确认索引使用情况:检查数据库中的索引是否被有效使用。缺少索引或索引使用不当可能导致查询性能下降,从而导致高CPU使用率。 5. 长时间运行的查询:检查是否有长时间运行的查询,这些查询可能会占用大量CPU资源。优化查询性能或者对长时间运行的查询进行调整可能有助于降低CPU使用率。 6. 调整Write Concern:写操作的Write Concern设置会影响数据写入的确认方式,使用较高级别的Write Concern可能会导致CPU开销增加。根据应用需求,选择合适的Write Concern。 7. 硬件性能:确认文档数据库运行在性能良好的硬件上,包括CPU、内存和磁盘。如果硬件性能不足,可能会导致CPU使用率过高。 8. 日志记录级别:考虑降低文档数据的日志记录级别,减少日志输出对CPU的影响。 9. 压力测试:进行压力测试以模拟生产环境的负载,并观察CPU使用率的变化。通过压力测试可以更好地理解系统的瓶颈和性能问题。 10. 数据分片:如果数据量较大,可以考虑使用文档数据库服务的分片集群,将数据分散到多个节点上,以实现水平扩展和负载均衡。 11. 数据库版本和配置:确保使用的文档数据库服务版本是较新的稳定版本,并根据硬件资源和负载情况合理配置文档数据库服务的参数。 注意 高CPU使用率可能是复杂的问题,可能有多个因素共同导致。在进行问题排查时,建议先在测试环境中进行实验和测试,逐步排查可能的原因。如果问题持续存在,可以考虑寻求专业的文档数据库技术支持。
        来自:
        帮助文档
        文档数据库服务
        用户指南
        性能调优
        排查实例CPU使用率高问题
      • 转换规则配置
        本节为您介绍数据库迁移工具转换规则配置。 经过选择的同步对象,可进行转换规则配置。 增量类型选择 配置要处理的增量类型,分别是增量插入、增量更新、增量删除 数据过滤规则设置 只支持单条件且值为字符串,配置好转换规则之后,点击下一步启动,启动同步,即创建同步任务。并进入同步进度页面 表名映射 点击目标表名,可设置源端和目标端的表名映射关系 列名映射 点击目标字段,可设置源端和目标端的字段名映射关系 是否同步 可选择过滤指定字段不进行同步
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移模块
        数据传输
        数据同步
        任务创建
        转换规则配置
      • 通过备份文件恢复数据(SQL Server)
        本章节介绍如何通过备份文件恢复数据。 操作场景 您可根据业务需要,通过备份文件进行本地存储备份或者数据恢复。可以使用SSMS连接ECS自建数据库或本地数据库进行恢复数据。本章以使用SSMS工具通过备份文件在用户本地数据库上恢复数据为例。 说明 在恢复数据之前,请确保ECS中已安装和备份文件对应的RDS SQL Server同版本或更高版本的数据库服务。 操作步骤 步骤 1下载SSMS客户端安装程序,并上传到ECS进行安装。在网站下载文件“SSMS 18.0(GA)”, 并上传到ECS上。 步骤 2 在ECS上解压已下载的RDS全量备份文件。 步骤 3 启动SSMS客户端。 步骤 4 在SSMS客户端上,登录本地数据库服务。 步骤 5 在SSMS客户端的对象资源管理器中,选定数据库,单击右键选择“还原数据库”。 步骤 6 在“还原数据库”弹出窗口中选择“设备”,在“选择备份设备”弹出框中,指定还原操作的备份介质及其位置,单击“确定”,完成数据还原。 设置“备份介质类型”为“文件”。 单击“添加”,添加已解压至本地的备份文件(.bak文件),根据需要设置相关选项。
        来自:
        帮助文档
        关系数据库SQL Server版
        用户指南
        备份与恢复
        通过备份文件恢复数据(SQL Server)
      • 支持的监控指标
        本章节主要介绍支持的监控指标。 前提条件 使用CDM监控功能,需获取CES相关权限。 功能说明 本节定义了数据集成上报云监控的监控指标的命名空间、监控指标列表和维度定义,用户可以通过云监控提供的API接口来检索监控指标。 命名空间 SYS.CDM 监控指标 CDM集群支持的监控指标详见下表:CDM支持的监控指标 指标ID 指标名称 指标含义 取值范围 测量对象 监控周期(原始指标) bytesin 网络流入速率 该指标用于统计每秒流入测量对象的网络流量。 单位:字节/秒。 ≥0 bytes/s CDM集群实例 1分钟 bytesout 网络流出速率 该指标用于统计每秒流出测量对象的网络流量。 单位:字节/秒。 ≥0 bytes/s CDM集群实例 1分钟 cpuusage CPU使用率 该指标用于统计测量对象的CPU使用率。 单位:%。 0%~100% CDM集群实例 1分钟 memusage 内存使用率 该指标用于统计测量对象的内存使用率。 单位:%。 0%~100% CDM集群实例 1分钟 diskusage 磁盘利用率 该指标为从物理机层面采集的磁盘使用率,数据准确性低于从弹性云主机内部采集的数据。 单位:%。 0.001%~90% CDM集群实例 1分钟 diskio 磁盘io 该指标为从物理机层面采集的磁盘每秒读取和写入的字节数,数据准确性低于从弹性云主机内部采集的数据。 单位:Byte/sec 0~10GB CDM集群实例 1分钟 tomcatheapusage 堆内存使用率 该指标为从物理机层面采集的堆内存使用率,数据准确性低于从弹性云主机内部采集的数据。 单位:%。 0.001%~90% CDM集群实例 1分钟 tomcatconnect tomcat并发连接数 该指标为从物理机层面采集的tomcat并发连接数。 单位:Count/个。 0~2147483647 CDM集群实例 1分钟 tomcatthreadcount tomcat线程数 该指标为从物理机层面采集的tomcat所占线程数。 单位:Count/个。 0~2147483647 CDM集群实例 1分钟 pgconnect 数据库连接数 该指标为从物理机层面采集的postgres数据库连接数。 单位:Count/个。 0~2147483647 CDM集群实例 1分钟 pgsubmissionrow 历史记录表行数 该指标为从物理机层面采集的postgres数据库submission表行数。 单位:Count/个。 0~2147483647 CDM集群实例 1分钟 pgfailedjobrate 失败作业率 该指标为从物理机层面sqoop进程采集的失败作业率。 单位:%。 0.001%~100% CDM集群实例 1分钟 inodesusage Inodes利用率 该指标为从物理机层面采集的磁盘inodes使用率,数据准确性低于从弹性云主机内部采集的数据。 单位:%。 0.001%~0.9% CDM集群实例 1分钟
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据集成
        管理集群
        监控指标
        支持的监控指标
      • 迁移对象选择
        本节为您介绍云迁移服务CMS中数据库迁移工具提供迁移对象选择。 数据库迁移工具提供迁移对象选择,用户可自行选择要迁移的表对象。 操作步骤: 1. 在可选对象方框中勾选要迁移的表或者结构对象,可以进行全选、取消全选、表名搜索操作。 2. 点击“>”箭头按钮,将选中的对象放置已选对象方框中,可进行全选、取消全选。 3. 点击“<”箭头按钮,可将选中的对象移回可选对象方框,不进行迁移。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移模块
        数据传输
        数据迁移
        任务创建
        迁移对象选择
      • 作业开发流程
        本章节主要介绍作业开发的作业开发流程。 作业开发功能提供如下能力: 提供图形化设计器,支持拖拉拽方式快速构建数据处理工作流。 预设数据集成、计算&分析、资源管理、数据监控、其他等多种任务类型,通过任务间依赖完成复杂数据分析处理。 支持多种作业调度方式。 支持导入和导出作业。 支持作业状态运维监控和作业结果通知。 提供编辑锁定能力,支持多人协同开发场景。 支持作业的版本管理能力。 开发作业前,您可以通过下图了解数据开发模块作业开发的基本流程。 作业开发流程 1. 新建作业:当前提供两种作业类型:批处理和实时处理,分别应用于批量数据处理和实时连接性数据处理,具体请参见新建作业。 2. 开发作业:基于新建的作业,进行作业开发,您可以进行编排、配置节点。具体请参见开发作业。 3. 调度作业:配置作业调度任务。具体请参见调度作业。 − 如果您的作业是批处理作业,您可以配置作业级别的调度任务,即以作业为一个整体进行调度,支持单次调度、周期调度、事件驱动调度三种调度方式。具体请参见调度作业章节中的“配置作业调度任务(批处理作业)”。 − 如果您的作业是实时处理作业,您可以配置节点级别的调度任务,即每一个节点可以独立调度,支持单次调度、周期调度、事件驱动调度三种调度方式。具体请参见调度作业章节中的“配置节点调度任务(实时作业)”。 4. 提交版本并解锁:作业调度配置完成后,您需要提交版本并解锁,提交版本并解锁后才能用于调度运行,便于其他开发者修改。具体请参见提交版本并解锁。 5. (可选)管理作业:作业开发完成后,您可以根据需要,进行作业管理。具体请参见(可选)管理作业。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据开发
        作业开发
        作业开发流程
      • 与其他服务关系
        本文将为您介绍天翼云CLI工具与其他云产品之间的关系 天翼云CLI工具是云资源的统一上层管控工具,本身不产生业务算力与服务能力,仅作用于管控调度,服务于全品类天翼云业务云产品,是天翼云原生配套管控工具。和OpenAPI、开发者SDK、各类IaaS/PaaS/AI云产品互为互补、协同共生,共同构成系统化、代码化、智能化三位一体云上管控体系。 与天翼云各类云产品的关系 CLI工具当前已适配天翼云27款云产品,覆盖IaaS、PaaS、AI服务,具体可在安装CLI后,在命令行中通过以下指令,查询天翼云CLI支持的产品列表,或直接参考 产品列表 python ctyuncli help 列出所有产品 与天翼云AI智能体产品 CLI原生对接天翼云自研TeleAgent、OpenClaw全系AI智能体产品,是平台标准化调用工具。智能体无需改造接口、无需开发适配层,可直接下发CLI指令调度云资源,打通大模型与底层云产品的联动链路,实现AI自主巡检、智能扩容、故障自愈,是天翼云智能化运维生态的核心枢纽工具。
        来自:
        帮助文档
        天翼云CLI工具
        产品介绍
        与其他服务关系
      • 概述
        支持的文件类型 支持嵌入/提取水印的文件类型 具体的文件格式 文档 PDF、PPT、Word、Excel 图片 .jpg、.jpeg、.jpe、.png、.bmp、.dib、.rle、.tiff、.tif、.ppm、.webp、.tga、.tpic、.gif json数据 整型、浮点型、字符串型。 使用场景 数字水印在政府部门、医疗、金融、科研等行业应用广泛,主要用于版权保护和追踪溯源。在数据版权保护方面,数字水印技术可用于数字作品被下载或复制时,数据库业务需要提供数据给第三方时,可以通过数字水印技术明确版权归属,有效解决版权纠纷。在使用过程中可追踪溯源方面,数字水印技术可以记录使用者信息,以识别身份并提醒使用者注意安全规范。当发生数据泄露事件时,可以通过数字水印技术追踪泄露源头,挖掘泄露原因。 优势特点 1. 支持明暗双重水印:数字水印技术可以根据需要对数据进行明水印或暗水印处理,不影响使用效果,同时有效应对图像处理工具或拍照截图等绕过方式窃取数据。 2. 可检测性强、不易被篡改:数字水印技术可以检测并保证数据的完整性,不会被篡改或丢失。 3. 高鲁棒性:数字水印技术在传输或使用过程中具有较高的鲁棒性,即使数据载体经过改动或受到攻击损坏后,仍然有较大概率提取出水印。
        来自:
        帮助文档
        数据安全中心
        用户指南
        数据隐私保护
        数据水印
        概述
      • 数据标准智能助手
        本章节主要介绍数据标准智能助手。 数据标准智能助手专门用于辅助数据标准治理的智能体。它通过自然语言处理技术,将复杂的标准制定流程转化为简单的对话交互,支持从单字段定义到大规模标准文档解析的全场景覆盖。 快速入门:进入助手入口 访问助手:在 首页菜单点击“数据标准智能助手”进入。 初始界面:进入后,助手会展示欢迎语及其核心能力,并提供预设的“示例问法”(如:新增身份证的标准),点击即可快速发起任务。 工具栏操作:对话框下方设有快捷操作项,支持一键发起 [新增标准]、[编辑标准] 或 [删除标准]。 核心场景操作指南 1.自然语言智能生成标准 通过描述业务需求,助手将调用底层 standardmcpserver 智能推荐标准属性。 发起需求:在对话框输入“新增身份证的标准”。 自动执行:助手将启动【新增字段标准】工具,实时检索行业规范并进行查重判断。 结果预览:系统会在对话流中展示“标准列表”卡片,自动填充以下关键字段: 标准中文名/英文名:如“身份证” / idcard。 描述:如“身份证标准格式:长度18位”。 数据类型与长度:如“字符型”、长度“18”。 人工干预: 用户可直接在列表中修改参数,或点击“AI智能补全”完善缺失信息。 目录确认:在卡片顶部选择该标准归属的“目录”。 应用保存:检查无误后点击“应用”完成标准创建。 2.标准运维管理(编辑/上线/删除) 查询:输入“查询数据标准列表”,助手展示前 20 条标准详情(含版本、创建人等)。 状态变更:通过对话输入“上线/下线数据标准 XXX”,助手确认意图后执行。 注意:已经处于“已发布”状态的标准不允许直接修改,需下线后方可编辑。
        来自:
        帮助文档
        数据智能中台
        用户指南
        数据智能助理
        业务助手
        数据标准智能助手
      • 热点数据存储
        业务场景 一般是现有系统已经存在瓶颈,热点查询业务首先迁移到缓存。数据的变更还是在数据库,对新的业务系统不透明。 业务要求 数据由其他可靠性存储设备保存,缓存只保存热点数据 通过设置缓存失效时间来保证缓存更新 缓存数据不存在则重新获取 增加数据核对工具异步刷新缓存 需求分析 1. 建立用户、建立redis数据分区、建立访问分区,选择热点存储模版(刷盘策略、主从同步策略不一样); 2. 建立环境后,建立分组(表),根据开发示例验证分组可用; 3. 缓存API使用可以参考开发示例代码; 4. 使用api设置缓存key超时时间; 5. 缓存使用加载可以参考热key的缓存构建; 6. 使用定时任务扫描数据源获取增量更新数据修改缓存或者在数据变更事件发送的业务代码处更新缓存。 需要注意的问题:缓存穿透 可靠性存储的方案 若配置数据对数据一致性要求较高或者热点变化非常频繁可以考虑可靠性存储场景来设计,但此方案需要业务数据的修改透明,能整体迁移到缓存。如下缓存部分的设计将变的简单 业务要求: 数据由缓存保存,不允许丢失。 需求分析:配置类数据可以整体当次热点数据,存放在缓存,简化系统架构方案 建立redis数据分区,选择持久化存储模版(刷盘策略、主从同步策略不同); 缓存API使用可以参考开发示例代码。
        来自:
        帮助文档
        分布式缓存服务Redis版
        最佳实践
        热点数据存储
      • 申请许可
        本节主要介绍申请许可 目前,RDA云迁移工具软件可通过天翼云官网帮助中心下载,安装部署完成后需根据生成的硬件ESN在官网订购页面申请许可。 购买前须知 1、订购页面订购的是RDA云迁移工具授权,订购授权需要完成云迁移工具控制端的安装并获取硬件码文件ESN。具体操作查看《RDA云迁移工具用户指南》 2、授权一经提供6个月内有效。 3、订单申请成功后,会有天翼云运营人员生成许可,可在订单附件中下载,服务时间:5天×8小时(法定节假日除外),请您耐心等待。在此期间可使用试用许可激活云迁移工具使用。 4、该产品不涉及升级、续订、退订,使用过程中如遇问题,请提交工单进行解决。 操作步骤 步骤 1 登录天翼云官网,使用账号登入。 步骤 2 在系统首页,单击【产品 > 管理工具 > RDA云迁移工具】。 步骤 3 在【RDA云迁移工具】产品详情页,单击【申请开通】。 步骤 4 在【RDA云迁移工具】订购页面,如实填写相应信息。 步骤 5 填写完毕,勾选“我已阅读,理解并接受《天翼云迁移服务协议》”,点击立即订购,弹出提示弹窗。 步骤 6 进入产品视图页面,云网门户管理中心产品视图云产品实例,下载附件中的激活文件,上传至软件完成激活。
        来自:
        帮助文档
        云迁移工具RDA
        用户指南
        申请许可
      • 产品功能
        一级分类 二级分类 功能点 功能点描述 核心功能 集群 一键快速部署 支持界面化订购,自动开通Kubernetes集群,兼容原生Kubernetes 核心功能 集群 节点管理 支持界面化进行扩缩容,支持节点标签、调度设置 核心功能 集群 命名空间 支持资源配额设置、支持网络隔离设置 核心功能 集群 运行时 支持Docker、Containerd 核心功能 工作负载 生命周期管理 支持应用创建、启停、扩缩容、注销等生命周期操作 核心功能 工作负载 工作负载 支持界面化发布有状态、无状态、守护进程、任务、定时任务等工作负载 核心功能 工作负载 多容器 支持一个Pod中发布多个容器,支持设置特权级容器 核心功能 工作负载 探针 支持界面化自定义策略检测应用的可用性 核心功能 工作负载 滚动升级 支持业务不中断平滑升级 核心功能 工作负载 亲和性/反亲和 支持主机及应用的亲和性与反亲和性调度 核心功能 工作负载 资源管控 支持容器级别的资源需求和限额设置,防止资源的浪费 核心功能 弹性调度 Pod弹性伸缩 支持自动伸缩规则设置,基于CPU/内存等资源自动伸缩应用,支持HPA、CronHPA和基于事件的弹性策略 核心功能 弹性调度 节点弹性伸缩 支持节点弹性伸缩 核心功能 弹性调度 负载感知调度 支持调度Pod时考虑节点的实际负载 核心功能 路由 多协议支持 支持TCP、UDP、HTTP以及HTTPS等协议 核心功能 路由 Service支持 支持NodePort、ClusterIP,LB等对外提供访问、支持无头服务 核心功能 路由 Ingress支持 支持Nginx Ingress 核心功能 路由 灰度/蓝绿发布 支持支持灰度/蓝绿发布,支持应用的多个版本在线运行 核心功能 配置管理 配置项 支持配置项 核心功能 配置管理 Secret 支持保密字典、凭证等 核心功能 网络 网络插件 支持高性能网络插件Calico 核心功能 网络 网络插件 支持自研网络插件CubeCNI实现容器与虚拟机网络直通 核心功能 网络 网络策略 支持容器访问策略和流控限制 核心功能 存储 多类型存储 支持Local、NFS、Ceph常见持久存储类;支持csi驱动程序,集成天翼云的云硬盘、弹性文件、对象存储等云存储 核心功能 存储 持久卷声明 支持界面化创建持久卷声明,支持监控存储使用量 核心功能 存储 持久卷 支持界面化创建持久卷,支持持久卷的动态生成 核心功能 日志管理 日志中心 支持容器日志的采集、存储和检索,支持集成三方开源日志解决方案 核心功能 监控与告警 监控中心 支持集群、节点、容器多级别的监控与告警配置,支持审计日志,支持集成三方开源监控解决方案 核心功能 系统管理 接入平台 作为平台组件对外提供服务,支持订单方式进行集群的开通、扩缩容、删除等 核心功能 系统管理 权限管理 多租户支持,租户资源隔离,用户角色授权,支持集群和命名空间的授权 高级功能 应用 插件市场 支持通过Chart对插件打包发布到插件市场,界面化一键部署监控等插件,通过插件与其他产品集成 高级功能 应用 模板市场 支持通过Chart对应用打包发布到模板市场,界面化安装部署等 高级功能 应用 有状态应用 支持挂载持久化存储,实现有状态应用容器化部署 高级功能 能力开放 OpenAPI 支持开放API,对接持续集成和私有部署系统 高级功能 高可用部署 Kubernetes高可用 支持Kubernetes高可用部署 容器镜像服务 镜像 镜像仓库 支持对接多镜像中心,支持界面化创建仓库 容器镜像服务 镜像 租户隔离 支持公开仓库的可见性及私有仓库的不可见性 容器镜像服务 镜像 镜像管理 支持管理海量镜像,支持多版本镜像 容器镜像服务 镜像 镜像收藏 支持快速检索镜像并收藏 容器安全 授权 权限管理 支持基于k8s RBAC授权 容器安全 配置安全 容器安全策略 支持SecurityContext配置
        来自:
        帮助文档
        云容器引擎 专有版/托管版
        产品介绍
        产品功能
      • 协议服务概述
        HPFS 通过协议服务功能实现 HPFSPOSIX 和 NFS 多协议互访,一份数据多种业务平台同时访问。本文介绍协议服务的功能介绍、适用场景、使用限制和整体流程。 功能介绍 协议服务提供标准 NFS 协议访问 HPFS 文件系统的能力,满足以下需求: 无缝集成弹性云主机与物理机:支持在弹性云主机 ECS 或物理机(通过 VPC/VPCE),直接挂载并访问 HPFS 文件系统。 多协议互访:通过 HPFSPOSIX 直接挂载,与通过协议服务功能(NFS 协议)挂载,是两个独立的访问通道。无论使用 HPFSPOSIX 客户端还是协议服务的 NFS 客户端,均可同时访问同一份文件数据。在一端创建或修改的文件,在另一端可见。 注意 如需确认资源池/集群对 NFS 协议的支持情况,请前往产品能力地图中的【协议服务 NFS 挂载云主机】列进行查询。 适用场景 高效数据上云与训练准备 在智算模型训练场景中,用户需提前将海量数据集上传至 HPFS。如使用高性能物理机仅作数据传输,资源利用率低且费用高昂。又由于数据集体量庞大传输时间长,训练前期准备效率降低。 协议服务功能满足将 HPFS 直接挂载到云主机上,实现将本地数据通过弹性云主机(配置弹性 IP)高效上传至 HPFS,利用按需付费的弹性云主机作为传输节点,显著节省成本。 数据上传完成后,再将 HPFS 挂载至 GPU 物理机集群进行模型训练,实现资源按需切换。 灵活经济的模型推理部署 模型推理对延迟和吞吐量敏感,但计算强度通常低于训练阶段。DeepSeek 等模型的开放推动了轻量化 AI 应用的爆发式增长,越来越多的中小企业及个人开发者倾向于使用弹性云主机部署和运行其 AI 推理应用。 用户可根据模型规模和实时推理需求,灵活选择性价比最优的弹性云主机实例类型。然后通过协议服务功能在弹性云主机上挂载 HPFS,进行敏捷开发与发布。
        来自:
        帮助文档
        并行文件服务 HPFS
        用户指南
        协议服务
        协议服务概述
      • 产品介绍
        本节介绍分布式缓存服务Redis版产品定义。 产品定义 分布式缓存服务Redis版是一种兼容Redis协议的NoSQL内存数据库产品,具备高性能、高可用、可水平扩展的特性,提供丰富的产品类型满足用户高读写性能场景需求,主要用于持久化数据的存储或缓存数据的存储。 为什么选择天翼云分布式缓存服务Redis 全面兼容Redis协议:基于开源Redis协议进行安全加固,客户端兼容Redis协议。 丰富的产品规格实例:提供多种缓存实例规格,灵活满足应用的多样化需求。 可靠的备份与恢复机制:支持手动备份与定时自动备份,自定义备份策略,实现将已备份的数据恢复到缓存实例中。 完善的监控运维工具:提供完备的日志、监控和告警功能,异常情况能自动告警并通知相关人员,多种监控指标及服务器运行情况支撑实时、历史监控运维。 对比自建原生Redis的优势 对比自建原生Redis,天翼云分布式缓存服务具备以下优势: 差异项 天翼云分布式缓存服务Redis 原生Redis 安装部署 实时开通,支持一键升级,无需关心服务部署的硬件及软件。 需要自行完成采购硬件、机房托管、部署机器等工作,周期较长,且需要自行维护节点关系。 备份恢复 支持手动备份与定时自动备份,一键恢复还原备份点。 仅支持一次性全量恢复。 运维管理 提供可视化运维监控平台,支持数十种的监控指标的实时监控。 需使用管理方式复杂的第三方监控工具实现服务监控。 扩展能力 支持节点性能线性扩展,支持在线扩容,业务无感知。 并发受限,升级依赖社区。
        来自:
        帮助文档
        分布式缓存服务Redis版
        产品介绍
        产品介绍
      • 产品定义
        术语 说明 日志项目 日志项目是用于管理日志服务的资源单元,通常可将某个独立项目/业务的日志对应至一个日志项目中。每个日志项目可包含多个日志单元。 日志单元 日志单元是进行日志数据的采集、存储、检索和分析的基本单元,日志数据以日志单元的方式进行管理,通常可将一个应用/服务下的日志采集至一个日志单元中。 日志 日志是应用系统运行过程中产生的记录数据,这些数据包括用户的操作、接口的访问、系统发生的错误等。通常以文本形式存储在应用系统所在的设备上。 采集器 云日志服务提供的日志采集工具。 主机组 主机组是一组需要采集日志的云主机列表,是一个虚拟分组,云日志服务通过主机组来管理所有需要通过采集器采集日志的云主机。 采集配置 采集配置是指采集器执行日志采集时的策略,包括文件采集路径、分词模式等。
        来自:
        帮助文档
        云日志服务
        产品介绍
        产品定义
      • 概览
        本章节介绍DRDS最佳实践相关内容,从而帮助用户更好地使用DRDS。 章节名称 简介 分片数目的选择 介绍DRDS如何更合理地选择分片数目。 分片策略 介绍DRDS如何更合理地进行分片。 单片表和全局表 介绍了DRDS单片表和全局表的创建和使用。 读写分离 介绍了DRDS读写分离的配置与使用。 DRDS事务模型 介绍了DRDS提供针对分布式节点的场景下的分布式事务解决方案。 通过JDBC连接池连接DRDS 介绍了如何通过JDBC连接池与DRDS对接,实现数据操作。 数据迁移方案 介绍了通过数据同步工具进行DRDS数据迁移的详细操作步骤。 SQL使用规范 介绍了SQL使用规范的通用八个原则供用户参考。
        来自:
        帮助文档
        分布式关系型数据库
        最佳实践
        概览
      • 工作流设计器
        云工作流提供一个低代码、可视化的工作流设计器, 可降低用户学习云工作流流程定义的学习成本, 通过拖拽、编辑等操作完成工作流流程编排以及对应状态输入、输出和错误重试等设置, 提高用户工作流编排的效率。 界面概览 CloudFlow Studio编辑页 状态浏览区 流程画布区 参数配置区 YAML编辑页 工作流配置 界面概览 1、菜单栏 可以在云工作流设计器中CloudFlow Studio 、YAML 和工作流配置三个功能区域进行切换。 2、状态浏览区 包含两个tab, 操作 和流程 操作tab 提供云工作流可集成的包含网络与CDN、计算、存储、容器与中间件、数据库以及人工智能在内的天翼云云产品的OpenAPI列表以及进行集成优化的常用操作 。可以将其拖拽到流程画布区中, 每个API是一个Operation(操作)类型的状态(State)。 流程tab 提供流程控制类状态列表, 不负责具体执行内容。提供Switch(条件分支)、Noop(传递)、Fail(失败)、Parallel(并行)、Sleep(暂停)以及Foreach(迭代)五个状态。可以将其拖拽到流程画布区中, 用于控制工作流执行流程逻辑。 3、流程画布区 可以拖拽状态浏览器的操作tab 、流程tab下的任意状态节点到流程画布区, 可视化编排和展示工作流流程 另外还包含了回退、前进、删除、缩放以及居中等功能按钮方便根据流程画布区对正在编排的流程可进行一些编辑操作。 4、参数配置区 在流程画布区拖拽进入状态节点后,单击选中目标状态节点, 可在右侧的参数配置区对状态的属性查看和编辑配置。 5、功能按钮区 包含工作流流程的保存 、退出 以及执行的功能按钮。
        来自:
        帮助文档
        函数计算
        用户指南
        云工作流
        控制台操作
        工作流设计器
      • 诊断工具
        本文简述如何通过诊断工具查询指定IP是否为天翼云CDN节点IP以及对应归属地。 功能介绍 天翼云全站加速服务提供IP归属查询工具,您可以使用该工具检测某IP地址是否为天翼云CDN节点IP,同时获取IP归属地。 应用场景 场景一:配置全站加速服务后,可通过该工具验证客户端的请求是否成功到达天翼云CDN节点IP。如果不是天翼云CDN节点IP,则代表配置未生效;如果是,则可以继续验证请求是否正常。 场景二:当您的网站访问异常时,可通过该工具查询用户访问的IP是否为天翼云CDN节点IP,来排查网站访问异常的原因。如果IP地址是天翼云CDN节点IP,您可以继续排查问题原因或者反馈给我们处理。如果IP地址不是天翼云CDN节点IP,则要查看CNAME是否配置正确,DNS解析是否正常等。 诊断工具说明 1. 登录客户控制台。 2. 单击左侧导航栏【诊断工具】,进入【IP归属查询】页面,输入查询的地址。 3. 输入查询后将显示该地址是否为天翼云CDN节点以及对应归属地。 说明 查询IP为天翼云CDN节点IP,验证结果显示为CDN节点,显示IP归属地。 查询IP不为天翼云CDN节点IP,验证结果显示为不是CDN节点,IP归属地未知。
        来自:
        帮助文档
        全站加速
        用户指南
        诊断工具
      • 从本地存储迁移数据
        从Spark导入详细示例 要通过Spark将本地存储的数据导入到云数据库ClickHouse,您可以按照以下步骤进行操作: 1. 准备工作: 确保您已经安装了Spark,并配置好了与云数据库ClickHouse的连接。 确保您已经在本地存储中准备好了要导入的数据文件。 2. 导入所需的依赖: 在Spark应用程序中添加所需的依赖项以支持与云数据库ClickHouse的连接。您需要使用ClickHouse JDBC驱动程序和Spark的相关依赖。例如,在Maven项目中,您可以添加以下依赖项: xml ru.yandex.clickhouse clickhousejdbc 0.4.1 根据您使用的构建工具和版本,请相应地配置依赖项。 3. 编写Spark应用程序: 创建一个Spark应用程序,通过Spark读取本地存储的数据文件,并将数据导入到云数据库ClickHouse中。下面是一个示例代码: scala import org.apache.spark.sql.{SparkSession, SaveMode} object ClickHouseDataImporter { def main(args: Array[String]): Unit { // 创建SparkSession val spark SparkSession.builder() .appName("ClickHouse Data Importer") .getOrCreate() // 读取本地存储的数据文件 val data spark.read.format("csv") .option("header", "true") // 如果数据文件包含头部,则设置为true .option("inferSchema", "true") // 自动推断列的数据类型 .load("/path/to/data/file.csv") // 替换为实际数据文件的路径 // 将数据保存到ClickHouse数据库中 data.write .mode(SaveMode.Append) // 指定保存模式,可以根据需求更改 .format("jdbc") .option("url", "jdbc:clickhouse://yourclickhousehost:port/database") // 替换为实际的云数据库ClickHouse连接URL和目标数据库 .option("dbtable", "yourtable") // 替换为目标表的名称 .option("user", "yourusername") // 替换为云数据库ClickHouse的用户名 .option("password", "yourpassword") // 替换为云数据库ClickHouse的密码 .save() } } 在上述代码中,您需要替换以下内容: "/path/to/data/file.csv":实际的本地数据文件路径。 "jdbc:clickhouse://yourclickhousehost:port/database":实际的云数据库ClickHouse连接URL和目标数据库信息。 "yourtable":目标表的名称。 "yourusername":云数据库ClickHouse的用户名。 "yourpassword":云数据库ClickHouse的密码。 4. 运行Spark应用程序: 将您的Spark应用程序打包,并将其提交到Spark集群或本地运行。根据您的环境和需求,选择适当的方式来运行Spark应用程序。 例如,如果您使用的是Sparksubmit命令行工具,可以执行以下命令来提交应用程序: sparksubmit class ClickHouseDataImporter master local[] path/to/your/app.jar 这将启动Spark应用程序并开始将本地存储的数据导入到云数据库ClickHouse中。 说明 上述示例代码仅提供了一个基本的框架,您可能需要根据实际需求进行调整和优化。另外,还可以使用Spark的分布式计算能力和数据处理功能来进行更复杂的数据转换和导入操作。
        来自:
        帮助文档
        云数据库ClickHouse
        ClickHouse数据迁移
        从本地存储迁移数据
      • 术语解释
        本文将为您介绍公共传输通道的术语概念。 中国电信下一代承载网 中国电信下一代承载网(CN2DCI)是指中国电信融合原CN2和DCI两张网络之后构建的面向2B业务的差异化、智能化、服务化专用承载网,目标建成技术领先、行业最有竞争力的2B网络。 CN2DCI网络新平面 中国电信基于SDN架构,在CN2DCI网络基础上通过引入SRv6+EVPN等技术重构的高质量、高可靠、差异化精品网络。 SRv6 SRv6(Segment Routing IPv6)是一种网络转发技术,SR指Segment Routing技术,v6指原生IPv6,SRv6就是IPv6+Segment Routing,是SR技术的IPv6演进版本。 多协议标签交换 多协议标签交换(MultiProtocol Label Switch),简称为MPLS,结合二层交换和三层路由的集成数据传输技术。 虚拟专网 虚拟专网(VPN),全称为虚拟专用网络(Virtual Private Network),利用开放的公共网络建立专用数据传输通道,将不同站点连接起来并提供安全的端到端数据通信的广域网组网方式。 EVPN EVPN(Ethernet Virtual Private Network)是一种用于二层网络互联的VPN技术,采用类似于BGP/MPLS IP VPN 的机制,通过扩展BGP协议,使用扩展后的可达性信息,使不同站点的二层网络间的MAC地址学习和发布过程从数据平面转移到控制平面。 运营商边界设备 运营商边界设备(Provider Edge),简称为PE,位于运营商网络边缘,用于连接CE设备,一般为路由器。
        来自:
        帮助文档
        公共传输通道
        产品介绍
        术语解释
      • 地图工具
        本节主要介绍如何在智能视图服务控制台使用地图的编辑操作,包括指针、多边形、兴趣点和文本工具。 进入地图主界面后点击右上方【开始编辑】按钮即可对地图信息进行修改,可在地图上添加/删除/更改多边形、兴趣点和文字,点击【完成编辑】按钮即可结束地图信息修改。 指针工具 在电子地图编辑页面可以通过指针工具完成地图的移动。 多边形工具 通过多边形工具在地图上进行框选,即可生成多边形。支持自定义多边形名称和备注,多边形类型包含区域围栏和建筑物样式两种。 区域围栏支持修改背景和边框。 建筑物样式支持修改楼顶颜色和楼面颜色。 兴趣点工具 支持在地图上添加兴趣点,支持自定义兴趣点名称和兴趣点颜色。 文本工具 支持在地图上添加文本,可以自定义文本名称和颜色,配置字体大小和加粗/倾斜文本样式。
        来自:
        帮助文档
        智能视图服务
        用户指南(旧版)
        电子地图
        地图工具
      • 评估结果查看
        本节为您介绍数据库迁移工具提供评估结果在线查看功能。 数据库迁移工具提供评估结果在线查看功能。用户在启动评估任务后,会自动跳转到评估结果界面。用户也可以通过迁移评估列表,点击“报告名”跳转到评估结果界面。评估结果主要是展示数据库的基本信息(如版本、字符集、磁盘空间推荐)、连接资源信息(如最大连接数)、表信息(表的大小、字段类型、有无主键等)、数据库结构信息(结构名、类型、数量、与目标库存在的差异)、对象关联信息(对象名、对象间依赖关系)、迁移权限检测(源库账号权限检测、解决方法)。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移模块
        数据传输
        迁移评估
        评估结果查看
      • 弹性文件概述
        本节介绍了用户指南: 弹性文件概述。 云容器引擎支持挂载天翼云弹性文件存储卷。cstorcsi插件兼容动态和静态两种存储卷类型,通过将弹性文件存储卷挂载至容器指定目录,可满足数据持久化需求。 弹性文件存储提供按需扩展的高性能NAS服务,支持云上多台弹性云主机、容器及物理机等计算资源的大规模并发访问,具备高可用性与数据持久性保障。其提供标准POSIX文件访问接口,可实现现有应用与文件存储的无缝集成。 使用限制 规格类型 当前cstorcsi插件支持SFS Turbo标准型、SFS Turbo性能型 文件协议 当前cstorcsi插件仅支持NFS协议 容量 单个文件系统最小容量为500GB 文件系统加密 暂不支持文件存储加密 性能规格 SFS Turbo标准型、SFS Turbo性能型规格对比:弹性文件性能对比 说明 最大IOPS、最大带宽两个参数的值均为读写总和。比如最大IOPSIOPS读+IOPS写。 最大IOPS大小与容量无关。 时延是指低负载情况下的最低延迟,非稳定时延。 参数 SFS Turbo标准型 SFS Turbo性能型 最大带宽 1.5GB/s 2GB/s 最高IOPS 5000 30000 时延 1~10ms 1ms 最大容量 500GB~32TB 500GB~32TB 优势 大容量、低时延 大容量、高带宽、低成本 应用场景 适用于大容量、低时延的业务,如代码存储、日志存储、Web服务、虚拟桌面等 适用于海量小文件、随机IO密集型以及时延敏感型业务,如高性能计算、文件共享、内容管理等
        来自:
        帮助文档
        云容器引擎 专有版/托管版
        用户指南
        存储
        弹性文件存储(CT-SFS)
        弹性文件概述
      • MySQL数据迁移到MRS Hive分区表
        本章节主要介绍MySQL数据迁移到MRS Hive分区表。 MapReduce服务(MapReduce Service,简称MRS)提供企业级大数据集群云服务,里面包含HDFS、Hive、Spark等组件,适用于企业海量数据分析。 其中Hive提供类SQL查询语言,帮助用户对大规模的数据进行提取、转换和加载,即通常所称的ETL(Extraction,Transformation,and Loading)操作。对庞大的数据集查询需要耗费大量的时间去处理,在许多场景下,可以通过建立Hive分区方法减少每一次扫描的总数据量,这种做法可以显著地改善性能。 Hive的分区使用HDFS的子目录功能实现,每一个子目录包含了分区对应的列名和每一列的值。当分区很多时,会有很多HDFS子目录,如果不依赖工具,将外部数据加载到Hive表各分区不是一件容易的事情。云数据迁移服务(CDM)可以请轻松将外部数据源(关系数据库、对象存储服务、文件系统服务等)加载到Hive分区表。 下面使用CDM将MySQL数据导入到MRS Hive分区表为例进行介绍。 操作场景 假设MySQL上有一张表tripdata,保存了自行车骑行记录,里面有起始时间、结束时间,起始站点、结束站点、骑手ID等信息,tripdata表字段定义如下图“MySQL表字段”所示。 使用CDM将MySQL中的表tripdata导入到MRS Hive分区表,流程如下: 1.在MRS Hive上创建Hive分区表 2.创建CDM集群并绑定EIP 3.创建MySQL连接 4.创建Hive连接 5.创建迁移作业
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据集成
        使用教程
        MySQL数据迁移到MRS Hive分区表
      • zosutil
        本文为您提供zosutil工具。 工具介绍 zosutil 是一款用于管理天翼云对象存储服务的命令行工具,支持访问天翼云 S3 接口的对象存储服务(ZOS)。相比于 ZOS SDK ,zosutil 允许用户使用命令行的方式与 ZOS 进行交互,用户使用起来更加简洁、方便。 主要功能: 功能 说明 存储桶操作 存储桶的创建、删除、列举操作。 获取桶的配置信息。 配置桶的生命周期、policy、多版本等。 对象操作 对象的列举、上传/下载、拷贝、删除等操作。 支持对象的批量上传/下载/拷贝/删除。 配置对象的访问权限。 操作系统 zosutil 目前支持以下平台: Windows CtyunOS CentOS Ubuntu 工具获取 使用指南下载: 下载使用指南:zosutil用户使用指南.pdf 工具下载: 下载工具:zosutil.zip 说明 工具解压后请选择匹配您操作系统环境的版本运行。 更新记录 以下为您提供工具更新的记录,方便您参考: 日期 更新内容 2026年4月7日 一、新增特性: 1.工具支持并发上传对象,可自行配置并发数。
        来自:
        帮助文档
        对象存储 ZOS
        常用工具
        zosutil
      • 迁移概述
        数据所在位置 使用条件 迁移方法 迁移速度评估 使用限制 物理机文件系统 物理机可以访问待迁移数据; 物理机和HPFS网络互通,保证可挂载文件系统; 命令拷贝 速度速度取决于物理机网卡,可多台并行拷贝,提高速度。 只支持GPU裸金属物理机挂载 HPFSPOSIX 协议的并行文件系统。 弹性云主机文件系统 云主机可以访问待迁移数据; 弹性云主机和HPFS在同一VPC网络下,保证可挂载文件系统; 命令拷贝 速度取决于云主机配置的网络带宽,可多台并行拷贝,提高速度。 只支持云主机挂载NFS协议的并行文件系统。 对象存储ZOS ZOS数据可以在互联网/内网环境下载; 互联网/内网下载的客户端和HPFS互通,保证可挂载文件系统; 工具迁移 客户端测公网出口带宽直接影响上传时间。 通过互联网访问ZOS的数据,迁移过程会产生请求和流量等相关的费用。 客户本地 用户本地数据量巨大(几十TB),且数据归属于客户,可插拔盘操作; 用户在公有云有独立归属的数据迁移服务器可进行插盘操作; 数据迁移服务器和HPFS互通,保证可挂载文件系统; 数据快递 单USB口的机械硬盘可达到150MB/s。 专属资源的客户,拥有独立的机房设备。
        来自:
        帮助文档
        并行文件服务 HPFS
        用户指南
        数据迁移
        迁移概述
      • 自定义授权服务策略
        服务网格支持集成外部授权服务,通过自定义授权服务策略,您可以轻松定义自定义的外部授权服务并将策略应用到网格数据面,实现灵活的安全管控能力。 策略配置说明 配置项 说明 安全策略名称 策略名称 协议 HTTP和GRPC协议的外部授权服务 服务地址 实现了Envoy extauthz授权接口的服务名称,如extauth.default.svc.cluster.local 服务端口 授权服务端口 超时时间 数据面请求外部授权服务的超时时间,如1s,2.5s 鉴权服务不可用时放行请求 访问鉴权服务失败或者鉴权服务返回5XX状态码时是否放行请求,默认关闭 鉴权服务不可用自定义错误码 请求鉴权服务出现网络错误时返回自定义状态码 在鉴权请求中携带请求Body 是否将请求Body带到鉴权服务 鉴权请求携带Body的最大长度(Byte) 允许携带到鉴权服务的Body最大长度 允许将不完整消息发送至鉴权服务 在请求Body超出最大长度限制时,若不启用该选项则将拒绝请求并返回HTTP 413 在鉴权请求中携带header 指定将请求中的部分Header带到鉴权服务 在鉴权请求中新增header 请求鉴权服务时新增Header 在鉴权通过时覆盖Header 鉴权通过时使用鉴权服务返回的Header覆盖原始请求Header访问上游 鉴权失败时覆盖Header 鉴权通过时使用鉴权服务返回的Header覆盖应答Header返回给下游
        来自:
        帮助文档
        应用服务网格
        用户指南
        网格安全中心
        CSM安全策略
        自定义授权服务策略
      • 数据源智能助手
        本章节主要介绍数据源智能助手。 数据源智能助手是面向多类型数据源接入与管理场景的AI 助手,能够自动识别用户输入中的数据源特征,智能推荐连接方式,辅助完成参数配置与连通性校验。该助手贯穿数据源全生命周期流程,支持完整的创建、验证与管理操作,并在运行过程中监控连接状态与可用性。 数据源智能助手现支持如下场景的智能实现: 支持的场景 场景描述 创建 通过理解用户输入的自然语言,识别数据源类型与连接方式,自动创建数据源接入配置 编辑 智能理解修改需求,自动调整数据源连接参数、认证方式或字段映射等配置信息 删除 安全删除数据源配置,并自动清理相关依赖关系与引用信息 复制 快速复制现有数据源配置,支持连接参数与认证方式的快速调整 测试 执行连通性测试,验证数据源配置、网络可达性与凭证有效性 上线 通过自然语言对话,完成数据源的上线操作,确保可在任务中使用 下线 通过自然语言对话,下线数据源,禁止任务继续引用该数据源 查询列表 通过自然语言查询已接入的数据源列表,支持按类型等维度筛选 以数据源智能助手的“创建”为例,介绍产品使用流程: 在智能对话输入框中输入自然语言指令,例如:“创建一个 MySQL 数据源,英文名称为 xxx,中文名称为 测试……” 系统解析指令后,进入数据源创建流程: 自动识别数据源类型(如 MySQL),并在界面中给出类型确认提示 系统展示“选择数据源类型”表单,并将识别出的类型自动填入 用户可确认或修改数据源类型,随后点击【提交】进入下一步参数配置 点击【提交】按钮,系统进入数据源连接信息配置阶段: 自动进入“配置开发环境”步骤,提示数据源类型校验已通过 展示数据源连接所需的基础信息,包括 IP/端口、数据库名、认证方式、用户名与密码等字段 支持补充扩展参数(如编码方式、超时时间等),用户可按需新增或删除参数项 提供 “测试连通性”开关,用户可选择在保存时自动执行连通性校验 用户完成填写后点击【提交】,若连通性开关已开启,系统将在保存阶段对连接有效性进行验证 点击【提交】按钮,系统自动进入生产环境连接信息配置阶段: 根据上一阶段的校验结果,进入“配置生产环境”步骤,提示用户继续完善生产环境连接信息 展示生产环境所需的连接参数,包括 IP/端口、数据库名、认证方式、用户名与密码等基础字段 支持配置扩展参数(如编码方式、超时时间等),可按需新增或删除参数项 提供 “测试连通性”开关,用于在保存时对生产环境连接进行连通性校验 用户填写完成后点击【提交】,系统将在保存阶段进行必要的连通性验证(若已开启),完成数据源配置流程 系统在完成生产环境配置校验后,进入数据源基础信息确认阶段: 展示数据源的基础配置信息,包括数据源名称、中文名称、数据源类型与版本等字段 用户可根据需要对基础信息进行修改,确保数据源的名称、类型与版本配置准确无误 系统提示用户检查该信息是否正确,若需调整可直接在表单中编辑 用户确认后点击【提交】,完成数据源创建流程 系统完成基础信息校验和保存操作后,进入数据源创建结果展示阶段: 系统提示基础配置信息校验通过,并已成功保存数据源配置 显示“创建场景已成功完成”的状态反馈,标识当前创建流程已全部结束 提供推荐,后续可执行的操作入口,包括编辑数据源、测试数据源连通性、发布数据源等,便于继续完善或使用该数据源
        来自:
        帮助文档
        数据智能中台
        用户指南
        数据智能助理
        业务助手
        数据源智能助手
      • 1
      • ...
      • 22
      • 23
      • 24
      • 25
      • 26
      • ...
      • 440
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      聚力AI赋能 天翼云大模型专项

      大模型特惠专区·Token Plan 轻享包低至9.9元起

      青云志云端助力计划

      一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云

      企业出海解决方案

      助力您的业务扬帆出海,通达全球!

      天翼云信创专区

      “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富

      中小企业服务商合作专区

      国家云助力中小企业腾飞,高额上云补贴重磅上线

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      天翼云奖励推广计划

      加入成为云推官,推荐新用户注册下单得现金奖励

      产品推荐

      弹性云主机 ECS

      物理机 DPS

      GPU云主机

      镜像服务 IMS

      弹性伸缩服务 AS

      弹性高性能计算 E-HPC

      训推服务

      星辰TokenHub运营服务平台

      应用托管

      推荐文档

      常见问题

      消息者消费者

      客户端下载安装

      网页防篡改卸载

      天翼云用户DNS变更指导

      云课堂 第十三课:如何远程管理天翼云RDS数据库

      EIP释放和批量释放

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 息壤智算平台
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号