云主机开年特惠28.8元/年,0元秒杀等你来抢!
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 天翼云新春焕新季 NEW 云主机开年特惠28.8元/年,0元秒杀等你来抢!
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 出海产品促销专区 NEW 爆款云主机低至2折,高性价比,不限新老速来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
  • MCP市场
公共算力服务
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
模型推理服务
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V3.1
  • DeepSeek-R1-0528
  • DeepSeek-V3-0324
  • Qwen3-235B-A22B
  • Qwen3-32B
智算一体机
  • 智算一体机
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场进入AI Store创新解决方案公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 安全邮箱
  • WPS 365 天翼云版
  • 天翼企业云盘(标准服务版)
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      翼来单_相关内容
      • 阿里云RDS SQL Server迁移至天翼云 CT-RDS SQL Server
        本节为您介绍阿里云RDS SQL Server迁移至天翼云 CTRDS SQL Server任务配置。 源端配置请参照自建SQL Server为源的迁移任务源端配置。 目标端配置请参照自建SQL Server迁移至天翼云 CTRDS SQL Server。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移服务模块
        数据传输
        数据迁移
        任务创建
        阿里云RDS SQL Server迁移至天翼云 CT-RDS SQL Server
      • 华为云RDS SQL Server迁移至天翼云 CT-RDS SQL Server
        本节为您介绍华为云RDS SQL Server迁移至天翼云 CTRDS SQL Server任务配置。 源端配置请参照自建SQL Server为源的迁移任务源端配置。 目标端配置请参照自建SQLServer迁移至天翼云CTRDS SQL Server。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移服务模块
        数据传输
        数据迁移
        任务创建
        华为云RDS SQL Server迁移至天翼云 CT-RDS SQL Server
      • 主机详情页面概述
        本章节主要介绍翼MR Manager的主机详情页面。 进入到翼MR Manager以后,点击菜单“主机”,进入主机列表页面。 单击指定主机IP或主机名称进入到主机详情页面。如图所示: 详情页面下方依次为该主机的:主机状态、实例列表、告警历史信息。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        翼MR Manager操作指导
        主机
        主机详情页面概述
      • Doris性能优化后TPC-H测试结果
        测试结果 查询名 开源版本(单位:毫秒) 天翼云翼MapReduce版本(单位:毫秒) :::::: q1 6239 5278 q2 575 418 q3 5780 4079 q4 3502 2519 q5 8456 6938 q6 916 352 q7 4347 3439 q8 4326 2230 q9 15572 12559 q10 6642 5327 q11 745 524 q12 1482 800 q13 6297 5160 q14 591 551 q15 988 942 q16 1146 1072 q17 2316 1106 q18 16009 15025 q19 3839 1653 q20 1912 1379 q21 9592 6986 q22 1444 1266 总耗时 102716 79603 测试结论 通过在500GB数据量的TPCH的对比测试,翼MapReduce中Doris基于ARM架构下的优化版本耗时79603毫秒,Doris开源社区2.1.2版本耗时102716毫秒。翼MapReduce中Doris基于ARM架构下的优化版本相比于Doris开源社区2.1.2版本性能提升1.29倍。
        来自:
        帮助文档
        翼MapReduce
        组件性能
        Doris性能优化后TPC-H测试结果
      • 测试数据
        本章介绍本次性能测试结果情况。 以下结果为测试环境的测试数据,仅供参考,不作为SLA承诺。 表 测试列表 ::::::: 实例类型 Instance class CPU/Core Memory(GB) TPM TPS IOPS HA实例 2008 R2 企业版 2 8 300000 5500 4000 HA实例 2008 R2 企业版 4 16 530000 9700 7000 HA实例 2008 R2 企业版 8 32 930000 17050 15000 HA实例 2008 R2 企业版 16 64 1250000 23000 20000 HA实例 2008 R2 企业版 2 16 290000 5300 4000 HA实例 2008 R2 企业版 4 32 540000 9900 7000 HA实例 2008 R2 企业版 8 64 960000 17600 15000 HA实例 2008 R2 企业版 16 128 1350000 24750 20000 单实例 2014 企业版、2014 标准版 4 16 550000 10083 7000 单实例 2014 企业版、2014 标准版 8 32 1100000 20166 16000 单实例 2014 企业版、2014 标准版 16 64 1500000 27500 22000 HA实例 2014 企业版、2014 标准版 4 32 500000 9000 7000 HA实例 2014 企业版、2014 标准版 8 64 1000000 18333 16000 HA实例 2014 企业版、2014 标准版 16 128 1400000 24000 21000 单实例 2014 WEB 4 16 550000 10000 6000 单实例 2014 WEB 8 32 1100000 20000 12000 单实例 2014 WEB 16 64 1500000 27000 18000 表 测试列表 ::::::: 实例类型 Instance class CPU/Core Memory(GB) TPM TPS IOPS 单实例 2014 企业版、2014 标准版 4 16 550000 10083 7000 单实例 2014 企业版、2014 标准版 8 32 1100000 20166 16000 单实例 2014 企业版、2014 标准版 16 64 1500000 27500 22000 HA实例 2014 企业版、2014 标准版 4 32 500000 9000 7000 HA实例 2014 企业版、2014 标准版 8 64 1000000 18333 16000 HA实例 2014 企业版、2014 标准版 16 128 1400000 24000 21000 单实例 2014 WEB 4 16 550000 10000 6000 单实例 2014 WEB 8 32 1100000 20000 12000 单实例 2014 WEB 16 64 1500000 27000 18000
        来自:
        帮助文档
        关系数据库SQL Server版
        性能白皮书(SQL Server)
        测试数据
      • 支持审计的云产品及关键操作列表
        分类 云产品 支持审计的关键操作列表 大数据 翼MapReduce 大数据 云搜索服务
        来自:
        帮助文档
        云审计
        用户指南
        支持审计的云产品及关键操作列表
      • 退订
        本章节主要介绍翼MapReduce服务的退订操作。 按需计费 按需购买的集群无需退订,直接删除即可。 请登录天翼云官网,进入“控制中心”,选择“翼MapReduce”,进入集群列表,即可对您的集群进行删除操作。 删除前建议您做好数据备份。 1.登录天翼云官网,进入控制中心; 2.进入控制中心,选择资源池,选择“翼MapReduce”; 3.进入集群列表,找到需要删除的集群,选择资源信息,点击删除。 包周期计费 包年包月购买的集群,可参考以上步骤进入集群列表,在需要退订的包年包月集群对应的“操作”列中,单击“退订”即可。
        来自:
        帮助文档
        翼MapReduce
        计费说明
        退订
      • 阿里云RDS PostgreSQL迁移至天翼云 CT-RDS PostgreSQL
        本节为您介绍阿里云RDS PostgreSQL迁移至天翼云 CTRDS PostgreSQL任务配置。 源端配置请参照自建PostgreSQL为源的迁移任务源端配置。 目标端配置请参照自建PostgreSQL迁移至天翼云CTRDS PostgreSQL。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移服务模块
        数据传输
        数据迁移
        任务创建
        阿里云RDS PostgreSQL迁移至天翼云 CT-RDS PostgreSQL
      • 华为云RDS PostgreSQL迁移至天翼云 CT-RDS PostgreSQL
        本节为您介绍华为云RDS PostgreSQL迁移至天翼云 CTRDS PostgreSQL任务配置。 源端配置请参照自建PostgreSQL为源的迁移任务源端配置。 目标端配置请参照自建PostgreSQL迁移至天翼云CTRDS PostgreSQL。
        来自:
        帮助文档
        云迁移服务CMS
        用户指南
        数据库迁移服务模块
        数据传输
        数据迁移
        任务创建
        华为云RDS PostgreSQL迁移至天翼云 CT-RDS PostgreSQL
      • 概述
        图表类型 使用场景 图表是一种常见的数据展示方式,它通过将数据结构化整理,实现了数据的比较和统计,在许多情况下都可以使用。 柱状图用于描述分类数据,直观展现每个分类项之间的大小对比关系。在统计近一天各种错误码类型出现次数等分类统计场景中特别适用。 时序图要求被统计的数据具备时间顺序字段,根据时间顺序来组织和聚合指标。它能够清晰地展现指标随时间变化的趋势。 饼图用于表示不同分类的占比情况,各分类项的比例由扇区大小来体现。适用于分析错误码占比等情况的统计场景。 流图是围绕中心轴线进行布局的一种堆叠面积图。不同的分类信息使用不同颜色的线条代表,原数据集中的时间属性,将默认映射到X轴上,以三维关系进行展示。 数字图用于表示单一数据,能够更好地展示单一的数据信息和关键指标,可重点突出关键信息和数据。 散点图是一种在直角坐标系平面上,通过数据点展示两个变量关系的图表。 词云图可用于进行数据可视化,如展示文本数据中关键词的频率分布。 漏斗图适用于业务流程比较规范、周期长、环节多的单流程单向分析。 雷达图用于展示多维数据。 拓扑图主要用直观地展示系统架构、服务间的依赖关系以及数据流的方向
        来自:
        帮助文档
        云日志服务
        用户指南
        日志可视化
        统计图表
        概述
      • 轻量型云主机新建云硬盘
        接口约束   1. 确保当前请求资源池下,该轻量型云主机存在(即instanceID真实存在且与regionID相对应)   2. 云主机需要处于运行中(running)或关机(stopped)状态,您可以调用查询轻量型云主机详情查询结果中的instanceStatus字段来确认当前云主机状态 URI POST /v4/ecs/lite/createvolume 路径参数 无 Query参数 无 请求参数 请求头header参数 无 请求体body参数 参数 是否必填 参数类型 说明 示例 下级对象 clientToken 是 String 客户端存根,用于保证订单幂等性。要求单个云平台账户内唯一,使用同一个ClientToken值,其他请求参数相同时,则代表为同一个请求。保留时间为24小时 4cf2962de92c4c009181cfbb2218636c regionID 是 String 资源池ID,您可以查看地域和可用区来了解资源池 获取: 查 资源池列表查询 bb9fdb42056f11eda1610242ac110002 instanceID 是 String 轻量型云主机ID,您可以查看轻量型云主机了解轻量型云主机的相关信息 获取: 查 查询轻量型云主机列表 创 创建轻量型云主机 adc614e0e838d73f0618a6d51d09070a diskName 是 String 磁盘名称,名称规则:长度2~63,不支持中文。注:当创建多块云硬盘时(即参数diskCount的值大于1时),第二块盘起名称会追加序号。 voltest diskType 是 String 磁盘类型,取值范围: SATA(普通IO), SAS(高IO), SSD(超高IO) 您可以查看磁盘类型及性能介绍磁盘类型相关信息 diskSize 是 Integer 磁盘容量,单位为GB,取值范围:[10, 32768] 20 diskCount 否 String 本地订购磁盘数量。注:不填写默认为1块盘,创建多块盘时填写多个;该参数值受单台轻量型云主机挂载硬盘上限值限制。
        来自:
        帮助文档
        轻量型云主机
        API参考
        API(公测中)
        轻量型云主机新建云硬盘
      • 告警历史
        本章节主要介绍翼MR Manager的告警历史特性。 进入到翼MR Manager以后,点击菜单“监控与告警 > 告警历史”,进入告警历史页面。如图所示: 页面上方为查询区域,各种查询条件进行组合查询。 支持查询集群服务级、角色实例级、主机级的告警信息。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        翼MR Manager操作指导
        监控与告警
        告警历史
      • 云硬盘概述
        维度 弹性文件服务 对象存储 云硬盘 概念 弹性文件服务提供了一个高度可扩展的文件系统,可在云环境中共享文件数据。具有高可用性、持久性和可靠性。 对象存储具有高度的可扩展性和耐久性,可以存储任意类型的海量数据,并且能够自动处理数据冗余、故障恢复和数据分发。 云硬盘提供了高性能、低延迟、可扩展的块级存储。云硬盘可以被挂载到弹性云主机或物理机上,使其能够持久化地存储数据。 存储方式 弹性文件服务采用文件存储方式。文件存储将数据组织为层次化的目录和文件结构,用户可以通过文件路径和名称来操作文件和目录。 对象存储将数据存储为独立的对象。每个对象由数据本身和与之相关的元数据(例如文件名、文件类型、大小等)组成。 云硬盘采用块存储方式。块存储将数据分为固定大小的块(通常为几KB或几MB),并通过唯一的块地址进行访问。 访问方式 弹性文件服务通过网络共享的方式进行访问。用户可以在需要的弹性云主机实例或容器实例上挂载文件系统,并通过标准的文件系统接口(如NFS、SMB等)访问共享的文件系统。 对象存储需要指定桶地址,通过HTTP或HTTPS等传输协议进行访问。 云硬盘类似于PC机的硬盘,无法单独使用,通常通过挂载(Mount)的方式来访问。它可以被挂载到弹性云主机或物理机上,使其在操作系统中可见。 适用场景 如应用程序的配置文件、日志文件等需要共享的文件数据以及在容器化应用中支持多个容器实例之间的数据共享和同步。 如大数据分析,数据湖,数据备份和归档等大规模数据存储和分析场景;静态网站托管解决方案存储。 如作为弹性云主机或物理机的数据存储介质进行数据存储和持久化;大规模数据处理与分布式计算等高性能计算场景。 容量 弹性文件服务可按需扩展,单文件系统容量默认最大为32TB。如需更大容量的文件系统,可提工单申请。 对象存储服务没有容量限制,存储资源可无限扩展。 云硬盘支持按需扩容,最小扩容步长为1 GB,单个云硬盘可由10 GB扩展至32 TB。 是否支持数据共享 是 是 是 是否支持远程访问 是 是 否
        来自:
        帮助文档
        弹性云主机 ECS
        用户指南
        云硬盘
        云硬盘概述
      • 技术指标
        技术指标 8.0.x最大值 8.1.0最大值 8.1.1最大值 数据容量 10PB 10PB 20PB 集群节点数 256 256 2048 单表大小 1PB 1PB 1PB 单行数据大小 1GB 1GB 1GB 每条记录单个字段的大小 1GB 1GB 1GB 单表记录数 2^55 2^55 2^55 单表列数 1600 1600 1600 单表中的索引个数 无限制 无限制 无限制 单表索引包含列数 32 32 32 单表约束个数 无限制 无限制 无限制 并发连接数 分钟级复杂查询并发数:60 毫秒级短事务并发数:5000 分钟级复杂查询并发数:60 毫秒级短事务并发数:5000 分钟级复杂查询并发数:80 毫秒级短事务并发数:5000 分区表的分区个数 32768 32768 32768 分区表的单个分区大小 1PB 1PB 1PB 分区表的单个分区记录数 2^55 2^55 2^55
        来自:
        帮助文档
        数据仓库服务
        产品简介
        技术指标
      • 产品规格
        分类 配额名称 说明 用户级别 总容量配额 默认分配100TB。 最大可支持10PB,如有更大需求可提工单进行申请。 用户级别 单地域内可创建文件系统数量 20个,如有更大需求可提工单进行申请。 用户级别 挂载客户端数量 3000个 单文件系统 容量 起始容量0.5TB(512GB),默认100TB。 最大可支持10PB,如有更大需求可提工单进行申请 单文件系统 元数据 最大支持20000 iops。 如有更大需求可提工单进行申请。 单文件系统 最大目录层级 1000级 单文件系统 最大文件数 随着容量递增,100万个/TB,默认最大20亿。 最大可支持上百亿,如有更大需求可提工单进行申请。 单文件系统 挂载客户端数量 3000个 单客户端 挂载文件系统个数 300个 单个目录 最大文件数 100万
        来自:
        帮助文档
        并行文件服务 HPFS
        产品介绍
        产品规格
      • 基于LLaMA-Factory微调DeepSeek-R1-Distill-Qwen-7B最佳实践
        DeepSeek简介 DeepSeek 是一个基于 Transformer 架构的大型语言模型(LLM),由深度求索(DeepSeek)公司开发。它能够处理自然语言理解、生成、翻译、问答等多种任务。DeepSeekR1 在后训练阶段大规模使用了强化学习技术,在仅有极少标注数据的情况下,极大提升了模型推理能力。在数学、代码、自然语言推理等任务上,性能比肩 OpenAI o1 正式版。 DeepSeek公司在开源 DeepSeekR1Zero 和 DeepSeekR1 两个参数量超过660B 模型的同时,通过 DeepSeekR1 的输出,蒸馏了 6 个小模型开源给社区,其中32B和70B模型在多项能力上实现了对标 OpenAI o1mini 的效果。 模型微调简介 大语言模型微调技术通过调整预训练模型参数,使其适应特定任务需求。其核心价值在于让通用的人工智能工具变得更“专业”和“实用”,就像把一个会做各种菜的厨师培训成专精川菜的大厨。它能让企业用较低成本获得适合自身需求的AI能力,例如: 1. 降低成本:无需从头训练昂贵的大模型,只需在现有通用模型基础上“补充学习”企业内部的业务知识、行业术语,就能快速打造专属AI助手,成本大幅降低。 2. 精准解决问题:通用AI可能懂诗词绘画,但不懂医疗诊断或法律合同。通过微调,AI能深度掌握特定领域的专业知识,例如快速分析病历、自动生成符合行业规范的报告。 3. 保护数据隐私:企业可将内部数据安全地用于微调,既让AI掌握核心业务知识,又避免敏感数据直接暴露在公共模型中。 4. 推动普惠应用:中小型企业也能通过这项技术享受AI红利,例如教育机构定制学习辅导AI,工厂打造设备维护专家系统,真正让AI进入百行千业。 在下文中,我们将采用两个具体实践案例来说明模型微调的实际效果: 1. 基于天翼云文档数据的微调 。利用企业自身的文档数据构建微调数据集,仅使用单台多GPU卡的云主机即可完成模型微调训练。经过微调后的模型能够在企业内部知识领域提供准确的回答。 2. 基于医学计算数据的微调 。利用医学领域的专业知识数据构建微调数据集,仅使用单台多GPU卡的云主机即可完成模型微调训练。经过微调后的模型能够在识别与分析病例时取得更高的计算准确度。
        来自:
        帮助文档
        弹性云主机 ECS
        DeepSeek专题
        实践指南:DeepSeek驱动高效能云生态
        GPU云主机/弹性云主机:零基础搭建DeepSeek云端环境指南
        基于LLaMA-Factory微调DeepSeek-R1-Distill-Qwen-7B最佳实践
      • 使用AI云电脑
        一键优化 当AI云电脑遇到卡顿情况时,可以进行检测优化 ,点击“一键优化”开启优化程序。 11. 网络检测 点击“检测网速”,可以检测当前网络的下载带宽,上传带宽,网络时延,抖动,丢包率,以及过去的网络时延变化统计。 12. 家庭管理 “翼家”默认对天翼量子AI云电脑(公众版)开放,家长可通过手机号邀请成员或管理员加入家庭管理。组建家庭关系后,家长和管理员可对家庭成员AI云电脑查看学习、绿色管控、远程接入、解绑AI云电脑等操作,详细见翼家帮助文档。 注意:政企版翼家功能默认关闭,如需开通请联系运维或邮件申请,将【企业租户账号】和【所在资源池】通过翼连>AI云电脑项目支撑中心>工作台>AI云电脑附加功能申请或邮箱发送至clouddesktop@chinatelecom.cn。 13.
        来自:
        帮助文档
        天翼云电脑(公众版)
        电脑终端指南(新)
        使用AI云电脑
      • 约束与限制
        本章节主要介绍数据治理中心的约束与限制。 浏览器限制 您需要使用支持的浏览器版本登录DataArts Studio。 表1 浏览器兼容性 浏览器版本 建议版本 建议操作系统 备注 Google Chrome 115,114,113 Windows 10 分辨率最佳可视范围为最小1366768px,最大为19201080px。其中19201080px为最佳显示分辨率,界面自适应为最优显示。 使用限制 使用DataArts Studio前,您需要认真阅读并了解以下使用限制。 表2 DataArts Studio使用限制一览表 组件 约束限制 公共 DataArts Studio基于数据湖底座提供数据一站式集成、开发、治理等能力,本身不具备存储和计算的能力,需要配合数据湖底座使用。 每个企业项目下最多绑定一个DataArts Studio实例。当企业项目下已绑定实例时,再次创建实例会失败。 DataArts Studio各组件对不同数据源的支持程度不一,您需要按照您的业务需求来选择数据湖底座。DataArts Studio平台当前支持的数据湖产品请参见“DataArts Studio用户指南 > 管理中心 > DataArts Studio支持的数据源”。 管理中心 由于管理中心的限制,数据治理各组件(如数据架构、数据质量、数据目录等)暂不支持包含中文和“.”字符的库表名。 建议为管理中心数据连接的Agent和CDM迁移作业规划相互独立的CDM集群,避免双方使用同一集群,导致业务高峰期时资源抢占引起业务不可用。 CDM集群作为管理中心数据连接Agent时,单集群无法连接多个MRS安全集群。建议您按照业务情况规划多个Agent与MRS安全集群一一映射。 CDM集群作为管理中心数据连接Agent时,单集群的并发活动线程最大为200。即当多个数据连接共用同一Agent时,通过这些数据连接提交SQL脚本、Shell脚本、Python脚本等任务的同时运行上限为200,超出的任务将排队等待。建议您按照业务量情况规划多个Agent分担压力。 单工作空间允许创建的数据连接个数最多200个。 管理中心相关开放API并发限制为100qps。 数据集成 CDM作业支持自动备份和恢复,将备份数据存储到OBS中,该功能需要您手动开启。详情请参见用户指南中“数据集成 > 管理作业 > 作业配置管理”章节。 CDM作业本身无配额限制,但建议作业数不超过CDM集群的vCPU核数2,否则作业运行性能可能会受到一定影响。 数据集成CDM集群为单集群部署,集群故障可能会导致业务、数据损失。建议您使用数据开发作业CDM Job节点调用CDM作业,并选择两个CDM集群以提升可靠性。详情请参见用户指南中“数据开发 > 节点参考 > CDM Job”章节。 当所连接的数据源发生变化(如MRS集群扩容等情况)时,您需要重新编辑并保存该连接。 在驱动更新场景下,上传驱动后必须在CDM集群列表中重启集群才能更新生效。 单作业的抽取并发数取值范围为1300,集群的总抽取并发数取值范围为11000。其中集群最大抽取并发数的设置与CDM集群规格有关,并发数上限建议配置为vCPU核数2,作业的抽取并发数建议不超过集群的总抽取并发数,过高的并发数可能导致内存溢出,请谨慎修改。 关于数据集成中的更多约束限制,请参考用户指南中“数据集成> 约束与限制”章节。 数据开发 数据开发脚本、作业等资产支持备份管理,将备份数据存储到OBS中,该功能需要您手动开启。详情请参见用户指南中“数据开发 > 运维调度 > 备份管理”章节。 脚本、作业或节点的历史运行记录依赖于OBS桶,如果未配置测试运行历史OBS桶,则无法查看历史运行的详细信息。 上传资源时,如果资源位置为HDFS,则只支持MRS Spark,MRS Flink Job,MRS MapReduce节点使用该资源。 单工作空间允许创建的脚本个数最多1万个,脚本目录最多5000个,目录层级最多为10层。 单工作空间允许创建的作业个数最多1万个,作业目录最多5000个,目录层级最多为10层。 RDS SQL、DWS SQL、HIVE SQL、SPARK SQL、DLI SQL脚本执行结果页面展示最多1千条,且数据量少于3MB。超过1千条数据可以使用转储功能,转储最多支持1万条。 实例监控、补数据监控只能展示最近6个月的数据。 通知记录只能展示最近30天的数据。 下载中心的下载记录会每7天做老化处理,老化时下载中心记录和已转储的OBS数据会同时被删除。 数据架构 数据架构当前支持关系建模和维度建模(仅支持星形模型)这两种建模方式。 数据架构支持最大导入文件大小为4Mb;支持最大导入指标个数为3000个;支持一次最大导出500张表。 码表和数据标准的根目录下禁止直接创建码表和数据标准。 单工作空间中创建各类对象的配额如下: l主题5000个。 l数据标准目录500条,个数20000个。 l业务指标100000个。 l原子指标、衍生指标、复合指标各5000条。 配置中心中各类对象的自定义项配额如下: l主题自定义项10条。 l表自定义项30条。 l属性自定义项10条。 l业务指标自定义项50条。 数据质量 数据质量作业执行时长依赖数据引擎,如果底层数据引擎资源不足,可能会导致运行速度变慢。 单个数据质量作业最多可以配置50条规则,如有需要可拆分为多个质量作业。 单个数据连接上的质量作业关联SQL的并发数默认为1000,如果超出则等待排队执行。可配置范围101000。 单Region内的质量作业关联SQL的并发数为10000,如果超出则等待排队执行。 业务指标监控模块总览中的实例运行状态和实例告警状态支持按照7天展示,告警趋势、业务看板、指标看板支持按照7天、15天和30天展示。 数据质量监控模块总览中的变化趋势支持按照30天展示,质量告警分类趋势和规则数量趋势支持按照7天展示。 质量报告采用T+1日定时批量生成,质量报告数据保留90天。 导出质量报告至OBS,会将质量报告导出到工作空间中配置的作业日志OBS路径中,导出记录保留3个月。 数据目录 单工作空间中元数据采集任务最多创建100个。 元数据采集任务通过执行引擎相关的DDL SQL获取,不建议单个任务采集超过1000张表。如有需要可拆分为多个采集任务,另外调度时间和频次也需要根据业务需要进行合理设置,避免对引擎造成较大的访问和连接压力,设置建议如下: l若业务对元数据时效性要求为1天,则设置调度周期max(1天,单次采集周期时间),其他情况同理。 l若业务压力集中在白天,则设置调度时间在夜间,其他情况同理,选择数据源压力最小的时间段。 数据血缘的产生依赖于数据开发中调度运行的作业,测试运行的作业不会产生血缘。 元数据采集模块总览中的数据连接历史统计支持按照7天、15天和30天展示。 数据服务 数据服务共享版仅供开发测试使用,专享版性能优于共享版,推荐使用数据服务专享版。 DataArts Studio实例下最多支持创建5个数据服务专享版集群,且集群需要与某个工作空间绑定,不能多空间共用同一集群。 数据服务专享版集群创建后暂不支持修改规格或升级版本。 DataArts Studio实例下支持创建的专享版API最大数量由数据服务专享版API总分配配额(默认为5000)和当前实例下集群的API规格总和共同决定,取较小的作为限制。例如,某DataArts Studio实例下的数据服务专享版API总分配配额为5000,已分别创建了API规格为500和2000的两个集群,则当前实例下支持创建的专享版API最大数量为2500。 单工作空间下支持创建的专享版API最大数量由数据服务专享版API已分配配额(通过编辑工作空间信息分配)和当前空间下集群的API规格总和共同决定,取较小的作为限制。例如,某工作空间下的数据服务专享版API已分配配额为800,当前工作空间下已创建了API规格为500的两个集群,则当前工作空间下支持创建的专享版API最大数量为800。 单工作空间下支持创建的应用数量为1000。 单工作空间下支持创建的流控策略数量为500。 数据服务支持跟踪并保存事件。对于每个事件,数据服务会报告事件发生日期、说明、时间源(某个集群)等信息,事件保存时长为30天。 数据服务专享版日志信息仅查询集群最近100条访问记录,均分至集群全部所属节点中获取。 总览中的调用趋势、发布趋势、调用比率 top5、调用时间 top5和调用次数 top5支持按照近12小时、近1天、近7天和近30天展示,总调用数为前7天数据总和(不含当天)。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        产品简介
        约束与限制
      • 运行Kafka作业
        本章节主要介绍翼MapReduce运行kafka作业。 用户可将自己开发的程序提交到翼MR中,执行程序并获取结果。本章节教您在翼MR集群后台如何提交一个新的kafka作业。 通过后台提交作业 1. 登录翼MR管理控制台。 2. 选择“我的集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。 3. 在“节点管理”页选中单击Master节点,选择要进入的Master节点。 4. 单击该节点右侧的“远程连接”。 5. 根据界面提示,输入Master节点的用户名和密码,用户名、密码分别为root和创建集群时设置的密码。 6. 创建kafka的topic。 plaintext /usr/local/kafka/bin/kafkatopics.sh zookeeper :2181/kafka topic create 7. 当前集群默认开启Kerberos认证,执行以下命令添加认证信息。 plaintext export KAFKAOPTS"Djava.security.krb5.conf/etc/krb5.conf Djava.security.auth.login.config/usr/local/kafka/config/kafkajaas.conf" 8. 向topic中写入消息。 plaintext /usr/local/kafka/bin/kafkaconsoleproducer.sh brokerlist :9092 topic producer.config /usr/local/kafka/config/producer.properties 9. 消费topic中的消息。 plaintext /usr/local/kafka/bin/kafkaconsoleconsumer.sh bootstrapserver :9092 topic consumer.config /usr/local/kafka/config/consumer.properties frombeginning maxmessages 5 注意 frombeginning:只能消费未被消费的历史数据,已消费数据不会出现。 maxmessages:最多消费多少条数据。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        管理集群
        作业管理
        运行Kafka作业
      • 通用类问题
        什么全量备份和增量备份? 云主机备份通常分为全量备份与增量备份两种类型: 全量备份:全量备份是指备份某个时刻整个云主机的所有数据,无论数据是否发生变化,都会创建全新的备份副本,第一次做备份时,系统会默认为云主机做全量备份。例如:当云主机容量为50GB时,已写入数据10GB,此时为此云主机做备份,将备份10GB的数据。 增量备份:增量备份仅备份自上次备份以来发生变化的数据。在首次全备后,后续备份默认为增量备份。例如:当云主机容量为50GB,在已写入并首次备份10GB数据的前提下,再次写入或变化了5GB数据,此时只会备份新增变化的5GB数据。 云主机备份支持通过任意一个备份(全量备份或增量备份)来恢复全量数据,删除任意一个备份,不会影响其他备份的数据恢复功能。 云主机备份有配额限制吗? 使用限制 一个云主机只可加入一个备份策略。 不支持多个云主机的一致性备份。 仅支持将云主机中的所有云硬盘作为整体进行备份和恢复,不支持对云主机中的部分云硬盘进行备份和恢复,并且不支持文件或者目录级别的恢复。 不建议对单台容量超过4TB(即所有云硬盘容量之和超过4TB)的云主机进行备份。容量较大的云主机备份时间较长,可能无法满足您对RPO的需求。 使用云主机备份创建新云主机时可以选择不同的可用区,当前仅具备多个可用区的地域,例如华东1支持该功能。
        来自:
        帮助文档
        云主机备份 CSBS
        常见问题
        通用类问题
      • 应用场景
        本文将为您介绍公共传输通道的应用场景。 总部/分支站点组网(含入云)场景客户总部、分支机构、自建机房等站点位于中国境内或境外网络节点覆盖范围内,其中客户本地侧站点提供IPRAN和OTN的接入方式。天翼云节点可以是中国电信CN2DCI网络覆盖的全国资源池,既可以接入本省天翼云,也可以跨省接入天翼云。境内第三方公有云节点接入通过CN2DCI网络实现。 客户站点使用IPRAN接入公共传输通道 客户总部/分支站点由IPRAN网络接入CN2DCI网络的本地PE或延伸交换机。用户CE到ASBR/BLEAF设备通过VLAN+PW建立二层通道。客户网络CE与本地IPRAN的U设备采用单上联或双上联的方式对接,以二层VLAN方式互联。用户接入的IPRAN U设备与ASBR/BLEAF设备之间建立PW,承载用户二层通道。ASBR设备与本城域内的CN2DCI PE设备就近互联。用户CE作为自身内网的三层网关,与CN2DCI PE设备互为三层邻居。以上ASBR/BLEAF设备为复用IPRAN云专线的ASBR设备。 天翼云资源池站点接入公共传输通道 云资源池内云专线交换机作为CE设备,通过预开通的大带宽中继电路接入资源池所在地市CN2DCI PE设备,云资源池内不同客户之间通过不同的VRF来进行区隔。云专线交换机与CN2DCI PE设备之间通过VLAN子接口对接。
        来自:
        帮助文档
        公共传输通道
        产品介绍
        应用场景
      • 应用场景
        本文将为您介绍算力专网的主要应用场景。 总部/分支站点组网(含入云)场景客户总部、分支机构、自建机房等站点位于中国境内或境外网络节点覆盖范围内,其中客户本地侧站点提供IPRAN和PON等多种接入方式。天翼云节点可以是中国电信CN2DCI网络覆盖的全国资源池,既可以接入本省天翼云,也可以跨省接入天翼云。境内第三方公有云节点接入通过CN2DCI网络实现,境外第三方云节点接入可以通过国际公司相关产品实现。 客户站点使用IPRAN接入算力专网 客户总部/分支站点由IPRAN网络接入CN2DCI网络的本地PE或延伸交换机。用户CE到ASBR/BLEAF设备通过VLAN+PW建立二层通道。客户网络CE与本地IPRAN的U设备采用单上联或双上联的方式对接,以二层VLAN方式互联。用户接入的IPRAN U设备与ASBR/BLEAF设备之间建立PW,承载用户二层通道。ASBR设备与本城域内的CN2DCI PE设备就近互联。用户CE作为自身内网的三层网关,与CN2DCI PE设备互为三层邻居。以上ASBR/BLEAF设备为复用IPRAN云专线的ASBR设备。 天翼云资源池站点接入算力专网 云资源池内云专线交换机作为CE设备,通过预开通的大带宽中继电路接入资源池所在地市CN2DCI PE设备,云资源池内不同客户之间通过不同的VRF来进行区隔。云专线交换机与CN2DCI PE设备之间通过VLAN子接口对接。
        来自:
        帮助文档
        算力专网
        产品介绍
        应用场景
      • 产品价格
        云间高速(尊享版)产品资费如下: 收费项目 资费标准包括端口使用费、BGP路由条目增强服务费、网络使用费。 收费标准 (一)端口使用费: 产品名称 标准价格(元/月) 端口使用费 100 说明:端口使用费是指客户使用云间高速服务所占用的设备端口资源的费用。 (二)BGP路由条目增强服务费 产品名称 标准价格(元/条/月) BGP路由增强服务费 (默认提供一条免费路由条目) 20 说明:BGP路由条目数不得多于20条 (三)网络使用费 产品名称 规格 标准价格(元/M/月) 网络使用费 (按单节点资源池收取) (0,20Mb) 276 网络使用费 (按单节点资源池收取) [20,50Mb) 207 网络使用费 (按单节点资源池收取) [50,100Mb) 145 网络使用费 (按单节点资源池收取) [100,500Mb) 110 网络使用费 (按单节点资源池收取) [500,1000Mb) 59 网络使用费 (按单节点资源池收取) 1Gb以上 43
        来自:
        帮助文档
        云间高速(尊享版)
        云间高速(尊享版)
        计费说明
        产品价格
      • 什么是Prometheus监控
        天翼云 Prometheus 监控服务对接开源 Prometheus 生态,提供多种开箱即用的预置监控大盘,且提供全面托管的 Prometheus 服务。 什么是Prometheus实例 Prometheus实例是天翼云可观测监控服务中用于管理数据采集、存储与分析的核心逻辑单元,包含预配置的数据采集规则、时序数据库、可视化监控面板及告警策略等功能模块。 产品优势 集成便捷:提供一站式解决方案,显著降低可观测系统的部署与运维复杂度。 成本可控:相较自建方案,天翼云可观测Prometheus监控服务具备更优的性价比优势。 生态融合:深度集成天翼云容器服务,实现无缝对接。 专业护航:享有天翼云官方提供的专业技术支持体系。 注意 目前Prometheus监控服务仅于华东1、华南2、西南1上线。
        来自:
        帮助文档
        应用性能监控 APM
        用户指南
        Prometheus监控
        产品概述
        什么是Prometheus监控
      • 单请求限速
        本文介绍单请求限速功能适用场景和配置方法。 功能介绍 单请求限速功能可以限制全站加速节点响应给用户的下行速率,从而减少域名的整体带宽,节省成本。 适用场景 1. 游戏新版本发布,大量玩家同时访问全站加速节点下载更新包时。 2. 电商秒杀活动,大量用户集中访问某网站时。 注意事项 1. 单请求限速功能会限制用户的下行速率,影响用户的下载体验,需结合业务情况谨慎使用。 2. 单请求限速功能在请求大文件的情况下效果较好,如:请求文件10MB,单请求限速1MB/s。如果请求的是小文件(例如10KB),配置的限速值高于文件大小(例如1MB/s),则达不到限速效果。 配置说明 1. 登录客户控制台。 2. 单击左侧导航栏【域名管理】【域名列表】。 3. 在【域名列表】页面,找到目标域名,单击【操作】列的【编辑】。 4. 单击右侧【访问控制】。 5. 在【单请求限速】模块,单击【增加规则】。 6. 根据需求填写配置。 7. 单击【保存】,完成配置。 参数名 配置值 说明 类型 后缀名/目录/首页/全部文件/全路径文件 需要配置的文件类型。 内容 指定类型的具体内容。 类型选择后缀名、目录、全路径文件时,需配置具体内容;例如类型为后缀名时,需在内容处指明具体的文件后缀;如类型为目录时,需在内容处指明具体的目录内容。 限速值 单请求限速速率 单位支持B/s、KB/s和MB/s,最小限速值:1B/s。 优先级 数字 配置的优先级,存在多条设置时,相同文件类型及内容,执行优先级高的规则。
        来自:
        帮助文档
        全站加速
        用户指南
        域名管理
        访问控制
        单请求限速
      • 产品规格限制
        本文为您介绍弹性文件服务的产品规格限制,请您务必仔细阅读后使用。 限制项 说明 使用场景 本服务不可单独使用,需挂载至云主机等计算服务后进行访问和读写 配额 单用户默认分配50TB空间用于创建文件系统,如有更大容量的存储需求可提工单进行申请 单文件系统容量上限 500GB起步,默认32TB上限,可提交工单申请扩大上限至320TB 单文件系统可链接客户端数量上限 1000 单用户在单地域内可创建的文件系统数量 默认10个,可通过申请配额增加至20个,在多可用区资源池,各可用区共用该资源池总配额 单文件系统最大文件数 10亿 单文件系统最大目录层级 1000级 单用户文件系统可添加VPC个数上限 20 单用户权限组个数上限 20 单权限组下规则个数上限 400 CIFS文件系统级别活跃句柄数量上限 16384
        来自:
        帮助文档
        弹性文件服务 SFS
        产品简介
        产品使用限制
        产品规格限制
      • 资金管理
        提现为什么会失败? 提现失败可能由以下原因导致,请处理后再尝试提现: 代金券充值金额不能进行提现。 账号下有欠票,对应的欠票金额不能进行提现。 如用户有开通按需计费产品,可提现金额需再扣除按需计费预留的金额100元或按需资源1小时费用,在按需资源删除48小时之后可提现预留的金额。 提现有哪几种方式?完成需要多长时间 ? 提现分为原路提现和银行卡提现两种方式: 原路提现:在线充值(微信、翼支付、支付宝)优先原路退回。提现时按照原支付路径(支付宝、微信、翼支付)实时退还至原付款账户。 银行卡提现:在线充值(微信、翼支付、支付宝)原路退回若失败,则转为银行卡提现。转账汇款充值(对公充值)的金额只能进行银行卡提现。银行卡提现需要用户提交相关资料(原支付凭证等),预计10~15个工作日完成。 提现失败应该怎么处理? 如果提现申请被驳回,用户可以根据驳回原因处理提现申请后,再次申请提现。 如何查看提现和退款记录? 查看提现记录 :登录费用中心,进入“资金管理 > 余额提现”页面,在“提现记录”区域可以查看历史的提现记录。 查看退款记录 :登录费用中心,进入“资金管理 > 余额明细” 页面,选择交易类型为退款进行查询,您的退款记录将在列表中显示。 账户余额提现的资金如何退回? 提现资金一般原路返回,即微信回归微信,支付宝回归支付宝,翼支付回归翼支付、网银回归网银账号;若原路返回失败,可通过银行卡提现完成提现。
        来自:
        帮助文档
        费用中心
        常见问题
        资金管理
      • 源站配置
        本文简述如何配置源站信息。 功能介绍 源站配置模块支持客户自定义源站。支持IP或域名,支持配置天翼云媒体存储和天翼云对象存储作为源站;支持配置多个源站地址,多源站场景下,支持设置源站的主备优先级和权重,实现负载均衡。 回源场景 功能简介 配置入口 多层级主备及权重回源 客户有多个源站时,支持多主多备,及按不同权重回源。 客户控制台域名管理域名列表回源配置源站配置。 动态回源策略 如果您的加速域名有多个源站,可以配置合适的回源策略来实现不同的效果。动态回源策略支持择优回源、按权重回源、保持登录三种回源方式。 详见:动态回源策略 区分地区、运营商回源 支持分地区、运营商回源。 通过提交工单,由天翼云客服人工配置。 区分IPv4/IPv6协议回源 支持分IPv4/IPv6协议回源。 通过提交工单,由天翼云客服人工配置。 注意事项 一个加速域名最多配置60个源站。 配置说明 1.登录边缘安全加速控制台。 2.在域名基础配置页面,点击目标域名。 3.进入源站设置页面,单击“编辑配置” 4.点击“添加源站”,输入源站地址,在“层级”下拉框中选择“主或备”,即可添加源站。 5.如需对已经添加的源站信息进行修改,可直接在配置项中进行修改。 6.也可以点击对应源站后面的“删除”键删除对应源站。
        来自:
        帮助文档
        边缘安全加速平台
        安全与加速
        域名操作指导
        基础配置
        回源配置
        源站配置
      • 资源包选购指导
        本文介绍CDN加速资源包的选购指导。 当前天翼云CDN加速支持订购面向中国内地和全球(不含中国内地)的流量包,客户可按实际业务需求选购额度匹配的规格。 选购案例 客户需要为一个小型的电商平台做加速,以解决其电商网站商品信息加载失败、加载慢的问题。 应用场景:静态小文件(图片类为主)。 加速区域:中国内地。 搭配产品:使用天翼云媒体存储来负责网站的图片存储。 流量 业务额度评估 CDN加速下行流量 下行流量:200TB/年 媒体存储传输到天翼云CDN所产生的回源流量 选择媒体存储作为源站,CDN从媒体存储获取所需要的资源所产生的流量。这部分流量的收费,详情请见:媒体存储计费项。 流量包选购 如下为CDN加速(中国内地)流量包对应的规格和标准资费。 流量包规格(GB) 流量包标准资费(元/个) 100 17 500 85 1000 170 5000 850 10000 1700 50000 7650 200000 25500 1000000 127500 根据客户业务额度预估的下行流量——200TB/年,列出三种可选择购买的流量包规格及个数的组合。 直接订购1个200TB的下行流量包,标准资费为25500元。 订购4个50TB的下行流量包,总计标准资费为4765030600元。 订购20个10TB的下行流量包,总计标准资费为20170034000元。 综上所述,推荐客户直接购买一个200TB的流量包,总计的下行流量费用是最优惠的,可以看出大额度规格的流量包享受的优惠力度相对更大。如需了解CDN加速流量包更多优惠活动,详情请见:天翼云官网最新活动。
        来自:
        帮助文档
        CDN加速
        计费说明
        资源包(预付费)
        资源包选购指导
      • 异常行为智能识别
        配置项 说明 开关 分析模型开关。 开关开启,模型运行; 开关关闭,模型停止运行。 分析域名 选择需要分析的对象,选择已经完成接入服务的域名。 异常判断条件 不同分析模型的分析条件不同,您可以根据实际的业务场景选择适合的模型。 异常客户端IP识别多UA:适用于单客户端IP有多UA的攻击特征; 异常客户端IP识别扫描大量URL:适用于单客户端IP扫描大量URL的攻击特征; 异常客户端IP识别攻击集中少量URL:适用于单客户端IP集中攻击少量URL的攻击特征; 异常客户端IP识别反复触发策略:适用于单客户端IP反复触发访问控制/频率控制/CC防护策略的攻击特征; 异常客户端IP+UA识别反复攻击少量URL:适用于单客户端(IP+UA),反复攻击少量的URL的攻击特征; 异常UA识别识别单客户端IP变更UA扫描:适用于单客户端IP变更UA扫描的攻击特征。 分析频率 分析频率为分析任务执行频率;统计周期超过12小时,建议分析频率设置大于等于5分钟;统计周期达到24小时,建议分析频率设置大于等于10分钟。 URL是否统计问号后参数 统计URL的范围是否包含问号后参数。
        来自:
        帮助文档
        边缘安全加速平台
        安全与加速
        安全
        智能防护
        异常行为智能识别
      • 配置升级-服务配置修改建议
        本章节主要介绍配置升级后的服务配置修改建议。 操作场景 当节点组内ECS实例的规格(vCPU和内存)无法满足您的业务需求时,您可以使用配置升级功能提升ECS实例规格。升级配置后需要手动修改HDFS、YARN和Spark等服务的配置信息。本文为您介绍如何在翼MR Manager的“配置管理”页面修改配置项。 前提条件 已创建集群。 操作步骤 1. 在翼MR Manager中,单击“运维与配置”。 2. 单击“配置管理”。 3. 选择“所选集群服务”,点击查询,即可在当前页面修改配置信息。 配置修改建议说明 1. Doris:Doris所在节点配置升级后,Doris FE建议使用节点一半内存。 2. Elasticsearch:一个Elasticsearch节点,内存建议不超过64G。Elasticsearch所在节点配置升级后,Elasticsearch会自动根据节点情况设置内存值,一般无须用户手动修改,但需要重启集群。如果想手动设置,可以修改jvm.options文件配置Xms30g、Xmx30g参数,并重启集群。 3. HBase:HBase所在节点配置升级后,修改建议如下: hbasesite.xml:hbase.regionserver.handler.count 说明 :一般跟CPU核数相同。 hbaseenv.sh:export HBASEMASTEROPTS :"Xmsg Xmxg" 说明 :master不消耗很多内存,一般默认不添加或者分配2~8G左右。 hbaseenv.sh:export HBASEREGIONSERVEROPTS:"Xmsg Xmxg " 说明 :regionserver需要较多内存,一般配置内存配额的一半或更多。 4. HDFS:HDFS所在节点配置升级后,可以根据hadoopenv.sh 参数配置进行,通过调整服务的内存大小调整服务的性能,如Xmx20g Xms20g Xmn4g,然后重启服务。NameNode 建议文件、目录、数据块之和1亿,配置50G。 5. Hive:Hive所在节点配置升级后,可以通过hiveenv.sh统一参数配置来进行,也可以在作业提交时使用额外参数指定来进行。通过调整服务的内存大小调整服务的性能,如Xmx20g Xms20g Xmn4g,然后重启服务。内存大小可以根据机器的总内存而定,建议初始值为总内存大小的10%,后续根据性能需求调整。 6. Kafka:Kafka所在节点配置升级后,建议配置如下: kafkaenv.sh设置jvm配置参数:调整jvm堆大小,通过调整参数:export KAFKAHEAPOPTS"Xmx20G Xms20G Xmn4g"设置堆大小。 server.properties文件建议修改的配置项: num.io.threads:修改写磁盘的线程数,建议配置为CPU核数的50%; num.replica.fetchers:修改副本拉取线程数,建议配置为CPU核数50%的1/3; num.network.threads:修改数据传输线程数,建议配置为CPU核数的50%的2/3; replica.fetch.max.bytes:副本拉取数据量的大小。内存增加,可以适当加大该值; socket.send.buffer.bytes:调整socket发送的数据量。内存增加,可以适当加大该值; socket.receive.buffer.bytes:调整socke接受的数据量。内存增加,可以适当加大该值; socket.request.max.bytes:socket请求的数据量。内存增加,可以适当加大该值。 7. Kerberos:建议保持默认值,无需修改配置。 8. Kibana:Kibana是一个基于NodeJS的单页web应用,一般情况下,对内存CPU占用很少,无须修改内存、CPU等配置。 9. Kyuubi:Kyuubi一般情况下,对内存CPU占用很少,无须修改内存、CPU等配置。 10. OpenLDAP:建议保持默认值,无需修改配置。 11. Ranger:Ranger所在节点配置升级后,修改建议如下: rangeradmin通过{installdir}/ews/rangeradminservices.sh中变量 rangeradminmaxheapsize的值修改JMX,JAVAOPTS修改Xmx、Xmn等JVM参数,一般设置18g,1K policy建议设置为1G,1W policy建议设置为8G。 rangerusersync通过/{installdir}/rangerusersyncservices.sh中变量rangerusersyncmaxheapsize 的值修改JMX,JAVAOPTS修改Xmx Xmn等JVM参数,一般设置18g,1K policy建议设置为1G,1W policy建议设置为8G。 12. Spark:Spark所在节点配置升级后,修改建议如下: spark.history.kerberos.principal和spark.history.kerberos.keytab为spark读写eventLog的租户,用户如有特殊需求自行更改。 spark.yarn.historyServer.address:说明了history server的地址,用户如有特殊需求自行更改。 spark.dynamicAllocation.enabled 和 spark.dynamicAllocation.maxExecutors 分别控制动态和动态开启下能使用的最大资源,用户如有特殊需求自行更改。 spark.executor.cores 和 spark.executor.memory 确保spark.executor的每一个core分配到2~4g内存,标准是4g,具体视情况而定,设置core的memory设置过小executor容易oom。 13. Trino:Trino的服务包括coordinator和worker。Trino所在节点配置升级后,可以根据jvm.config参数配置进行,通过调整服务的内存大小调整服务的性能,如Xmx128g Xms128g,然后重启服务。 14. YARN:YARN所在节点配置升级后,可以根据yarnenv.sh 参数配置进行,通过调整服务的内存大小来调整服务的性能,如Xmx20g Xms20g Xmn4g,然后重启服务。NM用于集群中作业的内存和CPU,需要修改NM节点的yarnsite.xml中的yarn.nodemanager.resource.memorymb的值,该值用于所有作业的最多可用内存;以及yarn.nodemanager.resource.cpuvcores的值,该值用于所有作业的最多可用虚拟CPU核数。 15. ZooKeeper:ZooKeeper所在节点配置升级后,可通过配置java.env文件,在其中添加:export ZKSERVERHEAP2048(这里设置的单位默认是MB)。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        服务配置修改建议
        配置升级-服务配置修改建议
      • 运行SparkSQL作业
        本章节主要介绍翼MapReduce如何运行SparkSQL作业。 用户可将自己开发的程序提交到翼MR中,执行程序并获取结果。本章节教您在翼MR集群后台如何提交一个新的SparkSQL作业。SparkSQL作业用于查询和分析数据,包括SQL语句和Script脚本两种形式,如果SQL语句涉及敏感信息,请使用Spark Script提交。 前提条件 用户已经将运行作业所需的程序包和数据文件上传至HDFS系统中。 通过后台提交作业 例如安装路径为“/usr/local/spark3”。具体以实际为准。 1. 登录翼MR管理控制台。 2. 选择“我的集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。 3. 在“节点管理”页选中单击Master节点,选择要进入的Master节点。 4. 单击该节点右侧的“远程连接”。 5. 根据界面提示,输入Master节点的用户名和密码,用户名、密码分别为root和创建集群时设置的密码。 6. 集群默认开启Kerberos认证,执行以下命令认证当前用户. 示例: klist kt /etc/security/keytabs/spark.keytab 获取spark.keytab的principalname kinit kt /etc/security/keytabs/spark.keytab spark.keytab的principalname 7. 打开sparksql命令行,进入sparksql命令行后可执行SQL语句,执行命令如下: cd $SPARKHOME ./bin/sparksql conf spark.yarn.principaldefault 若需要执行SQL文件,需要上传SQL文件(如上传到“/opt/”目录),上传文件后执行命令如下: cd $SPARKHOME ./bin/sparksql conf spark.yarn.principaldefault f /opt/script.sql
        来自:
        帮助文档
        翼MapReduce
        用户指南
        管理集群
        作业管理
        运行SparkSQL作业
      • 1
      • ...
      • 13
      • 14
      • 15
      • 16
      • 17
      • ...
      • 197
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      天翼云新春焕新季

      云主机开年特惠28.8元/年,0元秒杀等你来抢!

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      中小企业服务商合作专区

      国家云助力中小企业腾飞,高额上云补贴重磅上线

      出海产品促销专区

      爆款云主机低至2折,高性价比,不限新老速来抢购!

      天翼云奖励推广计划

      加入成为云推官,推荐新用户注册下单得现金奖励

      产品推荐

      弹性云主机 ECS

      物理机 DPS

      多活容灾服务

      GPU云主机

      弹性伸缩服务 AS

      弹性高性能计算 E-HPC

      天翼云CTyunOS系统

      模型推理服务

      应用托管

      推荐文档

      天翼云域名的优势

      源端安装客户端

      账单

      常见问题

      产品功能

      CentOS 磁盘挂载教程

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 服务器安全卫士
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号