爆款云主机低至25.83元/年
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 云聚517 · 好价翼起拼 NEW 爆款云主机低至25.83元/年,参与拼团享更多优惠,拼成得额外优惠券
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
公共算力服务
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V4-Flash
  • GLM-5.1
  • Qwen3.5-122B-A10B
  • DeepSeek-V3.2(旗舰版)
  • GLM-5(正式版)
智算一体机
  • 智算一体机
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场进入AI Store创新解决方案公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 安全邮箱
  • WPS 365 天翼云版
  • 天翼企业云盘(标准服务版)
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      数据集成工具_相关内容
      • 处理异常行为检测事件
        处理异常行为检测事件操作指导。 DSC服务根据敏感数据规则识别OBS存储桶中的数据,并对识别出的敏感数据进行监控。一旦监控到与敏感数据相关的异常事件操作,就会将监控结果展示在异常事件处理页面中,您可以根据需要处理异常事件。 前提条件 当前异常事件处理页面含有异常事件。 操作步骤 1. 登录管理控制台。 2. 单击左上角的,选择区域或项目。 3. 在左侧导航树中,单击,选择“安全 > 数据安全中心”,进入数据安全中心总览界面。 4. 在左侧导航树中选择“数据风险检测 > 数据使用审计”。 5. 在异常事件列表中,在需要处理的异常事件所在行的“操作”列,单击“处理”。 6. 在弹出的对话框中,选择处理方式,并单击“确定”。 一共有以下2种处理方式: “确认该事件为违规事件”:若您确认该事件的识别结果确实为违规事件,请勾选该选项。一旦将异常事件设定为违规确认,DSC仍会继续对该事件进行警告提示,即该事件仍会在异常事件列表中显示。 “确认该事件为正常情况,无需进行处理”:若您确认该事件的识别结果为正常操作,无需进行处理,请勾选该选项。一旦将异常事件设定为正常确认,DSC将不再对该事件进行警告提示,即该事件将不会在异常事件列表中显示。
        来自:
        帮助文档
        数据安全中心
        用户指南
        数据安全运营
        数据使用审计
        处理异常行为检测事件
      • 到期
        本文帮助您了解海量文件服务OceanFS产品的到期提醒和数据保留。 到期提醒 在服务到期(指按周期计费)前7天、3天、1天时系统将向您发送到期提醒短信和邮件,请注意查看并及时处理。 数据保留 服务到期后您的存储资源将暂时被冻结,无法进行读写操作。资源保留期15天,若没有即时续订资源及数据将被销毁。
        来自:
        帮助文档
        海量文件服务 OceanFS
        计费说明
        到期
      • 切换主备实例的可用性策略
        说明:本章节会介绍如何切换主备实例的可用性策略 操作场景 关系型数据库服务支持切换主备实例的可用性策略,以满足不同业务需求。可选择 “可靠性优先”或者“可用性优先”两种策略。 可靠性优先(默认选择):数据库应该尽可能保障数据的可靠性,即数据丢失量最少。对于数据一致性要求较高的业务,建议选择该策略。 可用性优先:数据库应该可快恢复服务,即可用时间最长。对于数据库在线时间要求较高的业务,建议选择该策略。 操作步骤 1. 登录管理控制台。 2. 单击管理控制台左上角的,选择区域和项目。 3. 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。 4. 在“实例管理”页面,选择指定的主备实例,单击主实例名称。 5. 在“基本信息”,在“数据库信息”模块的“切换策略”处,单击“修改”,在弹出框中,选择策略,单击“确定”,完成修改。 6. 在实例的“基本信息”页面,查看修改结果。
        来自:
        帮助文档
        专属云(关系型数据库MySQL)
        用户指南
        实例管理
        切换主备实例的可用性策略
      • 切换可用性策略
        本章节介绍如何切换主备实例的可用性策略。 操作场景 关系型数据库服务支持切换主备实例的可用性策略,以满足不同业务需求。 操作步骤 步骤 1 登录管理控制台。 步骤 2 单击管理控制台左上角的,选择区域和项目。 步骤 3 选择“数据库 > 关系型数据库”。进入关系型数据库信息页面。 步骤 4 在“实例管理”页面,选择指定的主备实例,单击主实例名称。 步骤 5 在“基本信息”,在“数据库信息”模块的“切换策略”处,单击“修改”,在弹出框中,选择策略,单击“确定”,完成修改。 可靠性优先(默认选择):数据库应该尽可能保障数据的可靠性,即数据丢失量最少。对于数据一致性要求较高的业务,建议选择该策略。 可用性优先:数据库应该可快恢复服务,即可用时间最长。对于数据库在线时间要求较高的业务,建议选择该策略。 步骤 6 在实例的“基本信息”页面,查看修改结果。
        来自:
        帮助文档
        关系数据库SQL Server版
        用户指南
        管理数据库实例
        切换可用性策略
      • 支持云硬盘加密功能
        云硬盘支持加密功能,可确保数据安全,以防用户隐私数据泄露。 什么是云硬盘加密? 当您的业务因为等保合规或安全要求等原因,需要对存储在云硬盘上的数据进行加密保护时,您可以在创建云硬盘时勾选加密选项,即可对新创建的云硬盘进行加密。 密钥管理 天翼云使用行业标准的AES256 算法,利用数据密钥加密您的云硬盘数据,加密云硬盘使用的密钥由天翼云自研密钥管理(KMS,Key Management Service)功能提供,用户可轻松创建并管理密钥,满足数据加解密及数字签名验签等需求,安全便捷。 KMS通过使用硬件安全模块HSM(Hardware Security Module)保护密钥的安全,所有的用户密钥都由HSM中的根密钥保护,避免密钥泄露。密钥管理可以轻松满足对小数据和大量数据的加解密。 工作原理 服务端加密支持选择默认密钥及用户自行创建的用户主密钥,具体可选择的密钥类型如下。 密钥创建者 密钥类型 密钥算法 服务版本 云产品 默认密钥 AES256(默认) 按需版&包周期版 用户自行创建 用户主密钥软件 AES256 按需版 用户自行创建 用户主密钥硬件 AES256 SM4 按需版 在了解云硬盘加密工作原理之前,首先需要了解两个概念: 默认密钥 系统为云产品自动创建的用于服务端加密的默认密钥,默认密钥与云产品对应,每个天翼云账号下的每个云产品,在每个资源支持创建1个默认密钥。 默认密钥的别名定义为alias ,例如aliasecs。 默认密钥的密钥材料由KMS生成,不支持导入外部密钥材料,同时不支持自动轮转、启用/禁用、删除等操作。 用户主密钥 用户主密钥云产品加密时,可选用户在KMS服务中自建的用户主密钥,密钥类型为对称密钥,算法支持AES256、SM4,保护级别可选软件保护、硬件保护。 用户主密钥按照KMS按需及包周期版的服务标准资费进行计费,请您确保账户余额充足、到期前及时续费,避免KMS服务冻结,冻结后云产品无法进行正常的加解密操作,云产品可能会出现异常。 用户主密钥支持计划删除,操作计划删除前请确保该密钥非云产品加密使用的密钥,避免误删除导致云产品无法正常加解密而出现异常。为避免误删,您可以为密钥开启删除保护功能。 注意 当前云硬盘加密仅支持选择按需版本中的自建用户主密钥,当前包周期版本中的用户主密钥暂不支持做云硬盘加密使用。 若您为2024年9月10日之后购买了KMS包周期服务,您可选择使用默认密钥进行云产品加密。 第一次使用加密云硬盘时,系统会自动创建一个用户主密钥(CMK),该密钥有且仅有一个,且是在KMS中的相应地域所创建,并将其存储在受严格的物理和逻辑安全控制保护的密钥管理服务上。查看如何通过KMS实现服务端加密。 每个地域的加密云硬盘,都需要通过256位数据密钥(DEK)进行加密,此数据密钥(DEK)具备地域唯一性,即每个地域都有且仅有一个。该密钥受 KMS 提供的密钥管理基础设施的保护,能有效防止未经授权的访问。云硬盘的数据密钥(DEK)仅在实例所在的宿主机的内存中使用,不会以明文形式存储在任何持久化介质(即使是云硬盘本身)上。 在创建加密云硬盘并将其挂载到实例后,以下数据都将关联此密钥并进行加密: 云硬盘中的静态数据 云硬盘和实例间传输的数据(实例操作系统内的数据不加密) 通过加密云硬盘创建的快照
        来自:
        帮助文档
        云硬盘 EVS
        产品介绍
        功能特性
        支持云硬盘加密功能
      • 支持云硬盘加密功能
        云硬盘支持加密功能,可确保数据安全,以防用户隐私数据泄露。 什么是云硬盘加密? 当您的业务因为等保合规或安全要求等原因,需要对存储在云硬盘上的数据进行加密保护时,您可以在创建云硬盘时勾选加密选项,即可对新创建的云硬盘进行加密。 密钥管理 天翼云使用行业标准的AES256 算法,利用数据密钥加密您的云硬盘数据,加密云硬盘使用的密钥由天翼云自研密钥管理(KMS,Key Management Service)功能提供,用户可轻松创建并管理密钥,满足数据加解密及数字签名验签等需求,安全便捷。 KMS通过使用硬件安全模块HSM(Hardware Security Module)保护密钥的安全,所有的用户密钥都由HSM中的根密钥保护,避免密钥泄露。密钥管理可以轻松满足对小数据和大量数据的加解密。 工作原理 服务端加密支持选择默认密钥及用户自行创建的用户主密钥,具体可选择的密钥类型如下。 密钥创建者 密钥类型 密钥算法 服务版本 云产品 默认密钥 AES256(默认) 按需版&包周期版 用户自行创建 用户主密钥软件 AES256 按需版 用户自行创建 用户主密钥硬件 AES256 SM4 按需版 在了解云硬盘加密工作原理之前,首先需要了解两个概念: 默认密钥 系统为云产品自动创建的用于服务端加密的默认密钥,默认密钥与云产品对应,每个天翼云账号下的每个云产品,在每个资源支持创建1个默认密钥。 默认密钥的别名定义为alias ,例如aliasecs。 默认密钥的密钥材料由KMS生成,不支持导入外部密钥材料,同时不支持自动轮转、启用/禁用、删除等操作。 用户主密钥 用户主密钥云产品加密时,可选用户在KMS服务中自建的用户主密钥,密钥类型为对称密钥,算法支持AES256、SM4,保护级别可选软件保护、硬件保护。 用户主密钥按照KMS按需及包周期版的服务标准资费进行计费,请您确保账户余额充足、到期前及时续费,避免KMS服务冻结,冻结后云产品无法进行正常的加解密操作,云产品可能会出现异常。 用户主密钥支持计划删除,操作计划删除前请确保该密钥非云产品加密使用的密钥,避免误删除导致云产品无法正常加解密而出现异常。为避免误删,您可以为密钥开启删除保护功能。 注意 当前云硬盘加密仅支持选择按需版本中的自建用户主密钥,当前包周期版本中的用户主密钥暂不支持做云硬盘加密使用。 若您为2024年9月10日之后购买了KMS包周期服务,您可选择使用默认密钥进行云产品加密。 第一次使用加密云硬盘时,系统会自动创建一个用户主密钥(CMK),该密钥有且仅有一个,且是在KMS中的相应地域所创建,并将其存储在受严格的物理和逻辑安全控制保护的密钥管理服务上。查看如何通过KMS实现服务端加密。 每个地域的加密云硬盘,都需要通过256位数据密钥(DEK)进行加密,此数据密钥(DEK)具备地域唯一性,即每个地域都有且仅有一个。该密钥受 KMS 提供的密钥管理基础设施的保护,能有效防止未经授权的访问。云硬盘的数据密钥(DEK)仅在实例所在的宿主机的内存中使用,不会以明文形式存储在任何持久化介质(即使是云硬盘本身)上。 在创建加密云硬盘并将其挂载到实例后,以下数据都将关联此密钥并进行加密: 云硬盘中的静态数据 云硬盘和实例间传输的数据(实例操作系统内的数据不加密) 通过加密云硬盘创建的快照
        来自:
        帮助文档
        弹性云主机 ECS
        用户指南
        云硬盘
        加密云硬盘
        支持云硬盘加密功能
      • 主机迁移
        本节主要介绍主机迁移 主机迁移服务SMS是一种P2V/V2V迁移服务,可以帮您把X86物理服务器或者私有云、公有云平台上的虚拟机迁移到天翼云弹性云服务器上,从而帮助您轻松地把服务器上的应用和数据迁移到天翼云。主机迁移服务SMS已上线,可直接在控制台使用,无需单独安装,主机场景的迁移推荐使用该服务。RDA主要用于对象存储数据的迁移场景。 说明 已完成RDA安装机器和源端待迁移主机hosts文件配置。
        来自:
        帮助文档
        云迁移工具RDA
        用户指南
        主机迁移
        主机迁移
      • 缩容集群
        用户可以根据业务需求量,通过简单的缩减Core节点或者Task节点,对集群进行缩容,以使MRS拥有更优的存储、计算能力,降低运维成本。 当集群正在进行主备同步操作时,不允许进行缩容操作。 说明 MRS包周期集群暂不支持缩容,当前仅支持MRS按需集群按指定数量进行缩容。 背景信息 目前支持缩容Core节点和Task节点,不支持缩容Master节点。对集群进行缩容时,只需要在界面调整节点个数,MRS会自动选择缩容节点,完成缩容任务。 自动选择缩容节点的策略如下: 不允许缩容安装了基础组件(Zookeeper,DBService,KrbServer,LdapServer等)的节点,MRS不会选择这些节点进行缩容。因为这些基础组件是集群运行的基础。 Core节点是存放集群业务数据的节点,在缩容时必须保证待缩容节点上的数据被完整迁移到其他节点,即完成各个组件的退服之后,才会执行缩容的后续操作(节点退出Manager和删除ECS等)。在选择Core节点时,会优先选择存储数据量较小,且可退服实例健康状态良好的节点,避免节点退服失败。例如在分析集群上,Core节点安装了DataNode,缩容时会优先选择DataNode存储数据量较小且健康状态良好的节点。 Core节点在缩容的时候,会对原节点上的数据进行迁移。业务上如果对数据位置做了缓存,客户端自动刷新位置信息可能会影响时延。缩容节点可能会影响部分HBase on HDFS数据的第一次访问响应时长,可以重启HBase或者对相关的表Disable/Enable来避免。 Task节点本身不存储集群数据,属于计算节点,不存在节点数据迁移的问题。因此在选择Task节点时,优先选择健康状态为故障、未知、亚健康的节点进行缩容。这些节点实例的健康状态信息可以在MRS上的“实例”管理界面查看。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        管理集群
        节点管理
        缩容集群
      • 计费类
        怎样排查DLI计费异常? 如果您在使用DLI服务的过程中,感觉计费有异常,可按照以下步骤进行排查: 说明以下操作涉及DLI管理控制台界面,详细介绍请参考《数据湖探索用户指南》中的《作业管理》。 SQL作业 登录DLI管理控制台。 进入“作业管理”>“SQL作业”页面。 查看需要确认的作业详情,确认在扣费时间段内是否有以下操作: 是否使用自建的队列。 是否执行SQL作业。 如果使用了自建的队列执行作业,即为正常计费,默认的计费模式是按CU时计费。 如果使用的是default队列执行作业,则按照扫描量计费。 如果没有执行SQL作业,则可继续排查Spark作业。 Spark作业 进入“作业管理”>“Spark作业”页面。 查看作业是否已经完成,如果未完成,执行作业的计费模式是按CU时计费。 如果没有执行Spark作业,则可继续排查Flink作业。 Flink作业 进入“作业管理”>“Flink作业”页面。 查看作业是否已经完成,如果未完成,执行作业的计费模式是按CU时计费。 如果在扣费时间段内没有执行过作业,则请继续排查是否是因为存储了大量数据而产生的计费。 数据存储 进入“数据管理”>“库表管理”页面。 查看所建的数据库中是否有存储在DLI中的数据: 单击所要查看的数据库名,进入对应的“表管理”页面; 查看对应表的“数据存储位置”是否为DLI。如果有存储在DLI中的数据,则按照存储计费的标准计费。 如果上述内容排查后均无问题,可提交工单,将会有服务支撑人员在后台为您排查。
        来自:
        帮助文档
        数据湖探索
        常见问题
        计费类
      • 任务列表
        此章节为您介绍数据加密网关任务列表的相关功能 任务列表用于展示洗数任务和完整性校验进度以及状态,并在洗数异常时提供下载异常信息功能,帮助及时排查定位异常原因。 查询步骤 1. 使用运维账号登录数据加密网关。 2. 在左侧导航栏选择“数据库管理 > 任务列表”,进入“任务列表”页面。 3. 选择需要查询的任务类型进行筛选。
        来自:
        帮助文档
        密码服务
        用户指南
        密码服务—数据加密网关操作指南
        数据库管理
        任务列表
      • 操作xstore表
        本页介绍天翼云TeleDB数据库操作xstore表的具体示例。 插入数据 xstore表插入数据和行存表语法一致,使用insert into 语句对表插入数据,插入子查询的结果示例如下: plaintext teledb create table xt (a int ,b int ,c text) using xstore; CREATE TABLE teledb insert into xt select 1,i,'c'i from generateseries(1,20) i; INSERT 0 20 teledb select from xt; a b c ++ 1 1 c1 1 2 c2 1 3 c3 1 4 c4 1 5 c5 1 6 c6 1 7 c7 1 8 c8 1 9 c9 1 10 c10 1 11 c11 1 12 c12 1 13 c13 1 14 c14 1 15 c15 1 16 c16 1 17 c17 1 18 c18 1 19 c19 1 20 c20 (20 rows) 更新数据 xstore表更新数据和行存表语法一致,使用update 命令对指定列或多列数据进行更新,操作如下: plaintext teledb update xt set bb+a; UPDATE 20 teledb select from xt; a b c ++ 1 2 c1 1 3 c2 1 4 c3 1 5 c4 1 6 c5 1 7 c6 1 8 c7 1 9 c8 1 10 c9 1 11 c10 1 12 c11 1 13 c12 1 14 c13 1 15 c14 1 16 c15 1 17 c16 1 18 c17 1 19 c18 1 20 c19 1 21 c20 (20 rows)
        来自:
        帮助文档
        分布式融合数据库HTAP
        私有云产品
        开发手册
        xstore引擎
        基础使用介绍
        操作xstore表
      • 优势对比
        相比自购服务器搭建数据库服务,关系数据库MySQL版在服务可用性、数据可靠性、系统安全性、数据库备份等方面具有明显优势。本文从多个维度,为您详细介绍关系数据库MySQL版的优势。 表1 优势对比 对比项 关系数据库MySQL版 自购服务器搭建数据库服务 服务可用性 提供高可用架构,支持主备架构,保证服务可用性和容错性。弹性云主机可用性请参见产品优势。 自建数据库的可用性受到自身技术水平和硬件设备的限制,难以保证高可用性和容错性。 数据可靠性 提供数据备份和恢复,支持多种备份存储和备份策略,保障数据的可靠性和完整性。存储可靠性请参见产品优势 。 自建数据库需自行实现备份和恢复,备份存储和备份策略不够完善,存在数据丢失的风险。 系统安全性 提供多种安全措施,包括数据加密、访问控制、网络隔离等,保障数据的安全性。 自建数据库受开发人员技能、安全配置和风险管理等限制,安全性更难保障。 数据库备份 提供灵活的备份和恢复策略,支持自动备份、手动备份和增量备份,为用户提供高效的数据备份和恢复。 备份和恢复策略繁琐复杂,备份失败率高,难以保证数据备份和恢复的效率和完整性。 软硬件投入 用户无需购买数据库软硬件设备和托管设备,通过付费模式即可获得完善的数据库服务。 需要花费大量时间和成本购买软硬件设备和托管设备,并且需要承担维护设备、维护数据库等额外成本。 系统托管 天翼云提供完善的托管服务,包括应用部署、监控检测、资源调度和故障处理等,降低用户的运维成本。 需要用户自行承担系统托管和维护等工作,投入较大的人力资源和时间成本。 维护成本 天翼云提供高性能、高可用性、高安全性的MySQL云服务,用户只需关注业务需求,降低维护成本。 维护成本较高,需要购买和维护硬件设备、数据库软件,以及承担数据库的维护和升级等额外成本。 部署扩容 提供弹性扩容和收缩服务,根据业务需求自动分配和回收资源,避免资源浪费和运营成本增加。 需要用户自行实现部署和扩容,扩容过程繁琐,并且需要承担额外的硬件资源和运维成本。 资源利用率 提供可弹性调度的资源池,提高数据库资源的利用率并且降低成本。 资源利用率不尽如人意,容易造成资源浪费,增加成本。
        来自:
        帮助文档
        关系数据库MySQL版
        产品简介
        产品优势
        优势对比
      • 入门概述
        场景说明 相关文档 实现 IDC 与 VPC 高速互通。生产数据可快速上传至云进行分析,云上应用也能流畅调用本地数据,即使业务高峰,数据传输依然高效稳定,提升混合云业务协同效率,降低运营成本,推动企业数字化转型。 打通跨地域、跨账号的 VPC 网络,实现数据高速稳定传输。实现企业不同区域公司业务系统间数据交互流畅,资源可灵活调用,显著提升跨区域业务协同效率,降低网络建设与运维成本,为集团一体化运营提供有力支撑。
        来自:
        帮助文档
        云间高速(标准版)EC
        快速入门
        入门概述
      • KVM实例变更为QingTian实例
        后续处理 如果控制台上云主机列表页,显示弹性云主机已变更规格成功,但是远程登录云主机后,操作系统无法启动,此时,请重装操作系统进行恢复。 说明 重装操作系统会清除系统盘数据,但不影响数据盘的数据。 变更规格完成后,如已确认业务恢复正常,请在快照页面手动删除快照。
        来自:
        帮助文档
        弹性云主机 ECS
        用户指南
        实例
        变更规格
        KVM实例变更为QingTian实例
      • 构造请求
        名称 描述 eopdate yyyymmddTHHMMSSZ(20211221T163614Z)(年月日T时分秒Z) Ktime 使用eopdate作为数据,sk作为密钥,算出ktime。Ktime hmacSha256(eopdate,sk) kAk 使用ak作为数据,ktime作为密钥,算出kAk。kAk hmacsha256(ak,ktime) kdate 使用eopdate的 年月日值 作为数据,kAk作为密钥,算出kdate。
        来自:
        帮助文档
        云监控服务
        API参考
        如何调用API
        构造请求
      • 构造请求
        名称 描述 eopdate yyyymmddTHHMMSSZ(20211221T163614Z)(年月日T时分秒Z) Ktime 使用eopdate作为数据,sk作为密钥,算出ktime。Ktime hmacSha256(eopdate,sk) kAk 使用ak作为数据,ktime作为密钥,算出kAk。kAk hmacsha256(ak,ktime) kdate 使用eopdate的 年月日值 作为数据,kAk作为密钥,算出kdate。
        来自:
        帮助文档
        VPN连接
        API参考
        如何调用API
        构造请求
      • 排查磁盘使用率高问题
        本页介绍了排查磁盘使用率高问题方式与解决方法。 磁盘使用率高问题排查方式与解决方法: 1. 使用【监控图表】的【磁盘】标签进行查看磁盘的使用情况。 2. 解决方案: 1. 对于集群实例,可能是因为选择和设置的分片不合理导致数据分布不均衡,从而引起磁盘空间使用率高的情况。此时,可以对数据库集合进行合适的分片,具体操作请参见设置数据分片以充分利用分片性能。 2. 随着业务数据的增加,原来申请的数据库磁盘容量不足。此时建议扩容磁盘空间,确保磁盘空间足够。 3. 如果原有实例规格的磁盘已是最大的,请先升级规格。 4. 存在大量过期的数据文件占用磁盘空间,此时需要及时处理过期数据文件。例如:如果整个库不需要了,则可以执行dropDatabase命令进行删除,从而快速释放磁盘空间。 5. 后台数据处理机制原因:因为无论是写入、更新或删除等操作(包括索引插入和删除等操作),在后台实际上都会转成写入。因为底层的存储引擎(WiredTiger),采用是appendOnly机制。只有当存储引擎内部数据状态满足一定条件后,会触发内部的compaction操作,进行数据压缩,进而释放磁盘空间。所以有时候会发现,磁盘占用量比实际数据量大,实际上这只是“看起来大”,并不会影响用户的使用。因为内部有些数据压缩,是延时操作,没有立即执行。随着数据的继续写入,会触发后台执行数据压缩清理空间。
        来自:
        帮助文档
        文档数据库服务
        用户指南
        性能调优
        排查磁盘使用率高问题
      • 备份与恢复类
        为什么数据表会丢失或数据被删除 RDS不会删除和操作用户的任何数据。出现这种情况,请检查是否为误操作,必要时可利用已有备份恢复文件。 检查误操作:如果已经,可通过审计日志查看数据执行记录。 已有备份恢复文件: 使用RDS实例的恢复功能。 将备份数据从弹性云主机导入关系型数据库。 如何将本地数据库备份恢复到云数据库RDS 可以使用DRS迁移功能。DRS迁移功能支持将本地数据库备份恢复到云上数据库。 RDS for PostgreSQL中是否支持恢复单表信息 RDS for PostgreSQL不支持表级恢复。 云数据库服务支持使用已有的自动备份和手动备份,将实例数据恢复到备份被创建时的状态。 备份文件是否支持转储至用户的OBS桶 备份文件不支持直接转储到用户自己创建的OBS桶。建议先通过本地下载备份文件。 RDS for MySQL是否支持表级备份到指定OBS RDS for MySQL暂不支持表级备份到指定OBS。 云数据库RDS支持全量备份和增量备份(Binlog备份),无论是全量备份还是增量备份,都存储在对象存储服务上。 RDS for MySQL的备份策略如何删除 云数据库RDS暂不支持删除备份策略。 备份策略开启后不可关闭,可通过控制台修改备份策略的备份周期和保留天数,可将备份周期修改为一天。
        来自:
        帮助文档
        关系数据库MySQL版
        常见问题
        备份与恢复类
      • 如何清理云搜索服务中搜索引擎的索引数据?
        原因分析 当索引中的数据不再需要时,清理过期或无用的数据可以释放存储空间,优化集群性能。常见的清理方式包括删除整个索引或根据特定条件删除部分文档。 解决方案 1. 删除整个索引:如果整个索引不再需要,可以直接删除索引: DELETE /myindex 2. 删除部分文档:如果只需删除符合条件的部分数据,可以使用deletebyquery API。例如,删除满足条件的文档,下述命令将删除30天前的所有文档。 POST /myindex/deletebyquery { "query": { "range": { "timestamp": { "lt": "now30d" } } } } 3. 自动化清理(索引状态管理 ISM):为了定期自动删除过期数据,可以使用索引状态管理(ISM),自动定义索引的生命周期,包括删除阶段。下述命令将自动在30天后删除索引。 PUT opendistro/ism/policies/mypolicy { "policy": { "schemaversion": 1, "defaultstate": "active", "states": [ { "name": "active", "actions": [], "transitions": [ { "statename": "delete", "conditions": { "minindexage": "30d" } } ] }, { "name": "delete", "actions": [ { "delete": {} } ], "transitions": [] } ] } }
        来自:
        帮助文档
        云搜索服务
        常见问题
        问题排查类
        云搜索实例使用类
        如何清理云搜索服务中搜索引擎的索引数据?
      • 配置管控规则
        管控规则是通过一系列风险管控因子对数据库实现安全管控的规则集合,用户在使用DMS的查询窗口、数据导出、数据导入、SQL变更、实例管理、可视化编辑等功能时,可以设置管控规则对这些行为进行安全管控,进而可以在DMS平台内实现符合安全规范的数据库研发及变更流程。本文主要介绍管控规则集的新增、删除、编辑、复制创建等功能的使用方法。 前提条件 组织版本为企业版。 用户需要具有进入SQL风险 页面的菜单权限。菜单权限请参考权限说明。 用户在组织内添加了实例并绑定风险管控规则。 应用场景 场景 方案 针对所有数据库类型的高危风险操作统一拦截,如不同功能模块下的删表、删库语句。 管控规则集适配公有云所有的数据库类型。系统内置两种规则集,宽松规则集适合开发/测试环境的实例,严格规则集适合生产环境的实例。 管控规则集支持对DDL、DML、导出数据三种操作创建风险识别规则,三种操作行为涵盖了查询窗口、导入导出工单、SQL变更工单、数据库账号管理、可视化编辑等所有可能产生高危操作的功能场景,且每种风险规则提供多种风险管控因子,方便对用户的行为进行更精细化的管控。 管控规则集支持自定义审批流程,针对某种操作识别出来的风险等级,用户可以指定审批流程。 用户特定操作识别及自定义审批流程,如配置导出行数超过1000的工单由超级管理员审批。 管控规则集适配公有云所有的数据库类型。系统内置两种规则集,宽松规则集适合开发/测试环境的实例,严格规则集适合生产环境的实例。 管控规则集支持对DDL、DML、导出数据三种操作创建风险识别规则,三种操作行为涵盖了查询窗口、导入导出工单、SQL变更工单、数据库账号管理、可视化编辑等所有可能产生高危操作的功能场景,且每种风险规则提供多种风险管控因子,方便对用户的行为进行更精细化的管控。 管控规则集支持自定义审批流程,针对某种操作识别出来的风险等级,用户可以指定审批流程。 用户对不同环境的实例有不同的管控需求,如生产环境需要比较严格的管控规则,开发环境则需要一些宽松的规则,甚至无规则管控。 管控规则集适配公有云所有的数据库类型。系统内置两种规则集,宽松规则集适合开发/测试环境的实例,严格规则集适合生产环境的实例。 管控规则集支持对DDL、DML、导出数据三种操作创建风险识别规则,三种操作行为涵盖了查询窗口、导入导出工单、SQL变更工单、数据库账号管理、可视化编辑等所有可能产生高危操作的功能场景,且每种风险规则提供多种风险管控因子,方便对用户的行为进行更精细化的管控。 管控规则集支持自定义审批流程,针对某种操作识别出来的风险等级,用户可以指定审批流程。
        来自:
        帮助文档
        数据管理服务
        用户指南
        SQL治理
        规范与风险管理
        SQL风险配置
        配置管控规则
      • 个人数据保护机制
        本小节介绍证书管理服务个人数据保护机制。 为了确保您的个人数据(例如用户名、密码、手机号码等)不被未经过认证、授权的实体或者个人获取,CCMS通过加密存储个人数据、控制个人数据访问权限以及记录操作日志等方法防止个人数据泄露,保证您的个人数据安全。 收集范围 CCMS收集及产生的个人数据如下表所示: 类型 收集方式 是否可以修改 是否必须 租户ID 在控制台进行任何操作时Token中的租户ID 在调用API接口时Token中的租户ID 否 是,租户ID是证书资源身份标识 姓名 在申请SSL证书时填写的联系人姓名 是 是,证书审核人工认证阶段必须 邮箱 在申请SSL证书或私有证书时填写的邮箱 申请SSL证书时填写的邮箱:是 申请私有证书时填写的邮箱:否 申请SSL证书时填写的邮箱:是,证书审核人工认证阶段必须 申请私有证书时填写的邮箱:否 手机号码 在申请SSL证书时填写的联系人手机号 是 是,证书审核人工认证阶段必须 企业营业执照 在申请SSL证书时,可以选择上传企业营业执照 是 否 银行开户许可 在申请SSL证书时,可以选择上传银行开户许可 是 否 企业项目ID 在申请或使用SSL证书、私有证书时,可以为证书分配企业项目 是 已开通企业项目:是 未开通企业项目:否
        来自:
        帮助文档
        证书管理服务
        产品介绍
        个人数据保护机制
      • 云主机备份与其他云服务的关系
        本章节介绍了云主机备份与其他云服务的关系。 弹性云主机(ECS) 云主机备份对弹性云主机中的云硬盘进行备份,支持将备份的数据恢复到弹性云主机的云硬盘中,以便于在弹性云主机数据丢失或损坏时自助快速恢复数据。 对象存储服务(OBS) 云主机备份通过云主机与对象存储服务的结合,将云主机的数据备份到对象存储中,高度保障用户的备份数据安全。 云审计服务(CTS) 云主机备份支持通过云审计服务对备份服务资源的操作进行记录,以便用户可以查询、审计和回溯。 云硬盘备份(VBS) 云主机备份和云硬盘备份均属于备份服务,为租户数据提供备份保护。
        来自:
        帮助文档
        云主机备份 CSBS
        产品简介
        云主机备份与其他云服务的关系
      • 数据库使用
        本章节内容主要介绍数据库使用 DDS集群持续写入数据后查询报错怎么处理 问题描述 DDS集群持续写入数据,写入后查询报错。 示例: W SHARDING [Balancer] Failed to enforce tag ranges :: caused by :: ExceededTimeLimit: Unable to obtain shard utilization information for shard01 due to Operation timed out, request was RemoteCommand xxx target: 192.168. . :8635, db: admin, cmd:{ getShardStatistics: 1, maxTimeMS: 30000 } 可能原因 由于持续写入数据,导致后台chunk分裂超时。 解决方法 该类型报错属于正常的warning报错,对用户的使用不会有影响,稍后重试查询即可。 文档数据库服务在分片节点扩容期间服务是否可用 可用,文档数据库服务的扩容操作是在实例中增加新的分片,原实例中的分片不变,不影响服务的可用性。
        来自:
        帮助文档
        文档数据库服务
        常见问题
        操作类
        数据库使用
      • 产品咨询
        MySQL实例是否兼容MariaDB MariaDB是MySQL源代码的一个分支,主要由开源社区在维护,采用GPL授权许可。 MariaDB和MySQL在绝大多数方面是兼容的,对于前端应用(例如PHP、Perl、Python、Java、.NET、MyODBC、Ruby、MySQL C connector)来说,使用基本感觉不到差异性。 MySQL实例是否支持TokuDB 目前官方MySQL还不支持TokuDB。 关系数据库MySQL版产品也不支持TokuDB。 MySQL实例是否有单表尺寸限制 关系数据库MySQL版实例单表的有效最大表尺寸不受MySQL内部机制的限制,而受限于操作系统的文件尺寸限制。 由于数据库在使用过程中存在部分元数据开销,关系数据库MySQL版的单表尺寸的限制在TB级别。 客户端如何访问MySQL实例 1. 若客户是通过弹性云主机访问MySQL实例,需要云主机与MySQL处于同一个VPC下。 2. 客户自行申请弹性公网ip并绑定到对应的数据库实例,使用弹性公网ip在本地访问数据库服务,通过MySQL客户端连接数据库,再创建数据库。 具体操作,请参见实例连接方式介绍。 MySQL实例的计费模式有哪几种,计费项有哪些 关系数据库MySQL版的计费模式分为以下两种: 按需计费。 包年/包月计费。 关系数据库MySQL版计费项由实例规格、数据存储容量和备份存储容量组成,实例规格包含VCPU、内存,MySQL提供数据存储空间,用于存放您的数据;备份存储空间,用于存放您的备份数据,数据存储空间和备份存储空间订购时按照1:1进行购买,后期可以单独进行扩容。如果您使用的资源池可选择对象存储,实际的计费项是由实例规格、数据存储容量和您实际在对象存储中占用的大小进行收费。
        来自:
        帮助文档
        关系数据库MySQL版
        常见问题
        产品类
        产品咨询
      • 产品定义
        本章节为您介绍数据安全专区的产品定义。 数据安全专区是一个一体化的云上数据安全治理与防护产品方案,从数据全生命周期建立安全防护体系。产品提供数据分类分级、脱敏、水印溯源、数据库安全网关、API安全网关、API风险监测等数据安全基础能力,数据安全咨询规划和数据风险评估等数据安全服务,同时通过数据安全运营中心呈现云上整体数据安全态势。
        来自:
        帮助文档
        数据安全专区
        产品介绍
        产品定义
      • 数据恢复
        本页介绍天翼云TeleDB数据库如何进行数据恢复。 操作场景 当在使用过程中出现数据损毁,您可使用恢复功能进行实例恢复。期间TeleDB对用户数据不会做任何更改。它是基于数据备份和日志备份进行实时数据恢复。 说明 您在使用物理备份恢复功能时,请注意以下几点: 该功能只支持整实例恢复,不支持指定数据库、指定表恢复。 该功能只支持状态为运行中的实例恢复数据。 该功能只支持时间点备份(全量备份和增量备份)恢复,不支持全量备份恢复。 若要恢复到其他实例功能,请保证源实例、目标实例字符集、引擎版本兼容、节点数量一致。 恢复至其他实例会覆盖目标实例数据,请谨慎操作。 操作步骤 1. 以用户名和密码登录分布式数据库TeleDB控制台,在左侧导航树上选择备份与恢复 > 备份与恢复 ,在当前实例 下拉框选择目标实例,选择数据恢复页签。 2. 创建恢复任务 1. 单击实例恢复 ,出现实例恢复对话框。 2. 选择目标实例,设置期望恢复时间点,勾选可恢复时间点,单击校验,出现校验实例对话框。 3. 在校验实例对话框,所有检查项检查结果通过,单击确定完成数据恢复。 3. 查看恢复任务详情 1. 单击目标实例所在行操作列的详情 ,出现恢复详情对话框。 2. 在恢复详情 对话框,您可查看详情。
        来自:
        帮助文档
        分布式融合数据库HTAP
        私有云产品历史版本
        V4.0.0版本产品文档
        管理平台使用手册
        备份与恢复
        数据恢复
      • ALM-12039 OMS数据库主备不同步
        本章节主要介绍ALM12039 OMS数据库主备不同步。 告警解释 OMS数据库主备不同步,系统每10秒检查一次主备数据同步状态,如果连续30次查不到同步状态,或者同步状态异常,产生告警。 当主备数据同步状态正常,告警恢复。 告警属性 告警ID 告警级别 是否自动清除 12039 紧急 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 OMS数据库主备不同步,如果此时主实例异常,会出现数据丢失或者数据异常的情况。 可能原因 主备节点网络不稳定。 备OMS数据库异常。 备节点磁盘空间满。 处理步骤 检查主备节点网络是否正常 1.在FusionInsight Manager界面上选择“运维 > 告警 > 告警”,在告警列表中,单击此告警所在行的,查看该告警的OMS数据库备节点IP地址。 2.以root用户登录主OMS数据库节点。 3.执行ping 备OMS数据库心跳IP地址命令检查备OMS数据库节点是否可达。 是,执行步骤6。 否,执行步骤4。 4.联系网络管理员查看是否为网络故障。 是,执行步骤5。 否,执行步骤6。 5.修复网络故障,然后查看告警列表中,该告警是否已清除。 是,处理完毕。 否,执行步骤6。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        FusionInsight Manager操作指导(适用于3.x)
        告警参考(适用于MRS 3.x版本)
        ALM-12039 OMS数据库主备不同步
      • 物理备份
        本页介绍天翼云TeleDB数据库物理备份相关操作。 操作场景 物理备份是指直接备份数据库所对应的数据文件甚至是整个磁盘。TeleDB实例创建成功后,您可根据业务需要设置备份策略。TeleDB可按照用户设置的自动备份策略对数据库进行备份。 操作步骤 1. 切换至TeleDB控制台,在左侧导航树中选择备份与恢复 > 物理备份与恢复。 2. 进入物理备份与修复页面,将当前实例切换至目标实例。 3. 设置备份策略 说明 未设置备份存储相关信息,无法开启备份功能。 1. 在数据备份 页签,单击备份策略 ,出现备份策略对话框。 2. 单击去设置 ,进入备份策略设置 对话框,打开备份开启状态开关,根据如下内容填写备份策略基本信息。 备份开启时间:系统触发备份的时间,建议选择业务压力小的时间点。 备份间隔天数:间隔多少天触发一次备份,为防止数据丢失难以恢复,建议间隔时间不超过3天。 备份保留分数:系统保留的备份的份数,超过此数量,系统自动删除最旧的一次备份。保留份数取决于存储空间大小,建议选择大于2份。 增量备份开启状态:增量备份数据用于恢复到指定时间点,对于恢复及其重要,暂时不支持关闭增量备份。 3. 单击确定完成实例备份。 4. 如需再次修改备份策略设置,可重复以上操作即可。 4. 手动备份 1. 在数据备份 页签,单击备份策略 ,出现备份策略对话框。 2. 单击手动备份。 5. 查看备份详情 1. 在数据备份 页签,单击目标实例所在行详情 ,弹出备份详情对话框。 2. 当处于备份过程中时,可单击刷新查看节点备份状态的实时变化。 以对象存储备份为例,备份详情如下: 说明 备份目录:远程对象存储上的备份地址。备份时,系统会在对象存储上建立一个以实例id命名的桶,实例的所有备份数据都回存储在这个桶下面。这里备份地址是全量备份在桶下面的相对路径。 全量备份数据路径:实例名/basebkp年月日/。 增量备份数据路径:实例名/xlogbkp。 6. 删除备份 在数据备份页签,选择需删除的备份文件的目标实例,单击操作列的删除按钮,在出现的对话框中单击确认即可删除指定的备份记录和备份数据。 注意 TeleDB 支持删除一次备份记录,该备份记录对应在对象存储上的备份数据也会同步删除,请谨慎操作。
        来自:
        帮助文档
        分布式融合数据库HTAP
        私有云产品
        管理平台使用手册
        控制台操作指南
        备份与恢复
        物理备份
      • 为什么云搜索服务中的磁盘空间使用增长异常快?
        原因分析 1. 未及时删除过期数据:某些索引可能存储了过期数据,但没有定期清理。这通常出现在日志类索引中,如果没有设置索引状态管理(ISM),大量过期数据会长期占用磁盘空间。 2. 索引分片过多:如果集群中索引分片过多,且每个分片包含的实际数据量较少,系统会占用更多的磁盘空间来维护这些分片的元数据和存储结构。 3. 重复数据:索引中的数据存在重复存储的现象,比如数据冗余或未优化的文档结构,这会导致磁盘使用量激增。 解决方案 启用索引状态管理(ISM):为日志或其他过期数据的索引设置生命周期策略,自动删除过期的索引。如下命令将自动在30天后删除旧索引。 PUT opendistro/ism/policies/mypolicy { "policy": { "schemaversion": 1, "defaultstate": "active", "states": [ { "name": "active", "actions": [], "transitions": [ { "statename": "delete", "conditions": { "minindexage": "30d" } } ] }, { "name": "delete", "actions": [ { "delete": {} } ], "transitions": [] } ] } } 2. 减少分片数量:避免创建过多分片,推荐每个分片的大小在 10GB50GB 之间。如果存在很多小分片,可以通过合并索引来优化磁盘使用。 3. 数据去重与优化:检查索引的数据结构,减少重复存储。可以通过优化文档设计或启用压缩(如source字段压缩)来节省磁盘空间。
        来自:
        帮助文档
        云搜索服务
        常见问题
        问题排查类
        云搜索实例使用类
        为什么云搜索服务中的磁盘空间使用增长异常快?
      • 大数据业务开发
        Kudu支持的压缩算法有哪些? Kudu目前支持的压缩算法有 snappy 、lz4 和 zlib ,默认是 lz4 。 如何查看Kudu日志? 1.登录集群的Master节点。 2.执行su omm命令,切换到omm用户。 3.执行 cd /var/log/Bigdata/kudu/ 命令,进入到“/var/log/Bigdata/kudu/”目录,即可查看Kudu日志信息。 新建集群Kudu服务异常如何处理? 查看Kudu服务异常日志 1.登录MRS管理控制台。 2.单击集群名称进入集群详情页面。 3.选择“组件管理 > Kudu > 实例”,找到异常实例所属的IP。 若集群详情页面没有“组件管理”页签,请先完成IAM用户同步(在集群详情页的“概览”页签,单击“IAM用户同步”右侧的“同步”进行IAM用户同步)。 4.登录异常实例IP所在节点,查看Kudu日志。 cd /var/log/Bigdata/Kudu [root@nodemaster1AERu kudu] ls healthchecklog runninglog startlog 其中healthchecklog目录保存Kudu健康检查日志,startlog保存启动日志,runninglog保存Kudu进程运行日志。 [root@nodemaster1AERu logs] pwd /var/log/Bigdata/kudu/runninglog/master/logs [root@nodemaster1AERu logs] ls al kudumaster.ERROR kudumaster.INFO kudumaster.WARNING 运行日志分ERROR、INFO、WARNING三类, 每类会单独打印到相应的文件中,通过cat命令即可查看。 已知Kudu服务异常处理 日志/var/log/Bigdata/kudu/runninglog/master/logs/kudumaster.INFO出现异常打印: "Unable to init master catalog manager: not found: Unable to initialize catalog manager: Failed to initialize sys tables async: Unable to load consensus metadata for tablet 0000000000000000000000: xxx" 如果该异常是Kudu服务初次安装时出现,可能是KuduMaster没能同时启动,造成数据不一样导致启动失败。可以通过如下步骤清空数据目录,重启Kudu服务解决。若非初次安装,清空数据目录会造成数据丢失,请先进行数据迁移再进行数据目录清空操作慎重操作。 1.查找数据目录fsdatadir, fswaldir, fsmetadir。 find /opt name master.gflagfile cat /opt/Bigdata/FusionInsightKudu/KuduMaster/etc/master.gflagfile grep fs 2.在集群详情页面选择“组件管理 > Kudu”,单击“停止服务”。 3.在所有KuduMaster、KuduTserver的节点清空Kudu 数据目录,如下命令以两个数据盘为例,具体命令请以实际情况为准。 rm Rvf /srv/Bigdata/data1/kudu, rm Rvf /srv/Bigdata/data2/kudu 4.在集群详情页面选择“组件管理 > Kudu”,选择“更多 > 重启服务”。 5.查看Kudu服务状态和日志。
        来自:
        帮助文档
        翼MapReduce
        常见问题
        操作类
        大数据业务开发
      • 实例详情
        本文主要介绍怎么查看实例详情信息。 前提条件 已登录数据管理服务。 登录用户对该实例具有查看或者更高权限。 操作步骤 1. 点击 数据资产 > 实例管理 ,进入实例列表界面。 2. 在列表中找到目标实例,在操作栏中找到 更多 > 详情 按钮。 3. 点击 详情 按钮后,在实例详情弹窗则显示全部的实例信息。
        来自:
        帮助文档
        数据管理服务
        用户指南
        数据资产
        实例管理
        实例列表
        实例详情
      • 执行Spark任务报内存不足告警如何处理?
        Spark整体heap内存是由 spark.executor.memory和spark.driver.memory控制的 Spark将spark.xxxx.memory内存分为 user heap(other)、execution heap、storage heap、system heap(300MB)。 spark.memory.fraction 可以将 spark.xxxx.memory分割出 heap storage 和 heap execution 两部分。 Heap storage Heap storage作用 Spark Heap Storage内存用于存储spark Rdd cache。 在spark SQL中也可以用于存储 view、或存储 cache table的表。 Heap storage不足 Heap storage不足一般发生在executor端。主要是因为 cache RDD 太多了,因为动态占用机制,占用heap execution空间,导致分配到当前executor的heap execution不够用,从而告警。 我们可以通过spark UI 查看 作业的storage 选项卡,定位告警的executor Id,查看cache的大小,与environment 选项卡中的spark.executor.memory做比对。 这种情况下,我们可以酌情,增加spark.executor.memory,或者uncache 或者 drop view 不需要的RDD 或者cached table。 Heap execution Heap execution作用 Heap execution 可以用于存储输入数据。 Spark是内存计算,需要将父RDD的partition读入内存中,这个数据将会被blockManager读入。 在spark shuffle map stage 或者 reduce stage都会发生读入操作。 Heap execution 可以用于shuffle 缓冲区 和 序列化反序列化。 Spark的一些使用heap缓冲区进行shuffle的场景需要分配heap space。 Heap execution空间不足 一般是读入的数据太多或者发生了数据倾斜。 spark shuffle map task读入hdfs文件块数据。 发生在shuffle map stage,spark需要读取hdfs 文件块。 这个文件快太大且不可分割,或者数据压缩密度太大,会导致task memory 急速膨胀,超过1/n 的 executor heap space 和 executor storage space总和。(此处的n是spark executor的running task数目)。 如果hdfs文件块可以分割读入task,尝试使用spark.files.maxPartitionBytes去分割读取的hdfs文件 或者 扩大 spark.executor.memory。但是后者不适用于个别hdfs大文件块情况。 如果hdfs 文件块是gzip这种的不可压缩,可能只能扩大spark.files.maxPartitionBytes,或者 在业务上有控制写入hdfs的文件格式是可分割的。 spark shuffle reduce task读入shuffle block数据太多了,也就是发生数据倾斜。 一般shuffle block 都会连续小幅度的拉入 reduce task侧,此时如果溢出,spark 会将这些数据spill disk。 如果出现reduce task读取超大shuffle block 或者 并发读取太快,会导致数据内存膨胀太快,而直接OOM。 此时spark会有task重启机制,会过滤并发过多情况。如果是读入shuffle block太大,则会反复的发生task failed情况。 此时可以适当降低map侧 shuffle write的shuffle block大小,可以尝试增加 shuffle reduce的并行度 或者 尽量使用sortBaseShuffleWriter,使用sortBaseShuffleWriter 可以实现map combiner。
        来自:
        帮助文档
        翼MapReduce
        常见问题
        大数据业务开发
        执行Spark任务报内存不足告警如何处理?
      • 1
      • ...
      • 126
      • 127
      • 128
      • 129
      • 130
      • ...
      • 428
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      云聚517 · 好价翼起拼

      爆款云主机低至25.83元/年,参与拼团享更多优惠,拼成得额外优惠券

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      聚力AI赋能 天翼云大模型专项

      大模型特惠专区·Token Plan 轻享包低至9.9元起

      青云志云端助力计划

      一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云

      企业出海解决方案

      助力您的业务扬帆出海,通达全球!

      天翼云信创专区

      “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富

      中小企业服务商合作专区

      国家云助力中小企业腾飞,高额上云补贴重磅上线

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      产品推荐

      弹性云主机 ECS

      物理机 DPS

      轻量型云主机

      多活容灾服务 MDR

      弹性伸缩服务 AS

      弹性高性能计算 E-HPC

      天翼云CTyunOS系统

      AI Store

      公共算力服务

      推荐文档

      盘符客户端

      产品功能

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 息壤智算平台
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号