活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 中小企业服务商合作专区 国家云助力中小企业腾飞,高额上云补贴重磅上线
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
公共算力服务
  • 裸金属
  • 定制裸金属
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
应用托管
  • 应用实例
科研助手
  • 科研智能体
  • 科研服务
  • 开发机
  • 并行计算
大模型
  • DeepSeek-V4-Flash
  • GLM-5.1
  • Qwen3.5-122B-A10B
  • DeepSeek-V3.2(旗舰版)
  • GLM-5(正式版)
智算一体机
  • 智算一体机
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入AI Store公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 智教云电脑
  • WPS 365 天翼云版
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)
  • 琥珀数据压缩归档服务

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      数据集成工具_相关内容
      • 查询与分析日志
        本节将介绍如何对日志数据进行查询分析,请根据您的需要选择查询分析方式。 操作场景 数据收集成功后,您可以在查询分析页面对收集到的日志数据进行实时查询分析。 前提条件 已完成数据接入,详细操作请参见云服务接入。 输入查询条件进行查询分析 1. 登录管理控制台。 2. 单击页面左上方的,选择“安全 > 态势感知(专业版)”,进入态势感知(专业版)管理页面。 3. 在左侧导航栏选择“工作空间 > 空间管理”,并在工作空间列表中,单击目标工作空间名称,进入目标工作空间管理页面。 4. 在左侧导航栏选择“日志审计 > 安全数据”,进入安全分析页面。 5. 在左侧数据空间导航栏中,单击数据空间名称,展开数据管道列后,再单击管道名称,右侧将显示管道数据的检索页面。 6. 在管道数据检索页面,输入查询分析语句。 查询分析语句由查询语句和分析语句构成,格式为 查询语句分析语句 ,查询分析语句语法详细内容请参见查询与分析语法。 说明 如果筛留字段为text类型时,默认会使用MATCHQUERY进行分词查询。 7. 单击“15分钟(相对)”,设置查询时间范围。 您可以选择相对时间(15分钟、1小时、24小时),或自定义查询时间。 8. 单击“查询/分析”,查看查询分析结果。
        来自:
        帮助文档
        态势感知(专业版)(新版)
        用户指南
        日志审计
        安全分析
        查询与分析日志
      • 删除卷
        本节主要介绍删除卷。 在“卷管理”页面,选择需要删除的卷,点击“操作”>“删除”,可以删除卷。 如果是克隆卷,还可以通过下列方法删除克隆卷:在“数据保护”>“快照管理”>“快照”页面,点击克隆卷关联的快照,进入快照详情页。在“克隆卷信息”区域,找到要删除的克隆卷,点击其“操作”列中的“删除”按钮,即可删除克隆卷。 说明 处于“已禁用”状态的卷才能被删除(3.9之前版本)。 对于上云卷,如果删除卷的时候未删除云上数据,后期可以使用卷还原功能进行卷数据还原。 删除卷时,应确保卷不包含快照、一致性快照。 如果卷状态为挂起、挂起中、挂起失败,即使选择同时删除云上数据和强制删除卷,也不能删除云上数据。 注意 对于上云卷,选择强制删除卷,且同时删除云上数据,可能会有云上数据残留,需要对云上数据进行手动删除。 如果卷存在关联克隆卷,且克隆卷未处于“删除中”或“断开链接中”状态,则禁止删除源卷。 如果卷有关联的快照或一致性快照,只能强制删除卷。强制删除卷时,将同时删除此卷的快照和一致性快照中的卷快照。同时也会产生数据残留风险,请谨慎操作。 图1 删除卷
        来自:
        帮助文档
        存储资源盘活系统
        用户指南
        卷操作
        删除卷
      • 通用类问题
        本章节列举了使用云硬盘备份过程中的通用类问题,以及相对应的解答。 什么是云硬盘备份? 云硬盘备份(Volume Backup Service)提供对公有云环境中云硬盘的基于快照技术的数据保护服务,简称VBS。 VBS使您的数据更加安全可靠。例如,当您的云硬盘出现故障或云硬盘中的数据发生逻辑错误时(如误删数据、遭遇黑客攻击或病毒危害等),可快速恢复数据。 VBS支持全量备份和增量备份。第一次做备份时,系统默认做全量备份,非第一次的备份,系统默认做增量备份。无论是全量还是增量都可以方便的将云硬盘恢复至备份时刻的状态。 什么是备份策略? 备份策略指的是对备份对象执行备份操作时,预先设置的策略,策略包括备份策略的名称、备份任务的调度计划和备份数据的保留策略。其中调度计划包括备份执行的频率,备份执行的时间点,备份数据的保留策略包括备份数据的保存时间或保存数量。通过将云硬盘绑定到备份策略,可以为云硬盘执行自动备份。 云硬盘备份支持对弹性云主机中所有云硬盘进行备份吗? 支持。云硬盘备份可以备份系统盘和数据盘。可通过创建备份策略并绑定多个云硬盘,对多个云硬盘进行备份。
        来自:
        帮助文档
        云硬盘备份 VBS
        常见问题
        通用类问题
      • 术语解释
        本文带您了解训推服务相关术语及其基本概念。 预置模型 是指训推服务提供的原始模型,您可以通过选择预置模型进行训练从而得到行业或细分场景模型,不同的基础模型的参数和能力不同,我们将持续推出不同能力方向的模型。 模型微调 是指利用预先训练好的神经网络模型,并针对特定任务在相对较少量的监督数据上进行重新训练的技术。这种方法能够充分利用预训练模型在大型数据集上学到的通用特征和知识,从而加速在新任务上的训练过程,并通常能够取得较好的性能表现。 迭代轮次 是指模型训练过程中模型学习数据集的次数,可理解为学习几遍数据,可依据需求进行调整。 批处理大小 是指在模型训练过程中,每次处理的数据样本的数量,可理解为模型每看多少数据即更新一次模型参数,在选择批处理大小时需要综合考虑各种因素。 学习率 是指更新模型参数的系数,它决定了在每次迭代中,模型参数应该沿着梯度下降的方向更新多少,需要根据具体情况来仔细选择和调整学习率。 训练数据集 是机器学习或深度学习模型训练过程中的重要组成部分。训练数据集是一组已知输入和对应输出的数据,用于训练模型以学习从输入到输出的映射关系。构建合适训练集,通过模型调优可增强模型能力,提升预测效果。
        来自:
        帮助文档
        训推服务
        产品介绍
        术语解释
      • 分片算法
        定义 按照时间范围进行分片,超过分片数量后从第一个分片再次循环分片。 特点 适用日志数据等按时间范围进行存储的数据。 枚举分组取模分片 定义 枚举+取模的组合分片方式,包含枚举键和取模键两个分片键,先通过枚举键将数据分配到不同的分组,再在分组里通过取模键对应到具体的分片。 适用条件: 枚举键可以是整数也可以是字符串,取模键必须是整数,取模键求余后的值均匀分布。如: 数据库的数据需要按区域进行隔离,但隔离后的数据量依然巨大需要按取模方式进行再次分片,可以选择此算法。 特点 支持枚举键和取模键结合进行二次分片。 取模键为自增型或随机分布的整数时能保证数据的均匀分片。 算法简单,性能高。 对多值、范围的查询支持较差(分散在不同的分片上)。 扩容时需要数据迁移。 较好的分散一些时间、机构、id峰值带来的数据热点问题。 枚举分组字符串HashCode取模分片 定义 枚举+字符串HashCode取模的组合分片方式,包含枚举键和取模键两个分片键,先通过枚举键将数据分配到不同的分组,再在分组里通过取模键对应到具体的分片。 适用条件:枚举键可以是整数也可以是字符串,取模键是字符串,取模键字符串HashCode求余后的值均匀分布。如: 数据库的数据需要按区域进行隔离,但隔离后的数据量依然巨大需要按取模方式进行再次分片,可以选择此算法。
        来自:
        帮助文档
        分布式关系型数据库
        产品介绍
        常用概念
        分片算法
      • 调度作业
        参数 说明 触发事件类型 选择触发作业运行的事件类型。 “KAFKA” “KAFKA”触发事件类型的参数 连接名称 选择数据连接,需先在“管理中心”创建kafka数据连接。 Topic 选择需要发往kafka的消息Topic。 事件处理并发数 选择作业并行处理的数量,最大并发数为128。 事件检测间隔 配置时间间隔,检测通道下是否有新的消息。时间间隔单位可以配置为秒或分钟。 读取策略 选择数据的读取位置: 从上次位置读取:首次启动时,从最新的位置读取数据。后续启动时,则从前一次记录的位置读取数据。 从最新位置读取:每次启动都会从最新的位置读取数据。 失败策略 选择调度失败后的策略: 挂起 忽略失败,读取下一个
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据开发
        作业开发
        调度作业
      • 创建VSCode开发机
        本节介绍如何创建VSCode开发机。 创建VSCode开发机 在智算套件控制台页面选择“AI应用开发”,单击“创建Notebook”。 由于开发机会单独创建eip用于暴露服务,因此在创建时会出现 “此功能会自动帮您创建弹性IP和弹性负载均衡用于服务暴露,因此会产生一定的费用。” 的提示,确认需要启用后点击“确定”。 配置基本信息 选择开发机类型,支持JupyterLab和VSCode类型的开发机,选择对应的命名空间、描述等信息。 选择开发机框架,平台内置了公共的VSCode框架。 配置工作空间 “工作空间目录配置” 默认打开,数据集挂载第一条默认为工作空间目录的配置,且只能选择私有数据集(私有数据集具有读写权限,公共数据集为只读权限)进行配置,平台会将此工作空间数据集映射到容器的/home/jovyan目录,后续使用过程中用户工作空间的持久化数据将保存到该数据集内。 “工作空间目录配置”可选择关闭,关闭后如果该开发机容器故障用户工作空间内的数据将会丢失,请谨慎选择。 数据集支持多条配置,需要确保多条不同数据集的挂载路径不会重叠、重复。
        来自:
        帮助文档
        智算套件
        用户指南
        应用管理
        开发机
        创建VSCode开发机
      • 主备
        本文介绍分布式缓存服务Redis主备 分布式缓存Redis主备在单机的基础上,增加了备用节点以保证服务的高可用性与数据可靠性,部署架构采用主备双节点模式,主节点提供日常服务访问,备用节点提供数据高可用。当主节点发生故障不可用,系统将自动进行秒级切换至备节点,以保证服务的连续性。 架构示意图 说明 主备实例包含了master和replica节点。开启数据持久化功能,同时保持节点间数据同步。 DCS实时探测实例可用性,当检测主节点发生故障,备节点升级为主节点,恢复业务。 特点 数据同步 通过增量数据同步的方式,保持缓存实例主备节点的数据一致性。当节点出现故障,主备实例会在故障恢复后进行一次全量同步,保持数据一致性。 主备秒级自动切换 当主节点出现故障不可用,系统会自动在30秒内切换至备节点,备节点升级为主节点,恢复正常数据访问,无需用户操作,从而保证服务连续性。 多可用区部署 开通实例时支持多可用区部署,主备节点可部署在不同的AZ内,节点间电力与网络均物理隔离,当一个可用区不可用时,其他可用区中的节点可以继续提供服务,避免单点故障,进一步提高数据可靠性。
        来自:
        帮助文档
        分布式缓存服务Redis版
        产品介绍
        实例类型
        主备
      • 查询拓扑节点
        名称 类型 描述 子节点类型为room name String 子节点名称。 子节点类型为room fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name格式来唯一标识该节点的名称。 子节点类型为room id String 节点ID。 子节点类型为room type String 节点类型。 子节点类型为room description String 节点描述。 子节点类型为rack name String 子节点名称。 子节点类型为rack fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为rack id String 节点ID。 子节点类型为rack type String 节点类型。 子节点类型为rack description String 节点描述。 子节点类型为server name String 子节点名称。 子节点类型为server fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为server id String 节点ID。 子节点类型为server serverId String 服务器ID。 子节点类型为server type String 节点类型。 子节点类型为server description String 节点描述。 子节点类型为server clusterAddress String 拓扑图集群网络IP。 子节点类型为server publicAddress String 拓扑图业务网络IP。 子节点类型为server allDiskPaths.usedCapacity Long 服务器上HBlock数据目录对应分区的已用容量,单位是bytes。 子节点类型为server allDiskPaths.totalCapacity Long 服务器上HBlock数据目录对应分区的总容量,单位是bytes。 子节点类型为server serverStatus String 服务器状态: Connected:已连接。 Disconnected:未连接。 Removing:移除中。 子节点类型为path name String 子节点名称。 子节点类型为path fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为path id String 节点ID。 子节点类型为path serverId String 服务器ID。 子节点类型为path type String 节点类型。 子节点类型为path totalCapacity Long HBlock数据目录对应分区的总容量,单位是bytes。 子节点类型为path usedCapacity Long HBlock数据目录对应分区的已用容量,单位是bytes。 子节点类型为path capacityQuota Long 数据目录容量配额。 负整数表示无限制写入。 子节点类型为path usedCapacityQuota Long 数据目录已用容量配额。 子节点类型为path storagePool String 所属存储池。 子节点类型为path healthStatus String 数据目录健康状态: Healthy:数据目录处于健康状态,可正常读写,且数据目录所在磁盘使用率未超过阈值(系统默认值为95%)。 Warning:数据目录处于警告状态,可读,但存在以下情况的任意一种:慢盘;数据目录所在磁盘使用率超过阈值(系统默认值为95%);磁盘剩余空间不足1GiB;HBlock对这个目录停写;数据目录配额使用率超过阈值(系统默认值为95%);数据目录配额为0。 Error:数据目录错误状态,无法访问,原因可能是:所在磁盘出现I/O错误导致无法读写,数据目录未正确挂载等。 子节点类型为path healthDetail Array of string 数据目录健康状态详情: 如果健康状态为Healthy,此字段为空。 如果健康状态为Warning或Error,显示警告或错误的详细信息。
        来自:
        帮助文档
        存储资源盘活系统
        API参考
        集群拓扑(集群版)
        查询拓扑节点
      • 查询整个拓扑
        名称 类型 描述 子节点类型为room name String 子节点名称。 子节点类型为room fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name格式来唯一标识该节点的名称。 子节点类型为room id String 节点ID。 子节点类型为room type String 节点类型。 子节点类型为room description String 节点描述。 子节点类型为rack name String 子节点名称。 子节点类型为rack fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为rack id String 节点ID。 子节点类型为rack type String 节点类型。 子节点类型为rack description String 节点描述。 子节点类型为server name String 子节点名称。 子节点类型为server fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为server id String 节点ID。 子节点类型为server serverId String 服务器ID。 子节点类型为server type String 节点类型。 子节点类型为server description String 节点描述。 子节点类型为server clusterAddress String 拓扑图集群网络IP。 子节点类型为server publicAddress String 拓扑图业务网络IP。 子节点类型为server allDiskPaths.usedCapacity Long 服务器上HBlock数据目录对应分区的已用容量,单位是bytes。 子节点类型为server allDiskPaths.totalCapacity Long 服务器上HBlock数据目录对应分区的总容量,单位是bytes。 子节点类型为server serverStatus String 服务器状态: Connected:已连接。 Disconnected:未连接。 Removing:移除中。 子节点类型为path name String 子节点名称。 子节点类型为path fullname String 节点在集群中的全路径名称,从根节点开始,使用name:name:name格式来唯一标识该节点的名称。 子节点类型为path id String 节点ID。 子节点类型为path serverId String 服务器ID。 子节点类型为path type String 节点类型。 子节点类型为path totalCapacity Long HBlock数据目录对应分区的总容量,单位是bytes。 子节点类型为path usedCapacity Long HBlock数据目录对应分区的已用容量,单位是bytes。 子节点类型为path capacityQuota Long 数据目录容量配额。 负整数表示无限制写入。 子节点类型为path usedCapacityQuota Long 数据目录已用容量配额。 子节点类型为path storagePool String 所属存储池。 子节点类型为path healthStatus String 数据目录健康状态: Healthy:数据目录处于健康状态,可正常读写,且数据目录所在磁盘使用率未超过阈值(系统默认值为95%)。 Warning:数据目录处于警告状态,可读,但存在以下情况的任意一种:慢盘;数据目录所在磁盘使用率超过阈值(系统默认值为95%);磁盘剩余空间不足1GiB;HBlock对这个目录停写;数据目录配额使用率超过阈值(系统默认值为95%);数据目录配额为0。 Error:数据目录错误状态,无法访问,原因可能是:所在磁盘出现I/O错误导致无法读写,数据目录未正确挂载等。 子节点类型为path healthDetail Array of string 数据目录健康状态详情: 如果健康状态为Healthy,此字段为空。 如果健康状态为Warning或Error,显示警告或错误的详细信息。
        来自:
        帮助文档
        存储资源盘活系统
        API参考
        集群拓扑(集群版)
        查询整个拓扑
      • 数据库备份与恢复
        MySQL实例的备份空间如何收费 天翼云关系数据库MySQL版提供两种存储备份数据的方式:云硬盘方式和对象存储服务方式,两种方式计费方法不同。 云硬盘方式 在订购实例时和存储空间一同购买,开通后支持单独扩容,实例到期冻结后备份数据会被删除,云硬盘也不会再计费。具体请参考备份计费规则。 对象存储服务方式 通过对象存储服务存储备份数据实例冻结后备份数据不会被删除,需单独关闭对象存储服务。计费方式请参考按需计费。 如何查看MySQL实例备份空间使用情况 天翼云关系数据库MySQL版提供两种存储备份数据的方式:云硬盘方式和对象存储服务方式,两种方式查看备份空间使用情况方法不同。 云硬盘方式 您可以在实例基本信息页面查看备份空间使用情况,具体操作,请参见如何查看关系数据库MySQL版的存储空间使用情况。 对象存储服务方式 对象存储空间的使用情况也可在实例基本信息页面查看使用量。 如何将数据库备份到弹性云主机上 弹性云主机(ECS)上不限制您存放哪些数据,但数据必须是符合国家法律法规的。您可以通过导出SQL语句或使用第三方软件的方式将数据库备份到ECS上,但是不建议您将ECS作为数据库备份空间使用。强烈建议您使用关系数据库MySQL版自带的备份管理功能将数据备份到云硬盘或对象存储中以保障数据的安全性和获得更加专业的服务。
        来自:
        帮助文档
        关系数据库MySQL版
        常见问题
        操作类
        数据库备份与恢复
      • 基本概念
        角色 DMS支持角色管理,具体包含两类角色:系统角色 和团队角色。 系统角色指用户在组织范围里的角色,包括:超级管理员、管理员(企业版系统角色)和普通用户。超级管理员是创建组织的天翼云主账号,可在DMS上进行任意操作(如录入实例、添加用户等),是DMS计费的主体;管理员由超级管理员添加和指定,具备超级管理员大部分权限,但不能切换组织版本、 编辑组织信息以及操作计费相关的功能。普通用户由超级管理员添加和指定,只能进行有限制操作(如登录实例、查询数据等)。因此,不同的角色可见的DMS菜单功能也是不同的。 团队角色指用户在团队范围里的角色,包括:团队管理员和普通成员。超级管理员可以指定普通用户成为具体团队的管理员;团队管理员可以管理团队成员和团队内实例,并拥有团队内实例的任意权限,履行实例所有者的职责;团队普通成员只能作为普通开发者,登录实例后进行日常的数据操作。 数据库资源 数据库资源指包括实例、库、模式、表、列、视图等所有数据库相关的资源统称。用户可对数据库资源进行操行,比如录入实例、创建数据库、创建视图等等。 实例 即数据库实例,用户可在DMS中录入数据库实例,DMS用户可使用用户名和密码登录实例进行数据管理操作。 数据库 一个实例下有若干个数据库,一般的数据操作均在数据库下进行,如建表、查询等。 模式 对于如PostgreSQL这类数据库,在数据库层级下还有模式(Schema)一层。用户对PostgreSQL类的数据库进行数据操作时,一般需要切换至模式下进行。
        来自:
        帮助文档
        数据管理服务
        产品介绍
        基本概念
      • 日志收集系统Flume接入Kafka
        本文主要介绍日志收集系统Flume接入Kafka。 最佳实践概述 场景描述 使用Flume+Kafka来完成实时流式日志处理,后面再连接上Storm/Spark Streaming等流式实时处理技术,从而完成日志实时解析的目标。如果Flume直接对接实时计算框架,当数据采集速度大于数据处理速度,很容易发生数据堆积或者数据丢失,而kafka可以当做一个消息缓存队列,可以把它理解为一个数据库,可以存放一段时间的数据。 因此数据从数据源( HTTP、Log 文件、JMS、监听端口数据等)到flume再到Kafka进行消息缓存,数据一方面可以同步到HDFS做离线计算,另一方面可以做实时计算,可实现数据多分发。 技术架构图 暂无。 方案优势 把数据存储到 HDFS 或者 HBase 等下游存储模块或者计算模块时需要考虑各种复杂的场景,例如并发写入的量以及系统承载压力、网络延迟等问题。Flume 作为灵活的分布式系统具有多种接口,同时提供可定制化的管道。在生产处理环节中,当生产与处理速度不一致时,Kafka 可以充当缓存角色。Kafka 拥有 partition 结构以及采用 append 追加数据,使 Kafka 具有优秀的吞吐能力;同时其拥有 replication 结构,使 Kafka 具有很高的容错性。所以将 Flume 和 Kafka 结合起来,可以满足生产环境中绝大多数要求。 前提条件 需已购买Kafka实例、创建Topic,并且已成功消费消息。 确认准备 Apache Flume环境(1.6.0以上版本兼容 Kafka)。 确认 Kafka 的 Source、 Sink 组件已经在 Flume 中。 资源规划 本实践方案内容仅涉及Kafka专享版实例。 分布式消息服务 Figure 1 分布式消息服务 资源类型 配置项 配置明细 说明 :::: 企业中间件 DMS Kafka专享实例 需已购买kafka专享实例,创建好Topic,并成功消费消息。 方案正文
        来自:
        帮助文档
        分布式消息服务Kafka
        最佳实践
        日志收集系统Flume接入Kafka
      • 容量
        项目 容量 时间选择 容量查询的时间段,可以选择查看下列时间段的容量: 今日。 昨日。 近7日。 近30日。 根据日历按钮,选择查询任意90天内容量。 时间粒度 容量查询的时间粒度,可以选择: 按五分钟查询:统计信息按每5分钟展示,可以选择查询今日、昨日或按日历选择任意1天的数据。 按小时查询:统计信息按每小时展示,可以查询今日、昨日、近7日或按日历选择任意7天内的数据。 按天查询:统计信息按天展示,可以查询今日、昨日、近7日、近30天或按日历按钮选择任意90天内的数据。 数据位置 容量查询的数据位置,可以选择: 全部数据位置:展示所有数据位置的容量和值。 具体数据位置:根据显示的数据位置进行选择,查看对应数据位置的容量。 存储桶 容量查询的存储桶,可以选择: 全部存储桶:展示所有存储桶的容量之和。 具体存储桶:根据显示的存储桶,选择查看对应存储桶的容量。 取值类型 选择容量查询的数值类型: 平均值:选择时间段的容量平均值,只能按小时查询或按天查询。 实时值:选择时间段的容量实时值,可以选择按五分钟查询、按小时查询或按天查询。 峰值:选择时间段的容量峰值,只能按小时查询或按天查询。 存储类型 选择容量查询的存储类型: 全部存储类型:分别展示标准存储和低频访问存储的容量。 标准类型:标准存储的容量。 低频访问存储:低频访问存储的容量。
        来自:
        帮助文档
        对象存储(经典版)I型
        控制台指南
        统计概览
        统计
        容量
      • 请求次数
        项目 描述 时间选择 请求次数和返回码次数查询的时间段,可以选择查看下列时间段的请求次数和返回码次数: 今日。 昨日。 近7日。 近30日。 根据日历按钮,选择查询任意90天请求次数和返回码次数。 时间粒度 请求次数和返回码次数查询的时间粒度,可以选择: 按五分钟查询:统计信息按每5分钟展示,可以选择查询今日、昨日或按日历选择任意1天的数据。 按小时查询:统计信息按每小时展示,可以查询今日、昨日、近7日或按日历选择任意7天内的数据。 按天查询:统计信息按天展示,可以查询今日、昨日、近7日、近30天或按日历按钮选择任意90天内的数据。 数据位置 请求次数和返回码次数查询数据位置,可以选择: 全部数据位置:展示所有数据位置的请求次数之和、返回码次数之和。 具体数据位置:根据显示的数据位置进行选择,查看对应数据位置的请求次数和返回码次数。 存储桶 请求次数和返回码次数查询的存储桶,可以选择: 全部存储桶:展示所有存储桶的请求次数之和、返回码次数和值。 具体存储桶:根据显示的存储桶,选择查看对应存储桶的请求次数和返回码次数。 请求类型 请求次数和返回码次数的请求类型: 全部请求。 GET。 HEAD。 PUT。 POST。 DELETE。 OTHERS。 存储类型 选择请求次数查询的存储类型: 全部存储类型:分别展示标准存储和低频访问存储的请求次数。 标准类型:标准存储的请求次数。 低频访问存储:低频访问存储的请求次数。
        来自:
        帮助文档
        对象存储(经典版)I型
        控制台指南
        统计概览
        统计
        请求次数
      • 支持云硬盘共享功能
        共享云硬盘的优点 多挂载点:单个共享云硬盘最多可同时挂载给16台云主机,既可以挂载至天翼云云主机,也可以挂载至天翼云物理机,灵活部署不同类型的工作负载。 高性能:高IOPS (Input/Output Operations Per Second),低时延,满足现代应用的需求。 共享云硬盘的规格性能 共享云硬盘的规格性能与普通云硬盘规格性能一致,详情请参见产品规格。 共享云硬盘的数据共享原理 共享云硬盘本质上就是将同一块云硬盘挂载到多台云主机上。由于每一台云主机均可以在任意时刻对该云硬盘任意区域的数据进行读写,如果这些云主机之间没有相互约定读写数据的规则,将会导致这些云主机读写数据时相互干扰,以致出现不可预知的错误。 想要确保云主机在访问过程中不互相干扰,确保读写次序和读写意义,必须通过一个集群来对读写进行集中管理与调度,因此用户在实际使用过程中务必确保自行部署集群系统,如企业应用中常见的Windows MSCS集群、Linux RHCS集群和CFS集群应用等。 如果使用共享云硬盘的过程中并没有通过集群进行管理,有可能导致以下问题: 读写冲突导致数据不一致 当两台弹性云主机同时挂载了同一块共享云硬盘却没有在一个集群系统中进行管理时,这两台云主机无法感知对方的具体存储空间是否已被使用,可能导致存储空间的重复分配,最终导致空间分配冲突使得数据出错的情况。 比如,将一块共享云硬盘格式化为ext3文件系统后挂载给云主机A和云主机B,云主机A在某一时刻向云硬盘上的区域C和区域D写了文件系统的元数据,下一时刻云主机B又向区域E和区域D写了自己的元数据,则云主机A写入的数据将会被替换,随后读取区域D的元数据时即会出现错误。 数据缓存导致数据不一致 当两台弹性云主机同时挂载了同一块共享云硬盘却没有在一个集群系统中进行管理时,其中一台假定为云主机A,另一台为云主机B,云主机A将读取来的数据记录在缓存区域中,云主机A上的其他进程读取数据时,可直接去读缓存区域的数据提高效率,而云主机B若修改了缓存区域的数据,云主机A是无法感知数据变化的,此时若继续读取缓存,则会导致读取的数据不一致情况。比如,将一块共享云硬盘格式化为ext3文件系统后挂载给云主机A和云主机B,两台云主机均将文件系统的元数据进行了缓存,此后用户在云主机A中创建了一个新的文件File,但云主机B并无法感知该修改,依旧从缓存中读取数据,导致用户在云主机B中无法看到文件File。 除此之外,还可能会导致存储性能下降,读写速度变慢,响应时间延长等问题。
        来自:
        帮助文档
        云硬盘 EVS
        产品介绍
        功能特性
        支持云硬盘共享功能
      • 标注总览
        本章节主要介绍标注总览界面。 提供了包含标注任务信息和人员标注活动信息的全视图,清晰展示任务状态,支持用户集中监控和管理标注任务。 支持查看数据总量、人员情况(标注人员、审核人员等)、不同类型的任务数量,使管理者和成员能跟踪团队及个人的表现和进度。 操作步骤 点击进入标注总览页面,总览以卡片形式展示任务的个数以及任务的状态,支持查看任务的总数量及各个数据的状态;以饼图形式展示任务各个类型的统计信息;以柱状图形式展示任务完成进度。支持选择时间段不同标注任务的标注数据的数量统计。支持查看数据完成的信息和各个任务的标注完成情况;
        来自:
        帮助文档
        数据智能中台
        用户指南
        AI中台
        标注中心
        标注总览
      • 操作流程
        本页为本地MySQL迁移到RDS for MySQL的具体操作流程。 1、购买DTS迁移实例 购买实例入口请参考订购数据迁移实例。 本地MySQL迁移到RDS for MySQL的相关配置为: 在订购页面,实例类型选择"数据迁移",网络接入类型选择"公网EIP",数据库类型选择"MySQL",目标库实例请选择需要将数据迁移至该库的RDS for MySQL实例,完成页面信息的选择和设置后,完成迁移实例的购买。 2、配置实例 开通实例后,在【数据迁移】实例列表页面中,实例处于“待配置”状态,先点击“绑定弹性IP”按钮完成公网弹性IP的绑定,然后再点击该实例操作列的“实例配置”按钮。 3、配置源库及目标库信息 进入实例配置页面的第一步,填入源库与目标库的相关配置信息,包括数据库类型、IP地址端口、数据库账号、数据库密码等信息。 还可以选择连接方式为 SSL安全连接 ,此时需要上传正确的证书文件。 完成上述信息的填写后可以进行数据库的连接测试,测试数据库能否正常连接。 4、选择迁移对象 所有信息填写正确后,点击检测连通性并下一步按钮,进入配置迁移对象及高级配置页面,选择要迁移的源库对象。 各配置及说明如下: 配置 说明 任务步骤 如果只需要进行全量迁移,请同时勾选库表结构迁移和全量迁移 。 如果需要进行不停机迁移,请同时勾选库表结构迁移 、全量迁移和增量迁移 。 注意: 如果未选择增量迁移,为保障数据一致性和任务正常运行,数据迁移期间请勿在源实例中执行DML和DDL操作。 迁移对象 当前源库为MySQL的情况下,支持表、视图、函数、存储过程四种类型对象的迁移。 在迁移对象框中单击待迁移的对象,然后单击>将其移动到已选择对象框。已选择对象可以通过单击 <将对象回退。 选择迁移对象时,如不展开库的详细信息,则表示整库迁移,后续在增量任务过程中,可在源库创建新表,其他类型暂不支持。 映射名称更改 支持库表列三级名称映射,如需更改单个迁移对象在目标实例中的库名、表名和列名,选择对象,然后点击编辑按钮。 如需批量更改迁移对象在目标实例中的库名、表名,请单击已选择对象方框右上方的“批量编辑”。 注意: 若迁移任务仅包含结构迁移和全量迁移,支持列映射名称更改,若迁移任务包含增量迁移,不允许列映射名称更改。 库表名仅支持字母、数字和下划线,长度不超过64个字符。 过滤待迁移数据 支持设置where条件过滤数据,过滤条件不允许;和字符,如需使用引号,请使用单引号('),只有满足where条件的数据才会迁移到目标库。 增量同步的DML 选择增量同步DML操作,选中迁移对象,点击“编辑”,在弹跳框中选择所需增量迁移的DML操作。若在数据库级别和表级别都指定了DML操作,则表级别的设置会覆盖库级别的。 增量同步的DDL 增量同步的DDL操作仅支持CREATE INDEX、DROP INDEX、ALTER TABLE和DROP TABLE,如果是整库迁移或同步,支持CREATE TABLE。 是否定时开始任务 同步任务可在指定的时间启动。
        来自:
        帮助文档
        数据传输服务DTS
        最佳实践
        本地MySQL迁移到RDS for MySQL
        操作流程
      • 备份DBService数据
        本章主要介绍翼MapReduce的备份DBService数据功能。 操作场景 为了确保DBService日常数据安全,或者系统管理员需要对DBService进行重大操作(如升级或迁移等)时,需要对DBService数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份DBService任务并备份数据。支持创建任务自动或手动备份数据。 前提条件 如果数据要备份至远端HDFS中,需要准备一个用于备份数据的备集群,认证模式需要与主集群相同。其他备份方式不需要准备备集群。 如果主集群部署为安全模式,且主备集群不是由同一个FusionInsight Manager管理,则必须配置系统互信,请参见配置跨Manager集群互信。如果主集群部署为普通模式,则不需要配置互信。 主备集群必须已配置跨集群拷贝,请参见启用集群间拷贝功能。 主备集群上的时间必须一致,而且主备集群上的NTP服务必须使用同一个时间源。 根据业务需要,规划备份的类型、周期和策略等规格,并检查主备管理节点“ 数据存放路径 /LocalBackup/”是否有充足的空间。 如果数据要备份至NAS中,需要提前部署好NAS服务端。 如果数据要备份至OBS中,需要当前集群已对接OBS,并具有访问OBS的权限。 操作步骤 1.在FusionInsight Manager,选择“运维 > 备份恢复 > 备份管理”。 2.单击“创建”。 3.在“任务名称”填写备份任务的名称。 4.在“备份对象”选择待操作的集群。 5.在“备份类型”选择备份任务的运行类型。 “周期备份”表示按周期自动执行备份,“手动备份”表示由手工执行备份。 周期备份参数 参数名称 描述 开始时间 任务第一次启动的时间。 周期 任务下次启动,与上一次运行的时间间隔,支持按“小时”或按“天”。 备份策略 首次全量备份,后续增量备份 每次都全量备份 每n次进行一次全量备份 说明 备份Manager数据和组件元数据时不支持增量备份,仅支持“每次都全量备份”。 如果“路径类型”要使用NFS或CIFS,不能使用增量备份功能。因为在NFS或CIFS备份时使用增量备份时,每次增量备份都会刷新最近一次全量备份的备份数据,所以不会产生新的恢复点。 6.在“备份配置”,勾选“DBService”。 说明 若安装了多个DBService服务,默认备份所有DBService服务,可单击“指定服务”指定需要备份的DBService服务。 7.在“DBService”的“路径类型”,选择一个备份目录的类型。 备份目录支持以下类型: “LocalDir”:表示将备份文件保存在主管理节点的本地磁盘上,备管理节点将自动同步备份文件。 默认保存目录为“ 数据存放路径 /LocalBackup/”,例如“/srv/BigData/LocalBackup”。 选择此参数值,还需要配置“最大备份数”,表示备份目录中可保留的备份文件集数量。 “LocalHDFS”:表示将备份文件保存在当前集群的HDFS目录。 选择此参数值,还需要配置以下参数: “目的端路径”:填写备份文件在HDFS中保存的目录。不支持填写HDFS中的隐藏目录,例如快照或回收站目录;也不支持默认的系统目录,例如“/hbase”或“/user/hbase/backup”。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 “目标NameService名称”:选择备份目录对应的NameService名称。默认值为“hacluster”。 “RemoteHDFS”:表示将备份文件保存在备集群的HDFS目录。 选择此参数值,还需要配置以下参数: “目的端NameService名称”:填写备集群的NameService名称。可以输入集群内置的远端集群的NameService名称(haclusterX,haclusterX1,haclusterX2,haclusterX3,haclusterX4),也可输入其他已配置的远端集群NameService名称。 “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。 “目的端NameNode IP地址”:填写备集群NameNode业务平面IP地址,支持主节点或备节点。 “目的端路径”:填写备集群保存备份数据的HDFS目录。不支持填写HDFS中的隐藏目录,例如快照或回收站目录;也不支持默认的系统目录,例如“/hbase”或“/user/hbase/backup”。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 “队列名称”:填写备份任务执行时使用的Yarn队列的名称。需和源集群中已存在且状态正常的队列名称相同。 “NFS”:表示将备份文件通过NFS协议保存在NAS中。 选择此参数值,还需要配置以下参数: “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。 “服务器IP地址”:填写NAS服务器IP地址。 “服务器共享路径”:填写用户配置的NAS服务器共享目录。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 “CIFS”:表示将备份文件通过CIFS协议保存在NAS中。 选择此参数值,还需要配置以下参数: “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。 “服务器IP地址”:填写NAS服务器IP地址。 “端口号”:填写CIFS协议连接NAS服务器使用的端口号,默认值为“445”。 “用户名”:填写配置CIFS协议时设置的用户名。 “密码”:填写配置CIFS协议时设置的密码。 “服务器共享路径”:填写用户配置的NAS服务器共享目录。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 “SFTP”:表示将备份文件通过SFTP协议保存到服务器中。 选择此参数值,还需要配置以下参数: “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。 “服务器IP地址”:填写备份数据的服务器IP地址。 “端口号”:填写SFTP协议连接备份服务器使用的端口号,默认值为“22”。 “用户名”:填写使用SFTP协议连接服务器时的用户名。 “密码”:填写使用SFTP协议连接服务器时的密码。 “服务器共享路径”:SFTP服务器上的备份路径。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 “OBS”:表示将备份文件保存在OBS中。 选择此参数值,还需要配置以下参数: “目的端路径”:填写保存备份数据的OBS目录。 “最大备份数”:填写备份目录中可保留的备份文件集数量。 说明 MRS 3.1.0及之后版本才支持备份数据到OBS。 8.单击“确定”保存。 9.在备份任务列表中已创建任务的“操作”列,选择“更多 > 即时备份”,开始执行备份任务。 备份任务执行完成后,系统自动在备份目录中为每个备份任务创建子目录,目录名为 “备份任务名任务创建时间” ,用于保存数据源的备份文件。 备份文件的名称为 版本号数据源任务执行时间.tar.gz 。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        FusionInsight Manager操作指导(适用于3.x)
        备份恢复管理
        备份数据
        备份DBService数据
      • 科研文件专属空间
        本文介绍在科研文件中如何使用、管理专属空间。配套空间权限精细化管控,可自定义配置支持 “仅创建者可见” 或 “项目组内可见”、并开启只读权限,实现团队内部数据权限隔离、敏感科研资料私有化管控。 操作步骤 前提:在创建科研文件时,打开专属空间功能。 1. 登录科研助手++管理控制台++。 2. 在控制台左侧导航栏中,选择【数据存储】。 3. 在【数据存储】弹出的选项中,选择【科研文件管理】,进入科研文件详情页。如开启专属空间,将默认创建一个【默认空间】。点击【新建专属空间】,弹出右侧配置弹窗。 参数 描述 说明 专属空间名称 自定义名称 输入自定义名称,长度限制 4~32 字符内。 可见范围 设置专属空间可见范围 仅创建者可见:个人私有数据,仅自己及主账号可读写。 项目组内可见:共享数据,同项目成员可访问。 只读模式 确认是否开启只读模式 默认关闭,开启后,除所有者、主账号外的其他用户仅能以只读方式挂载,防止数据误删。 企业项目 默认展示 与科研文件的企业项目保持一致 确认创建:点击确认创建,等待状态变为 “操作成功”。 4. 创建完成后,可以看见左侧新增了我的空间。可以在该空间内上传所需文件。 接下来讲解如何在开发机中使用科研文件专属空间。 1. 在开发机创建页中,在存储配置区域,找到科研文件模块,点击 【+ 添加 】,配置映射关系: 科研文件:下拉选择刚才创建的空间(如 researchstoragetest) 专属空间:选择对应的目录(如1234) 容器挂载路径:填写开发机内部的访问路径。截图示例:/home/datasetassist0(这是系统推荐的标准挂载点,也可以自定义如 /tmp/username) 对于您创建的“仅自己可见”专属空间,企业项目内其他用户在挂载时,这部分专属空间将对其不可见,实现团队内部数据隔离。 2. 完成配置:点击确认创建开发机。
        来自:
        帮助文档
        科研助手
        用户指南
        数据存储
        科研文件管理
        科研文件专属空间
      • 创建自定义拓扑集群
        节点部署原则 适用场景 组网规则 管理节点、控制节点和数据节点分开部署 (此方案至少需要8个节点) MN × 2 + CN × 9 + DN × n (推荐)数据节点数5002000时采用此方案 l 集群节点数超过200时,各节点划分到不同子网,各子网通过核心交换机三层互联,每个子网的节点数控制在200个以内,不同子网中节点数量请保持均衡。 l 集群节点数低于200时,各节点部署在同一子网,集群内通过汇聚交换机二层互联。 管理节点、控制节点和数据节点分开部署 (此方案至少需要8个节点) MN × 2 + CN × 5 + DN × n (推荐)数据节点数100500时采用此方案 l 集群节点数超过200时,各节点划分到不同子网,各子网通过核心交换机三层互联,每个子网的节点数控制在200个以内,不同子网中节点数量请保持均衡。 l 集群节点数低于200时,各节点部署在同一子网,集群内通过汇聚交换机二层互联。 管理节点、控制节点和数据节点分开部署 (此方案至少需要8个节点) MN × 2 + CN × 3 + DN × n (推荐)数据节点数30100时采用此方案 l 集群节点数超过200时,各节点划分到不同子网,各子网通过核心交换机三层互联,每个子网的节点数控制在200个以内,不同子网中节点数量请保持均衡。 l 集群节点数低于200时,各节点部署在同一子网,集群内通过汇聚交换机二层互联。 管理节点和控制节点合并部署,数据节点单独部署 (MN+CN) × 3 + DN × n (推荐)数据节点数330时采用此方案 集群内节点部署在同一子网,集群内通过汇聚交换机二层互联。 管理节点、控制节点和数据节点合并部署 l 节点数小于6的集群使用此方案 l 此方案至少需要3个节点 说明 生产环境或商用环境不推荐使用此场景: l 管理节点、控制节点和数据节点合并部署时,集群性能和可靠性都会产生较大影响。 l 如节点数量满足需求,建议将数据节点单独部署。 l 如节点数量不满足将数据节点单独部署的要求,必须使用此场景时,需要使用双平面组网方式。将管理网络与业务网络流量隔离,防止业务平面的数据量过大,导致管理操作不能正常下发。 集群内节点部署在同一子网,集群内通过汇聚交换机二层互联。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        配置集群
        创建自定义拓扑集群
      • 删除拓扑节点
        参数 类型 描述 是否必须 nodeName String 要删除的拓扑节点。 是 force Boolean 是否强制删除拓扑节点。仅删除server类型的节点时支持此参数。 注意 强制删除拓扑节点,可能造成数据丢失。 取值: true:是。 false:否。 默认值为false。 否 deleteLocalData Boolean 删除server类型的拓扑节点时,是否删除拓扑节点上HBlock数据目录中的数据。仅删除server类型的节点时支持此参数。 取值: true:删除拓扑节点上HBlock数据。 false:不删除拓扑节点上HBlock数据。 默认值为false。 否
        来自:
        帮助文档
        存储资源盘活系统
        API参考
        集群拓扑(集群版)
        删除拓扑节点
      • 视图管理
        名称 功能说明 Where条件 您可通过where查询,快速获取查询信息。 复制行 双击选择行,单击“复制行”,即可复制所选行数据信息。 复制列 在列下拉框中选择所需复制的列,即可复制列信息。 列设置 您可通过“列设置”筛选出需显示的列信息。 刷新 支持对表数据进行手动更新。 单行详情 显示指定数据行详细信息。
        来自:
        帮助文档
        数据管理服务
        用户指南
        PostgreSQL数据库管理(开发工具)
        库管理
        视图管理
      • HBlock服务
        服务 服务名称 作用 stor:mdm 元数据管理服务(仅集群版支持) 管理整个系统的元数据。 stor:fc 故障转移控制服务(仅集群版支持) 进行系统健康检测,实现故障转移控制。 stor:ls 日志服务(仅集群版支持) 提供基于日志的数据同步功能。 stor:ds x 数据服务(仅集群版支持) 管理用户的文件数据块。 stor:cs 协调服务(仅集群版支持) 监视各服务器的状态,触发通知事件,确保集群服务高可用。 stor:ms 管理服务 处理请求信息,维护集群运行状态。 stor:ws 监控服务 监控各个服务的状态,并负责服务的启动。 stor:ps 协议解析服务 负责iSCSI协议解析与数据存储。 stor:ag 数据采集服务 负责采集性能数据。 stor:ua 升级监听服务 负责接收升级请求,执行升级相关操作。
        来自:
        帮助文档
        存储资源盘活系统
        用户指南
        附录
        HBlock服务
      • 数据库迁移模块
        本节为您介绍数据库迁移的使用限制。 项目 约束和限制 多版本数据库数据传输 建议源库和目标库版本保持一致,或者从低版本传输至 高版本以保证兼容性,不支持高版本传输至低版本。 任务限制 请根据您的操作类型查阅对应章节下各类任务配置中描述的前提和要求。例如:您需要从自建MySQL迁移至自建MySQL,请查阅“ 用户指南 > 数据库迁移模块 > 数据传输 > 数据迁移 > 任务创建 >自建MySQL为源的迁移任务配置 > 自建MySQL迁移至自建MySQL ”目录下的相关约束条件。 迁移速度 迁移速度受源端表数量、大小,带宽、数据库磁盘IO以及公网传输距离等因素影响。 复杂业务拉起、支撑限制 传输复杂业务时,需要记录业务关联信息,并根据需求按业务系统进行迁移、切换、测试; 应用切换时,需要停止相关业务进程,以保持一致性。切换完成后,也需相关熟悉业务人员进行测试验证,以此减少业务停机时间。 特定需求限制 如果存在涉密文件、需要保持IP不变等特定需求,需要通过工单进行技术咨询,以满足相应需求。 单任务和迁移任务数量限制 每个任务单次可处理的表上限为500张;每个用户可并发执行的任务数量为50个。每个任务只能迁移一个数据库,如需迁移/同步/订阅多个数据库,您需要为每个数据库配置任务。 迁移节点配置限制 迁移节点所在主机最低配置为4核CPU,8GB内存,Linux内核大于3.1.0。请根据实际数据库体量和迁移需求提升主机配置。为避免迁移执行影响业务系统性能,请勿将迁移节点安装在业务系统或数据库主机。 迁移网络限制 仅支持独享IP。为避免迁移执行影响业务系统性能,请勿将业务系统的访问带宽、业务系统与数据库的传输带宽用于数据迁移。建议数据迁移使用独享带宽。 源库限制 暂不支持库、模式名、表、列名、结构名中带短划线“”,例如“testdb”; 请确保源库和目标库的字符集兼容或一致,否则可能会导致数据不一致或失败; 暂不支持无主键、多主键表进行增量迁移、同步、订阅和稽核修复。 迁移/同步/订阅任务限制 同步/订阅仅适用于数据变更小于1000record/s场景,请勿应用于中大型密集业务间同步、灾备等场景; 迁移/同步/订阅暂只支持任务启动之后传输数据的UPDATE、INSERT、DELETE变化,不支持任务过程结构变化传输; 任务运行过程中,请勿变更库、表或列结构变更的DDL操作,否则任务会失败; 不支持迁移系统库、系统模式、系统表、临时表; 迁移过程中请保证数据库不发生主备切换,否则会导致迁移失败; 迁移过程请保证数据库的信息(IP、端口、用户名和密码)不发生变化,否则会导致迁移失败; 如仅执行全量数据迁移,请勿向源端数据库写入新的数据,否则会导致源和目标数据不一致; 数据一致性的保持需要用户业务配合,请勿两个业务节点上对同一个主键数据进行更新,避免主键冲突或相互覆盖。 迁移源端和目标端配置限制 由于数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此目标数据库磁盘空间应为源数据库1.2倍以上; 由于传输过程中会对源库和目标库产生一定资源占用,因此源库和目标库所在服务器的CPU和磁盘使用率应小于90%; 源库和目标库需保持时区一致。 详情查阅帮助中心 > 云迁移服务> CMS 用户指南 > 数据库迁移模块 >数据传输 > 数据迁移 > 任务创建 章节下各类任务配置中描述的前提和要求 详情查阅帮助中心 > 云迁移服务> CMS 用户指南 > 数据库迁移模块 >数据传输 > 数据迁移 > 任务创建 章节下各类任务配置中描述的前提和要求
        来自:
        帮助文档
        云迁移服务CMS
        产品简介
        使用须知
        约束与限制
        数据库迁移模块
      • 步骤二:创建Kafka实例
        本文主要介绍 步骤二:创建Kafka实例。 前提条件 在创建Kafka实例前,需要保证存在可使用的虚拟私有云。创建方法,请参考《虚拟私有云 用户指南》的“创建虚拟私有云和子网”。 如果您已有虚拟私有云,可重复使用,不需要多次创建。 操作步骤 步骤 1 登录分布式消息服务Kafka控制台,单击页面右上方的“购买Kafka实例”。 步骤 2 选择计费模式。 步骤 3 在“区域”下拉列表中,选择靠近您应用程序的区域,可降低网络延时、提高访问速度。 步骤 4 在“项目”下拉列表中,选择项目。 步骤 5 在“可用区”区域,根据实际情况选择1个或者3个及以上可用区。 步骤 6 设置“实例名称”和“企业项目”。 步骤 7 设置实例信息。 1. 版本:Kafka的版本号,支持1.1.0、2.7和3.x,根据实际情况选择,推荐使用3.x。 Kafka实例创建后,版本号不支持修改 。 2. 鲲鹏实例,“创建鲲鹏架构实例”选框,默认不勾选是X86架构的实例,勾选之后是ARM架构的鲲鹏实例。 3. 在“代理规格”中,请根据业务需求选择相应的代理规格。在“代理数量”中,选择代理个数。 单个代理最大分区数代理个数实例分区数上限。当所有Topic的总分区数大于实例分区数上限时,创建Topic失败。 4. 在“存储空间”区域,您根据实际需要选择存储Kafka数据的磁盘类型和总磁盘大小。 Kafka实例创建后,磁盘类型不支持修改 。 存储空间包含所有副本存储空间总和,建议根据业务消息体积以及副本数量选择存储空间大小。假设业务存储数据保留天数内磁盘大小为100GB,则磁盘容量最少为100GB副本数 + 预留磁盘大小100GB。 创建实例时会进行磁盘格式化,磁盘格式化会导致实际可用磁盘为总磁盘的93%~95%。 5. 在“容量阈值策略”区域,设置磁盘使用达到容量阈值后的消息处理策略,容量阈值为95%。 自动删除:可以正常生产和消费消息,但是会删除最早的10%的消息,以保证磁盘容量充足。该场景优先保障业务不中断,数据存在丢失的风险。 生产受限:无法继续生产消息,但可以继续消费消息。该场景适用于对数据不能丢的业务场景,但是会导致生产业务失败。 图 创建Kafka实例 步骤 8 设置实例网络环境信息。 1. 在“虚拟私有云”下拉列表,选择已经创建好的虚拟私有云和子网。 说明 虚拟私有云和子网在Kafka实例创建完成后,不支持修改。 子网开启IPv6后,Kafka实例支持IPv6功能。Kafka实例开启IPv6后,客户端可以使用IPv6地址连接实例。 子网开启IPv6后,页面才展示此参数。开启IPv6后,客户端可以使用IPv6地址连接实例。 开启IPv6的实例不支持动态开启和关闭SASLSSL功能。 实例创建成功后,不支持修改IPv6开关。 3. 在“安全组”下拉列表,可以选择已经创建好的安全组。 安全组是一组对Kafka实例的访问规则的集合。您可以单击右侧的“管理安全组”,跳转到网络控制台的“安全组”页面,查看或创建安全组。 步骤 9 设置登录Kafka Manager的用户名和密码。创建实例后,Kafka Manager用户名无法修改。 Kafka Manager是开源的Kafka集群管理工具,实例创建成功后,实例详情页面会展示Kafka Manager登录地址,您可登录Kafka Manager页面,查看Kafka集群的监控、代理等信息。 步骤 10 设置实例购买时长。 当选择了“包年/包月”付费模式时,页面才显示“购买时长”参数,您需要根据业务需要选择。 步骤 11 单击“更多配置”,设置更多相关信息。 1. 设置“公网访问”。 “公网访问”默认为关闭状态,根据业务需求选择是否开启。开启公网访问后,还需要为每个代理设置对应的IPv4弹性IP地址。 图 设置公网访问开关 2. 设置“Kafka SASLSSL”。 客户端连接Kafka实例时,是否开启SSL认证。开启Kafka SASLSSL,则数据加密传输,安全性更高。 “Kafka SASLSSL”默认为关闭状态,您可以选择是否开启。 Kafka实例创建后,Kafka SASLSSL开关不支持修改 ,请慎重选择。如果创建后需要修改,需要重新创建实例。 开启Kafka SASLSSL后,您可以选择是否开启“SASL PLAIN 机制”。未开启“SASL PLAIN 机制”时,使用SCRAMSHA512机制传输数据,开启“SASL PLAIN 机制”后,同时支持SCRAMSHA512机制和PLAIN机制,根据实际情况选择其中任意一种配置连接。Kafka实例创建后,SASL PLAIN机制开关不支持修改。 什么是SCRAMSHA512机制和PLAIN机制? SCRAMSHA512机制:采用哈希算法对用户名与密码生成凭证,进行身份校验的安全认证机制,比PLAIN机制安全性更高。 PLAIN机制:一种简单的用户名密码校验机制。 开启Kafka SASLSSL后,您需要设置连接Kafka实例的用户名和密码。 3. 设置“Kafka自动创建Topic”。 “Kafka自动创建Topic”默认为关闭状态,您可以选择是否开启。 开启“Kafka自动创建Topic”表示生产或消费一个未创建的Topic时,系统会自动创建此Topic,此Topic的默认参数值如下:分区数为3,副本数为3,老化时间为72小时,不开启同步复制和同步落盘。 如果在“配置参数”中修改“log.retention.hours”、“default.replication.factor”或“num.partitions”的参数值,此后自动创建的Topic参数值为修改后的参数值。例如:“num.partitions”修改为“5”,自动创建的Topic参数值如下:分区数为5,副本数为3,老化时间为72小时,不开启同步复制和同步落盘。 4. 设置“标签”。 标签用于标识云资源,当您拥有相同类型的许多云资源时,可以使用标签按各种维度(例如用途、所有者或环境)对云资源进行分类。 如果您已经预定义了标签,在“标签键”和“标签值”中选择已经定义的标签键值对。另外,您可以单击“查看预定义标签”,跳转到标签管理服务页面,查看已经预定义的标签,或者创建新的标签。 您也可以直接在“标签键”和“标签值”中设置标签。 当前每个Kafka实例最多支持设置20个不同标签,标签的命名规格,请参考管理实例标签。 5. 设置实例的描述信息。 步骤 12 填写完上述信息后,单击“立即购买”,进入规格确认页面。 步骤 13 确认实例信息无误后,提交请求。 步骤 14 单击“返回Kafka专享版”,查看Kafka实例是否创建成功。 创建实例大约需要3到15分钟,此时实例的“状态”为“创建中”。 当实例的“状态”变为“运行中”时,说明实例创建成功。 如果创建实例失败,在信息栏的“创建失败任务”中查看创建失败的实例。请删除创建失败的实例,然后重新创建。如果重新创建仍然失败,请联系客服。 说明 创建失败的实例,不会占用其他资源。
        来自:
        帮助文档
        分布式消息服务Kafka
        快速入门
        步骤二:创建Kafka实例
      • 全量数据恢复:按备份文件恢复
        类别 说明 恢复范围 恢复整个实例。 恢复后实例数据 恢复后实例数据与用于恢复的全备文件中的数据一致。 恢复到新实例会为用户重新创建一个和该备份数据相同的实例。 恢复到已有实例会导致实例数据被覆盖。 恢复类型 恢复到新实例 恢复到已有实例(非原实例) 恢复到新实例各配置项 新实例的数据库引擎和数据库版本,自动与原实例相同。 存储空间大小默认和原实例相同,且必须大于或等于原实例存储空间大小。 其他参数需要重新配置。 恢复时长 恢复时长和实例的数据量有关,平均恢复速率为40MB/s。
        来自:
        帮助文档
        关系数据库PostgreSQL版
        用户指南
        数据恢复
        恢复到云上PostgreSQL数据库
        全量数据恢复:按备份文件恢复
      • 应用场景
        本文介绍云备份产品应用场景。 云备份主要适用于数据备份保护和恢复的场景。云备份在以下场景中,均可快速恢复数据,保障业务安全可靠。 业务场景 云内备份 适用于将业务部署在天翼云内的用户,尤其是政务、金融、能源、通信、医疗等对数据安全和可靠性要求较高的关键行业。 本地备份上云 适用于关键数据存储在本地数据中心的用户,缺少备份上云的数据保护机制,需要将关键数据备份至天翼云上。 恢复场景 受黑客攻击或病毒入侵 通过云备份,可立即恢复到最近一次没有受黑客攻击或病毒入侵的备份时间点。 数据被误删 通过云备份,可立即恢复到删除前的备份时间点,找回被删除的数据。 应用程序更新出错 通过云备份,可立即恢复到应用程序更新前的备份时间点,使系统正常运行。 场景架构 云备份服务备份与恢复架构如图所示: 场景优势 简单 基于策略的自动备份,备份/恢复任务统一管理。您可通过云备份控制台集中配置多台主机的备份计划,系统将根据备份计划自动执行备份任务。 经济 支持备份数据重删,经济高效。备份数据写入对象存储后,进行重复数据删除后保存,备份存储空间节约可达95%。
        来自:
        帮助文档
        云备份 CBR
        产品介绍
        应用场景
      • 删除Topic
        场景描述 在RocketMQ中,删除Topic是一个比较重要且敏感的操作,需要谨慎处理。一般来说,删除Topic的场景有以下几种情况: 业务不再需要该Topic:当某个Topic对应的业务已经结束或不再需要时,可以考虑删除该Topic,以释放资源和减少管理工作。 Topic配置错误或不合适:如果创建Topic时配置错误或者配置不合适,可以考虑删除该Topic,并重新创建一个正确的Topic。 数据归档或清理:在某些情况下,可能需要对Topic中的数据进行归档或清理,以释放存储空间。在归档或清理之前,需要先将Topic中的消息备份或迁移到其他地方,确保数据的完整性和可恢复性。 无论是哪种场景,删除Topic都需要注意以下几点: 确保Topic中的消息已经被正确处理和消费:在删除Topic之前,需要确保Topic中的消息已经被正确地处理和消费,以避免数据丢失或处理中断。 停止生产者和消费者对该Topic的操作:在删除Topic之前,需要停止生产者和消费者对该Topic的操作,以避免数据冲突或丢失。 确保删除操作的权限和安全性:删除Topic通常需要管理员或具有相应权限的用户来执行,确保只有授权人员可以进行删除操作。 慎重操作,备份重要数据:在删除Topic之前,建议备份Topic中的重要数据,以防止误操作或数据丢失。 总之,删除Topic是一个敏感操作,需要在慎重考虑和评估后进行,以确保不会对业务和数据产生不可逆的影响。 操作步骤 1、进入Topic管理菜单。 2、在Topic管理菜单选择将要删除的主题,在更多下拉框选择删除,即可完成删除 注意事项: ● 删除主题前必须确保该主题对应的生产消费实例已经全部停止。 ● 删除主题后消息数据会发生丢失。
        来自:
        帮助文档
        分布式消息服务RocketMQ
        用户指南
        Topic管理
        删除Topic
      • 视频直播支持哪些维度的数据统计
        本文介绍视频直播支持统计的维度。 视频直播支持以下维度的数据统计: 用量查询:您可以在直播控制台查看流量、带宽、回源统计、请求数、状态码、在线人数等。 增值服务:您可以在直播控制台查看直播转码、直播录制和直播截图的使用量。 流数据:您可以在直播控制台【流数据】中查看推流的平均码率和帧率。 更多统计信息请参见API文档中的【统计分析】模块。
        来自:
        帮助文档
        视频直播
        常见问题
        统计分析类
        视频直播支持哪些维度的数据统计
      • 恢复方案
        本页介绍了文档型数据库服务的恢复方案。 目前文档型数据库服务的3种规格都支持备份数据的恢复,您可以根据实际需求进行备份数据的恢复。 实例类型 恢复类型 使用场景 单机版(单节点) 按备份点恢复到本实例 将已有的单机版(单节点)备份数据恢复到本实例 单机版(单节点) 按备份点恢复到其他单机版(单节点)实例 将已有的单机版(单节点)备份数据恢复到其他单机版实例或副本集实例 单机版(单节点) 按备份点跨区域恢复到单机版新实例 将已有的单机版(单节点)备份数据跨区域恢复到单机版新实例 副本集 按备份点恢复到本实例 将已有的副本集备份数据恢复到本实例 副本集 按时间点恢复到本实例 将已有的副本集备份数据按某个指定的时间点还原到本实例 副本集 按备份点恢复到新实例 将已有的副本集备份数据恢复到新实例 副本集 按时间点恢复到新实例 将已有的副本集备份数据按某个指定的时间点还原到新实例 副本集 按备份点恢复到其他副本集实例 将已有的副本集备份数据恢复到其他单机版实例或副本集实例 副本集 按时间点恢复到其他副本集实例 将已有的副本集备份数据按某个指定的时间点还原到其他单机版实例或副本集实例 副本集 按备份点跨区域恢复到副本集新实例 将已有的副本集备份数据跨区域恢复到节点数相同的副本集新实例 集群版 按备份点恢复到本实例 将已有的集群版备份数据恢复到本实例 集群版 按时间点恢复到本实例 将已有的集群版备份数据按某个指定的时间点恢复到本实例 集群版 按备份点恢复到新实例 将已有的集群版备份数据恢复到新实例 集群版 按时间点恢复到新实例 将已有的集群版备份数据按某个指定的时间点恢复到新实例 集群版 按备份点恢复到其他集群版实例 将已有的集群版备份数据恢复到其他相同shard数量的集群版实例 集群版 按时间点恢复到其他集群版实例 将已有的集群版备份数据按某个指定的时间点恢复到其他相同shard数量的集群版实例 集群版 按备份点跨区域恢复到集群版新实例 将已有的集群版备份数据跨区域恢复到shard 数量相同的集群版新实例
        来自:
        帮助文档
        文档数据库服务
        用户指南
        恢复管理
        恢复方案
      • 多租户
        本章节主要介绍翼MapReduce服务的多租户功能。 简介 现代企业的数据集群化正在逐步向中心化、云计算方向发展,多用户在多个集群上执行不同的应用(分析、查询、流式处理等),且存储的数据类型、格式各不相同。部分用户(如银行、政府机构等)对数据安全问题非常重视,无法容忍自己的数据和他人数据放在一起。 翼MapReduce提供多租户功能,将大数据集群资源分割为相互独立的资源集合,用户可“租用”所需的资源集合,用于执行应用、工作、存储数据。在大数据集群中,提供多个资源集合满足多个用户的不同需求。 优势 合理配置和隔离资源: 租户之间的资源是隔离的,一个租户对资源的使用不影响其他租户,保证了每个租户根据业务需求去配置相关的资源,可提高资源利用效率。 测量和统计资源消费: 系统资源以租户为单位进行计划和分配,租户是系统资源的申请者和消费者,对用户资源消费进行测量和统计。 保证数据安全和访问安全: 多租户场景下,分开存放不同租户的数据、控制用户对租户资源的访问权限,以保证数据安全和访问安全。
        来自:
        帮助文档
        翼MapReduce
        产品介绍
        功能特性
        多租户
      • 1
      • ...
      • 105
      • 106
      • 107
      • 108
      • 109
      • ...
      • 438
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      聚力AI赋能 天翼云大模型专项

      大模型特惠专区·Token Plan 轻享包低至9.9元起

      青云志云端助力计划

      一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云

      企业出海解决方案

      助力您的业务扬帆出海,通达全球!

      天翼云信创专区

      “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富

      中小企业服务商合作专区

      国家云助力中小企业腾飞,高额上云补贴重磅上线

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      天翼云奖励推广计划

      加入成为云推官,推荐新用户注册下单得现金奖励

      产品推荐

      物理机 DPS

      应用云主机 ACS

      弹性伸缩服务 AS

      弹性高性能计算 E-HPC

      天翼云CTyunOS系统

      AI Store

      星辰TokenHub运营服务平台

      科研助手

      星辰MaaS模型服务平台

      推荐文档

      邀请参会方

      导入数据

      启动会议

      术语解释

      云课堂 第五课:CC攻击介绍及如何防御

      VPN删除

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 息壤智算平台
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号