爆款云主机低至1.5折起,Token套餐低至9.9元/月起!
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 818 天翼云云智盛典 NEW 爆款云主机低至1.5折起,Token套餐低至9.9元/月起
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
星辰MaaS平台
  • 星辰MaaS智能体平台
  • 星辰大模型
大模型
  • glm-5.3-flash
  • GLM-5.2
  • deepseek-v4-pro-0813
  • deepseek-v4-flash-0713-new
  • qwen3.8-flash
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
应用托管
  • 天翼云DramaFlow2.0
  • 应用实例
科研助手
  • 开发机
  • 并行计算
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
公共算力服务
  • 裸金属
  • 定制裸金属
智算一体机
  • 智算一体机
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入AI Store公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 智教云电脑
  • WPS 365 天翼云版
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)
  • 琥珀数据压缩归档服务
智慧教育
  • 智擎思政平台(个人版)
  • 智擎研学平台(个人基础版)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      轻量型云主机_相关内容
      • 在科研助手使用LLaMA Factory进行模型LLMs微调
        本文介绍了如何在科研助手上使用LLaMA Factory进行模型LLMs微调。 概述: LLAMA FACTORY是一个旨在普及LLMs微调的框架。它通过可扩展的模块统一了多种高效微调方法,使得数百种语言模型能够在资源有限的情况下进行高吞吐量的微调。该框架简化了常用的训练方法,如生成式预训练、监督式微调、基于人类反馈的强化学习以及直接偏好优化等。用户可以通过命令行或Web界面,以最小或无需编码的方式自定义和微调他们的语言模型。该演示文档就是基于Web界面进行微调和对话。 准备环境及模型微调: 1.【开发机】创建开发机 1. 填入【名称】“llamafactory”选择【队列】及【可用区】。 2. 【资源配置】 【GPU加速型】下拉选择规格“CPU:20核内存:108GBGPU:NVIDIAH80080G1” (规格根据实际情况修改 GPU类型可选择A100 H800) 3. 【选择框架版本】中点击【社区镜像】,选择LLaMa Factory框架。 2.点击【确认】按钮创建开发机。 3.进入开发机: 1. 【开发机】刷新状态,等“llamafactory”状态进入运行中后点击右侧操作栏【打开】。 2. 点击【打开】跳转到Jupyte开发机 3. 在Jupyter启动页【AI Community】下点击"AI Task:LLaMA"跳转到LLaMA Factory页面 3.设置微调参数: 1. 进入WebUI后,切换到中文(zh)。首先配置模型,选择“LLaMA38BChat”模型,微调方法则保持默认值lora 2. 数据集使用预置演示的Train,用户可以根据自己的需要修改。 3. 设置学习率为1e4,梯度累积为2,有利于模型拟合。可以更改计算类型为bf16 4. 点击LoRA参数设置展开参数列表,设置LoRA+学习率比例为16。在LoRA作用模块中填写all,即将LoRA层挂载到模型的所有线性层上,提高拟合效果 4.启动微调: 1. 将输出目录修改为trainllama38b,训练后的LoRA权重将会保存在此目录中。点击「预览命令」可展示所有已配置的参数,您如果想通过代码运行微调,可以复制这段命令,在终端命令行运行。 点击「开始」启动模型微调。 2. 在Jupyter启动页【其他】下点击"终端"跳转到终端页面 3. 终端输入命令 tail f /var/log/llamafactroy.log 查看微调进度 4. 可以看到下载LLaMA38BChat大约需要20分钟;完成微调大约需要20分钟;显示“训练完毕”代表微调成功,可以在界面观察损失曲线。 5.模型评估: 1. 微调完成后,点击【刷新适配器】,然后点击【适配器路径】,点击选择下拉列表中的"trainllama38b"选项。 2. 选择【Evaluate&Predict】,在数据集下拉列表中选择"eval"评估模型。点击【开始】启动模型评估。 3. 大约5分钟后,评估完成后会在界面上显示分数。ROUGE分数越高代表模型学习越好。 6.模型对话: 1. 点击【chat】栏,确保适配器路径是trainllama38b,点击【加载模型】。 2. 在话框输入对话内容,点击【提交】发送消息。大模型会生成相应人物的回答。
        来自:
        帮助文档
        科研助手
        最佳实践
        在科研助手使用LLaMA Factory进行模型LLMs微调
      • 如何查看主机和组件日志?
        本章节主要介绍如何查看主机和组件日志。 操作步骤 1. 登录翼MR管理控制台。 2. 选择“我的集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。 3. 在“节点管理”页签中单击Master节点,选择要进入的Master节点。 4. 单击该节点右侧的“远程连接”。 5. 根据界面提示,输入Master节点的用户名和密码,用户名、密码分别为root和创建集群时设置的密码。 6. 进入对应组件的日志目录,查看相关日志。
        来自:
        帮助文档
        翼MapReduce
        常见问题
        集群管理类
        如何查看主机和组件日志?
      • 搭建Spark应用
        替换成您自己的spark镜像 imagePullPolicy: Always command: ["/startmaster"] ports: containerPort: 7077 containerPort: 8080 resources: requests: cpu: 100m $ kubectl create f sparkmasterdeployment.yaml 2. 创建MasterService,sparkmasterservice.yaml可参考如下: sparkmasterservice.yaml kind: Service apiVersion: v1 metadata: name: sparkmaster namespace: sparkcluster spec: ports: port: 7077 targetPort: 7077 selector: component: sparkmaster $ kubectl create f sparkmasterservice.yaml service "sparkmaster"created 3. 创建WebUIService,sparkwebui.yaml可参考如下: sparkwebui.yaml kind: Service apiVersion: v1 metadata: name: sparkwebui namespace: sparkcluster spec: ports: port: 8080 targetPort: 8080 selector: component: sparkmaster $ kubectl create f service/sparkwebui.yaml service "sparkwebui" created 4. 检查Master是否能运行和访问: $ kubectl get deploy nsparkcluster NAME DESIRED CURRENT AGE sparkmastercontroller 1 1 23h $ kubectl get svc NAME CLUSTERIP EXTERNALIP PORT(S) AGE sparkmaster 10.254.106.29 7077/TCP 1d sparkwebui 10.254.66.138 8080/TCP 18h $ kubectl get pod nsparkcluster NAME READY STATUS RESTARTS AGE sparkmastercontrollerb3gbf 1/1 Running 0 23h 5. 确认master正常运行后,再使用Kubernetes proxy连接Spark WebUI: $ kubectl proxy port8001 然后通过浏览器访问 proxy命令的主机IP,如若在本地主机上执行kubectl proxy命令,直接在本地浏览器访问localhost即可。
        来自:
        帮助文档
        云容器引擎 Serverless版
        最佳实践
        搭建Spark应用
      • 如何手动解除误拦截IP?
        本小节介绍手动解除误拦截IP。 在30秒内,账户暴力破解次数达到5次及以上,或者3600秒内,账户暴力破解次数达到15次及以上,HSS就会拦截该源IP,禁止其再次登录,防止主机因账户破解被入。若已拦截IP为合法IP被误封禁(比如运维人员因为记错密码,多次输错密码导致被封禁),您可以参照本章节手动解除拦截IP。 手动解除被拦截的可信IP,仅可以解除本次HSS对该IP的拦截。若再次发生多次密码输错,该IP仍会被HSS拦截。 说明 SSH类型攻击默认拦截12小时,其他类型攻击默认拦截24小时。 当HSS检测到拦截IP超过默认拦截时间后,主机不再被暴力破解攻击,将会自动解除拦截。 手动解除拦截IP 1、登录管理控制台。、 2、在页面左上角选择“区域”,单击,选择“安全 > 企业主机安全”,进入企业主机安全页面。 3、在左侧导航树中,选择“入侵检测 > 事件管理”。 4、在安全告警统计区域中,单击“已拦截IP”。 5、在弹出的“已拦截IP”页面,勾选误禁IP后,单击列表上方的“解除拦截”,解除拦截IP。
        来自:
        帮助文档
        企业主机安全
        常见问题
        账户暴力破解问题
        如何手动解除误拦截IP?
      • 计算增强型云电脑系统盘扩容询价v3
        接口功能介绍 适用于此操作的计算增强型云电脑需要满足全部条件:1. 计费方式为单独付费 此操作将先进行计算增强型云电脑关机操作。 接口约束 无 URI POST /v3/ecs/describeResizeSystemDiskPrice 路径参数 无 Query参数 参数 是否必填 参数类型 说明 示例 下级对象 regionId 是 String 资源池ID。 xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx 请求参数 请求头header参数 无 请求体body参数 参数 是否必填 参数类型 说明 示例 下级对象 desktopOid 是 String 云电脑ID diskSize 是 Integer 扩容后系统盘大小(单位:GB)。需为10的倍数,取值范围:大于当前系统盘大小 响应参数 参数 参数类型 说明 示例 下级对象 statusCode Integer 状态码。可能值: 800:请求成功。 900:请求失败。 800 error String 错误码。 ECPC1000 message String 提示信息。 OK. returnObj Object 返回数据对象 returnObj 表 returnObj 参数 参数类型 说明 示例 下级对象 finalPrice String 最终价格。 totalPrice String 总价格。 subOrderPrices Array of Objects 价格子项。 subOrderPrices 表 subOrderPrices 参数 参数类型 说明 示例 下级对象 totalPrice String 总价格 finalPrice String 最终价格 cycleCount String 周期数 cycleType String 周期类型 serviceTag String 产品类别 orderItemPrices Array of Objects 价格子项。 orderItemPrices 表 orderItemPrices 参数 参数类型 说明 示例 下级对象 totalPrice String 总价格 finalPrice String 最终价格 itemId String 项id instanceCnt String 实例数量 ctyunName String 产品名称 resourceType String 资源类别
        来自:
        帮助文档
        天翼云电脑(政企版)
        API参考
        API
        2023-10-30
        计算增强型云电脑
        计算增强型云电脑系统盘扩容询价v3
      • 应用发布
        本文说明如何配置应用参数。 资产上传成功后,您可以在控制台选择发布应用,通过发布应用这一操作将您的应用部署至云渲染平台上。应用发布完成后可直接生成一个在线访问链接,通过云渲染提供的通用配置能力,让您无需前端接入就能 正式上线一份定制化的前端页面 。 操作步骤 1. 在我的资产 页面,资产列表中选择需要上线的应用,点击应用发布。 2. 配置应用运行参数。 配置项 说明 发布区域集群 云渲染支持将3D应用发布至多个集群,并通过请求终端位置为您当前请求调度至最优集群,您可按需分配应用部署位置。 若您的应用在访问高峰期并发量高于1000时 ,可后台联系我们,我们将会为您的应用访问流量 设置负载均衡模式 ,将您的应用异地集群双活部署,保证业务在高峰期仍然保持稳定。 最大并发数 此应用同一时间段内支持同时访问的峰值用户数,可根据此参数限制您的应用最大同时访问数量。 执行路径 不同引擎的渲染程序一般为: Unity引擎:UnityExampleGame/UnityExampleGame.exe 。 UE引擎:UEExampleGame/Binaries/Win64/UEExampleGame.exe 。 启动参数 填写应用执行时启动参数,区分大小写 帧率设置 可设置云端应用实际编码帧率 ,此设置值也将调整到与应用运行帧率 中。 码率设置 可设置应用运行的码率范围,应用实际运行的码率数值将会根据网络情况自动在设置范围中动态波动。 同一时刻所有渲染任务产生的最高码率不可超过过开通的带宽值,请根据实际情况进行择优配置。 3. 配置应用前端页面UI,您可通过此页面修改应用前端展示效果。 注意 由于iOS限制,全屏展示功能仅对安卓端、PC端生效。云渲染会捕捉应用运行窗口将画面等比例放大、缩小,若您的应用修改显示模式后仍然存在黑边或被裁剪,请调整应用窗口显示模式为桌面全屏模式。 4. 配置应用交互方式。 云渲染已内置 多种交互采集能力 ,已实现客户无需对应用、前端做任何适配 ,云端应用运行时支持的交互操作我们可百分百在各类终端中复现。 说明 键鼠操控 若您的应用只支持通过键鼠操控程序,在移动端使用时可直接在平台配置键鼠映射 ,通过放置双轮盘与摇杆来模拟键盘 WASD 和空格操作。 若应用有组合键操控 ,也可通过配置普通按钮 ,将移动端页面中的触控事件映射为组合键按键按下。 多点触控设置 发布应用时,配置项选择开启多点触控 即可支持应用的多点触控功能,无需接入任何SDK或Plugin。 注意 : Unity的新版输入系统不能识别Windows平台的touch触控,因此无法响应节点机发出的触控指令,目前只能等待Unity进行修复。如果项目中使用了该插件并且需要多点触控功能,需要切换为旧版本。 开启语音交互 发布应用时,配置项选择开启语音交互 即可支持语音输入至节点机中,实现多人游戏开黑! 注意: 需要业务客户端开启麦克风权限才可生效。 唤起支持中英文输入的键盘 云端运行实例识别到输入框聚焦时,将会在Web页面由底部弹出一个虚拟键盘,此键盘可与应用页面展示方向保持一致并支持中文输入,无需任何适配要求。 5. 点击发布应用,待发布成功后,通过访问链接 或投屏链接访问应用。
        来自:
        帮助文档
        实时云渲染(文档停止维护)
        用户指南
        应用管理
        应用发布
      • 节点访问(NodePort)
        操作场景 节点访问 ( NodePort )是指在每个节点的IP上开放一个静态端口,通过静态端口对外暴露服务。节点访问 ( NodePort )会路由到ClusterIP服务,这个ClusterIP服务会自动创建。通过请求 : ,可以从集群的外部访问一个NodePort服务。 约束与限制 “节点访问 ( NodePort )”默认为VPC内网访问,如果需要使用弹性IP通过公网访问该服务,请提前在集群的节点上绑定弹性IP。 创建service后,如果服务亲和从集群级别切换为节点级别,连接跟踪表将不会被清理,建议用户创建service后不要修改服务亲和属性,如需修改请重新创建servcie。 同一个节点内的容器不支持访问externalTrafficPolicy为local的service。 工作负载创建时设置 您可以在创建工作负载时通过控制台设置Service访问方式,本节以nginx为例进行说明。 步骤 1 参考创建无状态负载(Deployment)、创建有状态负载(StatefulSet)或创建守护进程集(DaemonSet),在“工作负载访问设置”步骤,单击“添加服务”。 访问类型:选择“节点访问 ( NodePort )”。 说明: 如果需要使用弹性IP通过公网访问该服务,请提前在集群的节点上绑定弹性IP。 Service 名称:自定义服务名称,可与工作负载名称保持一致。 服务亲和: − 集群级别:集群下所有节点的IP+访问端口均可以访问到此服务关联的负载,服务访问会因路由跳转导致一定性能损失,且无法获取到客户端源IP。 − 节点级别:只有通过负载所在节点的IP+访问端口才可以访问此服务关联的负载,服务访问没有因路由跳转导致的性能损失,且可以获取到客户端源IP。 端口配置: − 协议:请根据业务的协议类型选择。 − 容器端口:容器镜像中工作负载实际监听的端口,取值范围为165535。 − 访问端口:容器端口映射到节点私有IP上的端口,建议选择“自动生成”。 自动生成:系统会自动分配端口号。 指定端口:指定固定的节点端口,默认取值范围为3000032767。若指定端口时,请确保同个集群内的端口唯一性。 步骤 2 完成配置后,单击“确定”。 步骤 3 单击“下一步:高级设置”进入高级设置页面,直接单击“创建”。 步骤 4 单击“查看工作负载详情”,在访问方式页签下获取访问地址,例如“192.168.0.160:30358”。 工作负载创建完成后设置 您可以在工作负载创建完成后对Service进行配置,此配置对工作负载状态无影响,且实时生效。具体操作如下: 步骤 1 登录CCE控制台,在左侧导航栏中选择“工作负载 > 无状态负载 Deployment”,在工作负载列表页单击要设置Service的工作负载名称。 说明: 如果当前Service被关联到Ingress,则更新Service的端口信息后Ingress将不可用,需要删除重建。 步骤 2 在“Service”页签,单击“添加Service”。 步骤 3 在“添加Service”页面,访问类型选择“节点访问 ( NodePort )”。 说明: 如果需要使用弹性IP通过公网访问该服务,请提前在集群的节点上绑定弹性IP。 步骤 4 设置节点访问参数: Service 名称:自定义服务名称,可与工作负载名称保持一致。 集群名称:工作负载所在集群的名称,此处不可修改。 命名空间:工作负载所在命名空间,此处不可修改。 关联工作 负载:要添加Service的工作负载,此处不可修改。 服务亲和: − 集群级别:集群下所有节点的IP+访问端口均可以访问到此服务关联的负载,服务访问会因路由跳转导致一定性能损失,且无法获取到客户端源IP。 − 节点级别:只有通过负载所在节点的IP+访问端口才可以访问此服务关联的负载,服务访问没有因路由跳转导致的性能损失,且可以获取到客户端源IP。 端口配置: − 协议:请根据业务的协议类型选择。 − 容器端口:容器镜像中工作负载程序实际监听的端口,需用户确定。nginx程序实际监听的端口为80。 − 访问端口:容器端口映射到节点私有IP上的端口,建议选择“自动生成”。 自动生成:系统会自动分配端口号。 指定端口:指定固定的节点端口,默认取值范围为3000032767。若指定端口时,请确保同个集群内的端口唯一性。 步骤 5 单击“创建”。工作负载已添加“节点访问 ( NodePort )”的服务。 验证访问方式 步骤 1 在管理控制台首页,单击“计算 > 弹性云主机”。 步骤 2 在弹性云主机页面,找到同一VPC内任意一台云服务器,并确认连接到访问地址中IP与端口的安全组是开放的。 步骤 3 单击“远程登录”,弹出登录页面,输入用户密码登录。 步骤 4 使用curl命令访问工作负载验证工作负载是否可以正常访问。 说明: 节点访问(NodePort)会在集群内节点上分配一个虚拟IP,即可以在集群内部通过虚拟IP的验证方式验证。其中,虚拟IP访问端口默认与容器端口一致。 如果需要使用弹性IP通过公网访问该服务,请提前在集群的节点上绑定弹性IP。 curl 192.168.0.160:30358 其中“192.168.0.160:30358”为步骤4中获取到的访问地址,即节点虚拟IP+访问端口。 回显如下表示访问成功。 Welcome to nginx! body { width: 35em; margin: 0 auto; fontfamily: Tahoma, Verdana, Arial, sansserif; } Welcome to nginx! If you see this page, the nginx web server is successfully installed and working. Further configuration is required. For online documentation and support please refer to Thank you for using nginx. 更新Service 您可以在添加完Service后,更新此Service的端口配置,操作步骤如下: 步骤 1 登录CCE控制台,在左侧导航栏中选择“资源管理 > 网络管理”,在Service页签下,选择对应的集群和命名空间,单击需要更新端口配置的Service后的“更新”。 步骤 2 在更新Service页面,访问类型选择“节点访问 ( NodePort )”。 步骤 3 更新节点访问参数: Service 名称:您创建的Service名称,此处不可修改。 集群名称:工作负载所在集群的名称,此处不可修改。 命名空间:工作负载所在命名空间,此处不可修改。 关联工作负载:要添加Service的工作负载,此处不可修改。 服务亲和: − 集群级别:集群下所有节点的IP+访问端口均可以访问到此服务关联的负载,服务访问会因路由跳转导致一定性能损失,且无法获取到客户端源IP。 − 节点级别:只有通过负载所在节点的IP+访问端口才可以访问此服务关联的负载,服务访问没有因路由跳转导致的性能损失,且可以获取到客户端源IP。 端口配置: − 协议:请根据业务的协议类型选择。 − 容器端口:容器镜像中工作负载程序实际监听的端口,需用户确定。nginx程序实际监听的端口为80。 − 访问端口:容器端口映射到节点私有IP上的端口,建议选择“自动生成”。 自动生成:系统会自动分配端口号。 指定端口:指定固定的节点端口,默认取值范围为3000032767。若指定端口时,请确保同个集群内的端口唯一性。 步骤 4 单击“更新”。工作负载已更新Service。
        来自:
        帮助文档
        云容器引擎
        用户指南
        旧版UI
        网络管理
        Service
        节点访问(NodePort)
      • 自定义缓存key
        简述自定义缓存Key的适用场景及配置方法。 功能介绍 缓存key是一个文件缓存在边缘节点上时的唯一标识,缓存文件和缓存key是一对一的关系。通常默认情况下,缓存key为客户端请求的原始URL(带参数)。 通过自定义缓存key,可以将原始URL形式不同但实际指向同一个文件的请求,缓存为同一份,从而提升缓存命中率,降低回源量。 适用场景 如果客户端请求不同URL时,实际指向同一份缓存文件,则可以通过自定义缓存key功能来实现将其在边缘节点上映射为同一份文件,避免出现被缓存成不同文件而导致回源率高的问题。 例如:部分客户会在请求URL中设置防盗链串,可能在请求参数中,也可能在URL某一级目录中,假设请求1为: 注意事项 【缓存配置】默认开启去问号缓存,开启后,如果客户的请求URL中含有多个参数值,例如请求1为: 自定义缓存key与【缓存配置】去问号缓存同时开启情况下,自定义缓存key优先级更高。 自定义缓存key一旦设置后,一般不建议轻易变动;如果您配置自定义缓存key生效后又再次变更,会导致原有的缓存失效,产生大量回源。 自定义缓存key需开启【静态加速】才可配置,未开启【静态加速】则全部文件不缓存,则无需配置缓存key。 缓存key仅针对边缘节点缓存key生效,不影响节点回源,如果设置了特定的缓存URI或缓存参数,例如保留或忽略全部或特定参数,节点回源时是否对URI进行改写,以及是否携带对应参数,取决于“回源URI改写”和“回源参数改写”功能的配置情况。 当前缓存URI和缓存参数可自助配置,如需设置缓存协议及缓存host,请通过提交工单给天翼云客服,由其人工操作开启。
        来自:
        帮助文档
        边缘安全加速平台
        安全与加速
        加速管理
        缓存配置
        自定义缓存key
      • Cloud Eye监控集群
        本章节主要介绍数据仓库服务如何使用Cloud Eye监控集群。 功能说明 用户需要查看集群的监控指标信息时,可以通过云监控(Cloud Eye)确认集群各项指标情况。通过监控集群运行时的各项指标,用户可以识别出数据库集群状态异常的时间段,然后在数据库日志中,分析可能存在问题的活动,从而优化数据库性能。本章节定义了数据仓库服务上报云监控服务的监控指标的命名空间、监控指标列表和维度定义。用户可以通过云监控服务提供的管理控制台或API接口来检索数据仓库服务产生的监控指标和告警信息,详情请参见云监控服务的《用户指南》和《API参考》。 本章节包含如下内容: 命名空间 集群监控指标 维度 查看集群监控和节点监控信息 多节点间的监控指标对比 创建告警规则 配置OBS转储 命名空间 SYS.DWS 集群监控指标 通过云监控提供的数据仓库服务相关监控指标,用户可以获取有关集群运行状况和性能的信息,并深入了解节点级别的对应信息。 数据仓库服务相关监控指标,具体请参见下表。 指标ID 指标名称 指标含义 取值范围 测量对象 监控周期(原始指标) dws001sharedbufferhitratio 缓存命中率 该指标用于表示需要访问的数据,在内存中可以直接获取的数据量比例,以百分比为单位。 0%~100% 数据仓库集群 4分钟 dws002inmemorysortratio 内存中排序比率 该指标用于表示在数据进行排序时,可以直接在内存中排序的数据量比例,以百分比为单位。 0%~100% 数据仓库集群 4分钟 dws003physicalreads 文件读取次数 该指标用于表示读取数据库文件的累计次数。 > 0 数据仓库集群 4分钟 dws004physicalwrites 文件写入次数 该指标用于表示写入数据库文件的累计次数。 > 0 数据仓库集群 4分钟 dws005physicalreadspersecond 每秒文件读取次数 该指标用于表示每秒读取数据库文件的次数。 ≥0 数据仓库集群 4分钟 dws006physicalwritespersecond 每秒文件写入次数 该指标用于表示每秒写入数据库文件的次数。 ≥0 数据仓库集群 4分钟 dws007dbsize 数据量大小 该指标用于表示数据库中所有数据总量大小。 单位:兆字节(MB) ≥0MB 数据仓库集群 4分钟 dws008activesqlcount 活跃SQL数 该指标用于表示数据库当前活动的SQL个数。 ≥0 数据仓库集群 4分钟 dws009sessioncount 会话数 该指标用于表示数据库当前访问的连接个数。 ≥0 数据仓库集群 4分钟 dws010cpuusage CPU使用率 该指标用于统计每个集群节点的CPU使用率,以百分比为单位。 0%~100% 数据仓库节点 1分钟 dws011memusage 内存使用率 该指标用于统计每个集群节点的内存使用率,以百分比为单位。 0%~100% 数据仓库节点 1分钟 dws012iops IOPS 该指标用于统计每个集群节点每秒处理的I/O请求数量。 ≥0 数据仓库节点 1分钟 dws013bytesin 网络输入吞吐量 该指标用于统计每秒从网络输入每个集群节点的数据总量。 单位:字节/秒 ≥0字节/秒 数据仓库节点 1分钟 dws014bytesout 网络输出吞吐量 该指标用于统计从每个节点每秒发送到网络的数据总量。 单位:字节/秒 ≥0字节/秒 数据仓库节点 1分钟 dws015diskusage 磁盘利用率 该指标用于统计每个集群节点的磁盘使用情况,以百分比为单位。 0%~100% 数据仓库节点 1分钟 dws016disktotalsize 磁盘总大小 该指标用于统计每个集群节点的数据磁盘总大小。 单位:吉字节(GB) 100GB~2000GB 数据仓库节点 1分钟 dws017diskusedsize 磁盘使用量 该指标用于统计每个集群节点的数据磁盘已用大小。 单位:吉字节(GB) 0GB~3600GB 数据仓库节点 1分钟 dws018diskreadthroughput 磁盘读吞吐量 该指标用于统计集群节点数据磁盘每秒读取的数据量。 单位:字节/秒 ≥0字节/秒 数据仓库节点 1分钟 dws019diskwritethroughput 磁盘写吞吐量 该指标用于统计集群节点数据磁盘每秒写入的数据量。 单位:字节/秒 ≥0字节/秒 数据仓库节点 1分钟 dws020avgdisksecperread 磁盘读耗时 该指标用于统计集群节点数据磁盘每次读取数据的平均耗时。 单位:秒 > 0秒 数据仓库节点 1分钟 dws021avgdisksecperwrite 磁盘写耗时 该指标用于统计集群节点数据磁盘每次写入数据的平均耗时。 单位:秒 > 0秒 数据仓库节点 1分钟 dws022avgdiskqueuelength 磁盘平均队列长度 该指标用于统计每个集群节点数据磁盘平均的I/O队列长度。 ≥0 数据仓库节点 1分钟
        来自:
        帮助文档
        数据仓库服务
        用户指南
        监控与告警
        Cloud Eye监控集群
      • 计费说明
        版本 计费项 计费说明 基础版 无 免费体验,不计费。 专业版 资产配额 按购买的资产配额数计费,包括主机资产配额数和网站资产配额数。 专业版 按包周期购买计费 提供包月和包年的购买模式。 专业版 按需购买计费 即开即停,按小时结算。
        来自:
        帮助文档
        态势感知(专业版)
        计费说明
        计费说明
      • 如何查看配置检查的报告?
        本章介绍如何查看配置检查的报告。 支持在线查看配置检查的检测详情。 操作步骤 1、在“配置检查”页面,单击配置检查基线名称。 2、在检测规则详情页面,单击“检测详情”。 3、您可以根据配置检测报告中的描述信息和修改建议,修复主机中含有风险的配置项或忽略可信任的配置项。
        来自:
        帮助文档
        企业主机安全
        常见问题
        配置风险问题
        如何查看配置检查的报告?
      • 创建告警规则
        本节主要介绍创建告警规则 通过告警规则可对资源的指标设置阈值条件,当指标数据满足阈值条件时,会产生告警;当没有指标数据上报时,会产生数据不足事件,以便您在第一时间发现异常并进行处理。 例如,在日常运维中,主机CPU使用率过高可能导致主机死机或重启。这种情况下,您可通过告警规则设置阈值条件,当主机的CPU使用率超过85%时,通过告警进行预警,以便及时获取资源运行状态等信息并采取相应措施,避免因资源问题造成业务损失。 注意事项 告警规则不能超过1000条。当告警规则数量达到上限时,请删除不需要的告警规则后重新创建。 自定义告警规则 步骤 1 在AOM左侧导航栏中选择“告警 > 告警规则”,在右上角单击“添加阈值”。 步骤 2 自定义告警规则。 1、选择资源:在“阈值名称”文本框中输入规则名称,选择资源类型,在资源树上选择待监控的资源,单击“下一步”。 说明 资源树上最多可选择10个资源。 当选择多个资源时,创建操作完成后,会创建多个告警规则,每个资源对应一个告警规则。规则命名方式为:您在“阈值名称”文本框中设置的告警规则名称加上0至9的序号(序号和资源选择时的先后顺序有关,先选择的资源序号越小,后选择的资源序号越大)。 选择资源 2、定义阈值:选择待监控的指标,设置阈值条件、连续周期、告警级别、统计方式等参数。 说明 阈值条件:阈值告警的触发条件,由判断条件(>、 、 85”,表示指标的实际值大于已设置的阈值85时,生成阈值告警 连续周期:连续多少个周期满足阈值条件后,发送阈值告警。 统计方式:指标数据按照所设置的统计方式进行聚合。 统计周期:指标数据按照所设置的统计周期进行聚合。 步骤 3 单击“添加”,完成创建。如下图所示,创建了多个告警规则,一个资源对应一个规则,可使用独立的规则对某个资源进行监控。 如下图所示,对于一个告警规则,其监控对象为某个组件,当组件的CPU内核占用超过3时,在告警界面产生阈值告警,可在左侧导航栏中选择“告警 > 告警规则”,在告警列表中查看该告警。 告警规则
        来自:
        帮助文档
        应用运维管理
        用户指南
        告警管理
        创建告警规则
      • 基本概念
        本文为您介绍Web应用防火墙(边缘云版)基础概念。 CNAME记录 CNAME ( Canonical Name ),即别名,用于把一个域名解析到另一个域名,当DNS系统在查询CNAME 左面的名称的时候,都会转向CNAME右面的名称再进行查询,一直追踪到最后的PTR或A名称,成功查询后才会做出回应,否则失败。例如,您有一台服务器,使用www.ctyun.cn访问,您又希望通过www.example.ctyun.cn1也能访问该服务器,那么就需要在您的DNS解析服务商添加一条CNAME记录,将www.example.ctyun.cn1指向www.ctyun.cn,添加该条CNAME记录后,所有访问www.example.ctyun.cn1的请求都会被转到www.ctyun.cn,获得相同的内容。 DNS DNS即Domain Name System,是域名解析服务的意思。它在互联网的作用是:把域名转换成为网络可以识别的ip地址。人们习惯记忆域名,但机器间互相只认IP地址,域名与IP地址之间是一一对应的,它们之间的转换工作称为域名解析,域名解析需要由专门的域名解析服务器来完成,整个过程是自动进行的。比如:上网时输入的www.ctyun.cn会自动转换成为220.181.112.143。 常见的DNS解析服务商有:阿里云解析,万网解析,DNSPod,新网解析,Route53(AWS),Dyn,Cloudflare等。 边缘安全节点 边缘安全节点是相对于网络的复杂结构而提出的一个概念,指距离最终用户接入具有较少的中间环节的网络节点,对最终接入用户有较好的响应能力和连接速度。其作用是将访问量较大的网页内容和对象保存在服务器前端的专用Cache设备上,以此来提高网站访问的速度和质量。
        来自:
        帮助文档
        Web应用防火墙(边缘云版)
        产品介绍
        基本概念
      • HTTP/HTTPS监听器开启安全防护(WAF防护)
        操作场景 购买了WAF(WEB应用防火墙)实例后,可为相应的HTTP/HTTPS监听器开启安全防护(以下安全防护和WAF防护同义)。对进入监听器的应用层流量进行检测,用户可根据自身应用需求设置相应的规则,如拦截、观察等。Web应用防火墙的详细信息可参考WEB应用防火墙。 操作须知(限制/说明) 该功能当前处于试用阶段,如需试用可以通过天翼云控制台提工单进行申请。 当前只有集群模式的资源池支持 HTTP/HTTPS监听器开启WAF防护,主备模式资源池不支持,主备、集群模式资源池列表见 产品简介​>产品类型和规格, 实际情况以控制台展现为准。 用户已购买了Web应用防火墙。 用户的负载均衡实例为性能保障型,不支持经典型开启安全防护。 只支持HTTP/HTTPS监听器开启安全防护。 Web应用防火墙不参与流量的转发,证书配置能力不启用,负载均衡器将解密后的信息直接给Web应用防火墙,Web应用防火墙检测完成后直接回给负载均衡器,WEB应用防火墙不执行解密/回源等动作。 负载均衡开启安全防护后,负载均衡的黑白名单仍然生效。 计费说明 监听器支持安全防护功能不额外收取费用,用户需要购买负载均衡器和WEB应用防火墙,这两个产品单独计费。
        来自:
        帮助文档
        弹性负载均衡 ELB
        最佳实践
        HTTP/HTTPS监听器开启安全防护(WAF防护)
      • 查询基线二级列表
        参数 是否必填 参数类型 说明 示例 下级对象 scaRuleId 是 Integer 基线策略id 1 agentGuid 否 String agentGuid testagentguid custName 否 String 主机名称 testcustname agentIp 否 String 服务器IP 192.168.0.1 scaId 是 Integer 基线模板id 1
        来自:
        帮助文档
        服务器安全卫士(原生版)
        API参考
        API
        2022-10-20
        基线检测
        查询基线二级列表
      • 计费说明
        计费项 计费说明 资产配额 按购买的资产配额数计费,包括主机资产配额数和网站资产配额数。 按包周期购买计费 提供包月和包年的购买模式。 按需购买计费 即开即停,按小时结算。
        来自:
        帮助文档
        态势感知(专业版)(新版)
        计费说明
        计费说明
      • 如何测试网络连通性?
        本节介绍如何测试网络连通性。 如何测试网络连通性 可使用telnet命令测试目标主机与ARMS服务器网络是否连通。例如,以测试内蒙6地域的连通性为例,请登录应用所部署的机器,并输入以下命令: telnet armsdataproxy.cq2b.inner.ctyun.cn 27149 具体每个资源池的服务器地址参考应用接入。
        来自:
        帮助文档
        应用性能监控 APM
        常见问题
        操作类
        如何测试网络连通性?
      • 缩容
        参数 说明 非标配置 如 实例appendonly参数未设置成yes,变更有数据丢失风险等。 节点状态 实例节点状态检查,任意节点不可用 异常。 内存使用率 内存利用率检查(>90%)异常。 带宽使用率 主机带宽使用率超过100% 异常。 CPU使用率 五分钟内的节点CPU利用率检查(>90%)异常。
        来自:
        帮助文档
        分布式缓存服务Redis版
        用户指南
        实例生命周期管理
        缩容
      • 解锁目的端
        本章介绍如何解锁目的端。 操作场景 在全量复制过程中,系统默认将您的目的端锁定不可操作,迁移完成后将自动解锁目的端服务器。如您在迁移过程中,需要操作目的端,可以解锁目的端。 操作步骤 1. 登录主机迁移服务管理控制台。 2. 在左侧导航树中,单击“迁移服务器”,进入迁移服务器列表页面。 3. 在迁移服务器列表页面选择需要解锁目的端的服务器,在“操作”列单击“更多 > 解锁目的端”。 4. 弹出“解锁目的端”窗口,单击“确定”。
        来自:
        帮助文档
        主机迁移服务SMS
        用户指南
        迁移服务器管理
        解锁目的端
      • 使用镜像创建应用
        配置项 描述 容器名称 填写容器的名称 更新策略 支持IfNotPresent、Always、Never 镜像及镜像版本 支持在容器镜像服务或开源镜像中选择镜像以及镜像版本 CPU/内存配额限制 Limit用于设置容器使用资源的最大上限,避免异常情况下节点资源消耗过多 初始化容器 初始化容器用于业务容器启动前安装特定工具或脚本 启动命令(选填) ● 运行命令:对应镜像的ENTRYPOINT命令,将会覆盖镜像的ENTRYPOINT命令;每个输入框仅输入一个命令或参数启动执行 ● 运行参数:对应镜像的CMD命令,将会覆盖镜像的CMD命令;每个输入框仅输入一个命令或参数 启动后处理(选填) ● 命令行脚本:容器启动后执行,注意由于是异步执行,无法保证一定在ENTRYPOINT之后运行;每个输入框仅输入一个命令或参数 ● HTTP请求:输入路径、端口、主机地址 停止前处理(选填) ● 命令行脚本:容器停止前执行,常用于资源清理。每个输入框仅输入一个命令或参数 ● HTTP请求:输入路径、端口、主机地址 容器健康检查(选填) ● 存活检查:检查容器是否正常,不正常则重启实例 ● 就绪检查:检查容器是否就绪,不就绪则停止转发流量到当前实例 ● 启动探针:检查容器内应用是否已经启动 环境变量(选填) 支持配置容器的环境变量 数据存储(选填) 支持挂载数据卷到容器内的指定路径,支持EmptyDir、Config Map、Secret
        来自:
        帮助文档
        云容器引擎 Serverless版
        用户指南
        应用
        使用镜像创建应用
      • 新建表/文件迁移作业
        本章节主要介绍新建表/文件迁移作业。 操作场景 CDM可以实现在同构、异构数据源之间进行表或文件级别的数据迁移,支持表/文件迁移的数据源请参见支持的数据源中表/文件迁移支持的数据源类型。 约束限制 记录脏数据功能依赖于OBS服务。 作业导入时,JSON文件大小不超过1MB。 前提条件 已新建连接。 CDM集群与待迁移数据源可以正常通信。 操作步骤 1.进入CDM主界面,单击左侧导航上的“集群管理”,选择集群后的“作业管理”。 2.选择“表/文件迁移 > 新建作业”,进入作业配置界面。 详见下图:新建表/文件迁移的作业 3.选择源连接、目的连接: 作业名称:用户自定义任务名称,名称由中文、数字、字母、中划线、下划线、点号,且首字符不能是中划线或点号组成,长度必须在1到240个字符之间,例如“oracle2obst”。 源连接名称:选择待迁移数据的数据源,作业运行时将从此端复制导出数据。 目的连接名称:选择将数据迁移到哪个数据源,作业运行时会将数据导入此端。 4.选择源连接后,配置作业参数。 每种数据源对应的作业参数不一样,其它类型数据源的作业参数请根据下表选择。 源端作业参数说明 源端类型 说明 参数配置 OBS 支持以CSV、JSON或二进制格式抽取数据,其中二进制方式不解析文件内容,性能快,适合文件迁移。 参见配置OBS源端参数。 MRS HDFs FusionInsight HDFS Apache HDFS 支持以CSV、Parquet或二进制格式抽取HDFS数据,支持多种压缩格式。 参见配置HDFS源端参数。 MRS HBase FusionInsight HBase Apache HBase CloudTable 支持从MRS、FusionInsight HD、开源Apache Hadoop的HBase,或CloudTable服务导出数据,用户需要知道HBase表的所有列族和字段名。 参见配置HBase/CloudTable源端参数。 MRS Hive FusionInsight Hive Apache Hive 支持从Hive导出数据,使用JDBC接口抽取数据。 Hive作为数据源,CDM自动使用Hive数据分片文件进行数据分区。 参见配置Hive源端参数。 DLI 支持从DLI导出数据。 参见配置DLI源端参数。 FTP SFTP 支持以CSV、JSON或二进制格式抽取FTP/SFTP的数据。 参见配置FTP/SFTP源端参数。 HTTP 用于读取一个公网HTTP/HTTPS URL的文件,包括第三方对象存储的公共读取场景和网盘场景。 当前只支持从HTTP URL导出数据,不支持导入。 参见配置HTTP源端参数。 数据仓库DWS 云数据库MySQL 云数据库SQL Server 云数据库PostgreSQL 支持从云端的数据库服务导出数据。 从这些数据源导出数据时,CDM使用JDBC接口抽取数据,源端作业参数相同,详细请 参见配置作业源端参数文档中的 配置常见关系数据库源端参数。 FusionInsight LibrA 支持从FusionInsight LibrA导出数据。 从这些数据源导出数据时,CDM使用JDBC接口抽取数据,源端作业参数相同,详细请 参见配置作业源端参数文档中的 配置常见关系数据库源端参数。 MySQL PostgreSQL Oracle Microsoft SQL Server SAP HANA MYCAT 分库 这些非云服务的数据库,既可以是用户在本地数据中心自建的数据库,也可以是用户在ECS上部署的,还可以是第三方云上的数据库服务。 从这些数据源导出数据时,CDM使用JDBC接口抽取数据,源端作业参数相同,详细请 参见配置作业源端参数文档中的 配置常见关系数据库源端参数。 MongoDB 文档数据库服务(DDS) 支持从MongoDB或DDS导出数据。 参见配置MongoDB/DDS源端参数。 Redis 支持从开源Redis导出数据。 参见配置Redis源端参数。 Apache Kafka DMS Kafka MRS Kafka 仅支持导出数据到云搜索服务。 参见配置Kafka/DMS Kafka源端参数。 云搜索服务 Elasticsearch 支持从云搜索服务或Elasticsearch导出数据。 参见配置Elasticsearch或云搜索服务源端参数。 5.配置目的端作业参数,根据目的端数据类型配置对应的参数,具体下表所示。 目的端作业参数说明 目的端类型 说明 参数配置 OBS 支持使用CSV或二进制格式批量传输大量文件到OBS。 参见配置OBS源端参数。 MRS HDFS 导入数据到HDFS时,支持设置压缩格式。 参见配置HDFS源端参数。 MRS HBase CloudTable 支持导入数据到HBase,创建新HBase表时支持设置压缩算法。 参见配置HBase/CloudTable源端参数。 MRS Hive 支持快速导入数据到MRS的Hive。 参见配置Hive源端参数。 数据湖探索(DLI) 支持导入数据到DLI服务。 参见配置DLI目的端参数。 数据仓库DWS 云数据库MySQL 云数据库SQL Server 云数据库PostgreSQL 支持导入数据到云端的数据库服务。 使用JDBC接口导入数据,参见配置常见关系数据库目的端参数。 文档数据库服务(DDS) 支持导入数据到DDS,不支持导入到本地MongoDB。 参见配置DDS目的端参数。 分布式缓存服务(DCS) 支持导入数据到DCS,支持“String”或“Hashmap”两种值存储方式。不支持导入数据到本地Redis。 参见配置DCS目的端参数。 云搜索服务(CSS) 支持导入数据到云搜索服务。 参见配置云搜索服务目的端参数。 6.作业参数配置完成后,单击“下一步”进入字段映射的操作页面。 如果是文件类数据源(FTP/SFTP/HDFS/OBS)之间相互迁移数据,且源端“文件格式”配置为“二进制格式”(即不解析文件内容直接传输),则没有字段映射这一步骤。 其他场景下,CDM会自动匹配源端和目的端数据表字段,需用户检查字段映射关系和时间格式是否正确,例如:源字段类型是否可以转换为目的字段类型。 说明 如果字段映射关系不正确,用户可以通过拖拽字段来调整映射关系。 如果在字段映射界面,CDM通过获取样值的方式无法获得所有列(例如从HBase/CloudTable/MongoDB导出数据时,CDM有较大概率无法获得所有列),则可以单击后选择“添加新字段”来手动增加,确保导入到目的端的数据完整。 如果是导入到数据仓库服务(DWS),则还需在目的字段中选择分布列,建议按如下顺序选取分布列: 有主键可以使用主键作为分布列。 (1)多个数据段联合做主键的场景,建议设置所有主键作为分布列。 (2)在没有主键的场景下,如果没有选择分布列,DWS会默认第一列作为分布列,可能会有数据倾斜风险。 7.CDM支持字段内容转换,如果需要可单击操作列下,进入转换器列表界面,再单击“新建转换器”。 图 新建转换器 CDM支持以下转换器: 脱敏:隐藏字符串中的关键数据。 例如要将“12345678910”转换为“1238910”,则参数配置如下: −“起始保留长度”为“3”。 −“结尾保留长度”为“4”。 −“替换字符”为“”。 去前后空格:自动删除字符串前后的空值。 字符串反转:自动反转字符串,例如将“ABC”转换为“CBA”。 字符串替换:将选定的字符串替换。 表达式转换:使用JSP表达式语言(Expression Language)对当前字段或整行数据进行转换。 去换行:将字段中的换行符(n、r、rn)删除。 8.单击“下一步”配置任务参数,单击“显示高级属性”展开可选参数。 详见下图:任务参数 各参数说明如下表所示。 任务配置参数 参数 说明 取值样例 作业失败重试 如果作业执行失败,可选择自动重试三次或者不重试。 建议仅对文件类作业或启用了导入阶段表的数据库作业配置自动重试,避免自动重试重复写入数据导致数据不一致。 说明 如果通过DataArts Studio数据开发使用参数传递并调度CDM迁移作业时,不能在CDM迁移作业中配置“作业失败重试”参数,如有需要请在数据开发中的CDM节点配置“失败重试”参数。 不重试 作业分组 选择作业的分组,默认分组为“DEFAULT”。在CDM“作业管理”界面,支持作业分组显示、按组批量启动作业、按分组导出作业等操作。 DEFAULT 是否定时执行 如果选择“是”,可以配置作业自动启动的时间、重复周期和有效期,具体请参见配置定时任务。 说明 如果通过DataArts Studio数据开发调度CDM迁移作业,此处也配置了定时任务,则两种调度均会生效。为了业务运行逻辑统一和避免调度冲突,推荐您启用数据开发调度即可,无需配置CDM定时任务。 否 抽取并发数 设置同时执行的抽取任务数。并发抽取数取值范围为1300,若配置过大,则以队列的形式进行排队。 CDM迁移作业的抽取并发量,与集群规格和表大小有关。 按集群规格建议每1CUs(1CUs1核4G)配置为4。 表每行数据大小为1MB以下的可以多并发抽取,超过1MB的建议单线程抽取数据。 说明 迁移的目的端为文件时,CDM不支持多并发,此时应配置为单进程抽取数据。 单作业的抽取并发数,受到作业“配置管理”中所配置的“最大抽取并发数”影响。“最大抽取并发数”配置的是抽取并发总数。 1 加载(写入)并发数 加载(写入)时并发执行的Loader数量。 仅当HBase或Hive作为目的数据源时该参数才显示。 3 分片重试次数 每个分片执行失败时的重试次数,为0表示不重试。 0 是否写入脏数据 选择是否记录脏数据,默认不记录脏数据。 CDM中脏数据指的是数据格式非法的数据。当源数据中存在脏数据时,建议您打开此配置。否则可能导致迁移作业失败。 是 脏数据写入连接 当“是否写入脏数据”为“是”才显示该参数。 脏数据要写入的连接,目前只支持写入到OBS连接。 obslink OBS桶 当“脏数据写入连接”为OBS类型的连接时,才显示该参数。 写入脏数据的OBS桶的名称。 dirtydata 脏数据目录 “是否写入脏数据”选择为“是”时,该参数才显示。 OBS上存储脏数据的目录,只有在配置了脏数据目录的情况下才会记录脏数据。 用户可以进入脏数据目录,查看作业执行过程中处理失败的数据或者被清洗过滤掉的数据,针对该数据可以查看源数据中哪些数据不符合转换、清洗规则。 /user/dirtydir 单个分片的最大错误记录数 当“是否写入脏数据”为“是”才显示该参数。 单个map的错误记录超过设置的最大错误记录数则任务自动结束,已经导入的数据不支持回退。推荐使用临时表作为导入的目标表,待导入成功后再改名或合并到最终数据表。 0 开启限速 设置限速可以保护源端读取压力,速率代表CDM传输速率,而非网卡流量。 是 单并发速率上限(Mb/s) 开启限速情况下设置的单并发速率上限值。 20 9.单击“保存”,或者“保存并运行”回到作业管理界面,可查看作业状态。 说明 作业状态有New,Pending,Booting,Running,Failed,Succeeded。 其中“Pending”表示正在等待系统调度该作业,“Booting”表示正在分析待迁移的数据。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据集成
        管理作业
        新建表/文件迁移作业
      • 数据盘扩展磁盘分区和文件系统
        本文将为您介绍如何在Linux环境下为数据盘扩展磁盘分区和文件系统。 扩大原有分区 (MBR分区与GPT分区) 本示例以“CentOS 7.6 64bit”操作系统为例,原有数据盘/dev/vdb已有分区/dev/vdb1,容量为10GB,且已在控制台将该数据盘扩容至20GB。本示例介绍如何将新增的10GB容量划分至已有的MBR分区或GPT分区/dev/vdb1内。 1. 输入 growpart命令,检查此云主机是否已安装growpart扩容工具。若出现图中回显信息,则说明已经安装,无需手动安装。 注意 若没有图示信息,请执行命令“yum install cloudutilsgrowpart”手动安装growpart工具。 2. 执行命令 fdisk l,查看磁盘的分区信息,回显信息如图所示: 3. 执行命令 df TH,查看数据盘分区/dev/vdb1的容量,回显信息如图所示: 从图中看出,磁盘分区/dev/vdb1容量为10GB,但是磁盘/dev/vdb的容量为20GB,需要扩容磁盘分区/dev/vdb1的空间。 4. 执行命令 growpart /dev/vdb 1,指定数据盘待扩容的分区,数据盘为/dev/vdb,分区的编号为1,通过growpart进行扩容,回显信息如图所示: 说明 如果报错提示unexpected output in sfdisk version [sfdisk,来自 utillinux 2.23.2],是因为中文版操作系统使用了非enUS.UTF8的字符编码类型。可以通过运行export LCALLenUS.UTF8命令,切换字符编码类型,再执行步骤4。该切换字符编码类型命令会对当前终端窗口的所有后续命令都生效,关闭终端后自动失效,不会修改系统永久配置。 5. 执行命令 resize2fs /dev/vdb1,将原有分区/dev/vdb1的文件系统进行扩充。回显信息如图所示: 说明 当磁盘分区文件系统为xfs格式时,需要使用xfsgrowfs 磁盘分区扩容。 当磁盘分区文件系统为ext格式时,需要使用resize2fs 磁盘分区扩容。 6. 执行命令 df TH,查看扩容后数据盘分区“/dev/vdb1”的容量,回显信息如图所示: 此时数据盘分区/dev/vdb1的容量已经扩容至20GB。 若需要设置开机自动挂载磁盘分区,请参见设置开机自动挂载磁盘。
        来自:
        帮助文档
        云硬盘 EVS
        用户指南
        扩容云硬盘
        Linux扩展磁盘分区和文件系统
        数据盘扩展磁盘分区和文件系统
      • 文件复制
        参数 配置说明 名称 用户自定义的普通复制规则名称,便于管理,支持中文和英文字符,区分和识别当前任务的名称。 业务组 选择预定义的业务组。 节点组 选择节点组,方便工作机,灾备机选择容灾节点。 工作机 选择发送复制数据的容灾节点。在线节点优先显示在列表的前面,并且采用名称排序。如果已经创建节点组,可选择节点组再进行节点选择。若没有创建节点组,可直接选择节点,系统将自动列出拥有功能许可的所有主机节点,供用户自行选择。 代理 选择跨网络传输的代理地址。 灾备机 选择接收复制数据的容灾节点。如果已经创建节点组,可选择节点组再进行节点选择。若没有创建节点组,可直接选择节点,系统将自动列出拥有功能许可的所有主机节点,供用户自行选择。 数据地址 用户可以根据需要选择灾备机指定数据地址,用于接收复制数据。 类型过滤 用户可以指定只保护某些后缀名的文件,或者排除某些后缀名的文件。 规则自动启动 默认选中,规则提交后自动开始镜像和复制。如果不选中,规则提交后为停止状态。 预约启动 可以设置预定时间点,提交复制规则后到预约时间后再启动。
        来自:
        帮助文档
        多活容灾服务
        用户指南
        资源同步管理
        持续数据保护
        文件复制
      • 容灾演练
        操作场景 在不影响业务的情况下,通过容灾演练,模拟真实故障恢复场景,制定应急恢复预案,检验容灾方案的适用性、有效性。当真实故障发生时,通过预案快速恢复,提高业务连续性。 存储容灾服务提供的容灾演练功能,在容灾演练VPC(该VPC不能与容灾站点服务器所属VPC相同)内执行容灾演练,基于容灾站点服务器的磁盘快照,快速创建容灾演练服务器。 说明 当容灾演练服务器创建完成后,生产站点服务器和容灾演练服务器同时独立运行,数据不再实时同步。 为保证在灾难发生时,容灾切换能够正常进行,建议您定期做容灾演练。 使用须知 创建容灾演练时,如果保护组内的生产站点服务器加入了企业项目,容灾演练创建的演练服务器不会自动加入到企业项目,如有需要请手动将演练服务器加入到企业项目。 创建容灾演练时,如果生产站点服务器为Linux云服务器且为密钥方式登录,创建容灾演练后,创建的容灾演练服务器详情不显示密钥对信息,但可以使用容灾站点服务器的密钥对登录容灾演练的服务器。 创建容灾演练成功后,生产站点服务器中的“主机名”、“名称”、“委托”、“云服务器组”、“自动恢复”、“安全组”和“标签”配置项修改不会再自动同步到演练服务器上。您可以登录控制台,手动将这些配置项的修改添加到演练服务器上。 容灾演练操作只在容灾演练服务器配置主网卡,如果生产站点有从网卡,容灾演练不会自动配置,需要在容灾演练服务器详情页面手工绑定从网卡。
        来自:
        帮助文档
        存储容灾服务
        用户指南
        管理保护组
        容灾演练
      • 实例
        介绍实例相关操作。 通过实例页面您可以查看实例的相关信息,并且能对实例的Agent进行停止、启动和删除等操作。 查看实例列表 1. 登录管理控制台。 2. 单击左侧,选择“管理与部署 > 应用性能管理 APM”,进入APM服务页面。 3. 在左侧导航栏选择“应用监控 >指标”,进入应用指标页。 4. 在界面左侧树单击对应环境后的,进入实例监控页面。 5. 单击“实例”,查看实例列表。 在页面右上角搜索框设置搜索条件后,单击,查看满足搜索条件的实例列表。 在页面右上角,展示处于离线、正常以及停止的状态实例的数量。 表 实例列表参数说明 参数名称 说明 主机名称 主机名称。 IP 实例的IP地址。 实例名称 实例名称。 Agent状态 Agent的状态,包括:离线、正常以及停止。 默认情况下,Agent状态按照正常,停止,离线的顺序排列。 单击“Agent状态”列的,支持按照Agent状态过滤。 Agent版本 Agent版本号。 最后心跳时间 采集实例数据的最后时间。 单击“最后心跳时间”列的,可以按照最后心跳时间的升序或降序排列。 Agent启停 Agent启动、停止操作。 操作 实例的操作。 单击“操作”列的删除,可以删除实例。
        来自:
        帮助文档
        应用性能管理
        用户指南
        应用指标监控
        实例
      • 日志收集系统Flume接入Kafka
        本文主要介绍日志收集系统Flume接入Kafka。 最佳实践概述 场景描述 使用Flume+Kafka来完成实时流式日志处理,后面再连接上Storm/Spark Streaming等流式实时处理技术,从而完成日志实时解析的目标。如果Flume直接对接实时计算框架,当数据采集速度大于数据处理速度,很容易发生数据堆积或者数据丢失,而kafka可以当做一个消息缓存队列,可以把它理解为一个数据库,可以存放一段时间的数据。 因此数据从数据源( HTTP、Log 文件、JMS、监听端口数据等)到flume再到Kafka进行消息缓存,数据一方面可以同步到HDFS做离线计算,另一方面可以做实时计算,可实现数据多分发。 技术架构图 暂无。 方案优势 把数据存储到 HDFS 或者 HBase 等下游存储模块或者计算模块时需要考虑各种复杂的场景,例如并发写入的量以及系统承载压力、网络延迟等问题。Flume 作为灵活的分布式系统具有多种接口,同时提供可定制化的管道。在生产处理环节中,当生产与处理速度不一致时,Kafka 可以充当缓存角色。Kafka 拥有 partition 结构以及采用 append 追加数据,使 Kafka 具有优秀的吞吐能力;同时其拥有 replication 结构,使 Kafka 具有很高的容错性。所以将 Flume 和 Kafka 结合起来,可以满足生产环境中绝大多数要求。 前提条件 需已购买Kafka实例、创建Topic,并且已成功消费消息。 确认准备 Apache Flume环境(1.6.0以上版本兼容 Kafka)。 确认 Kafka 的 Source、 Sink 组件已经在 Flume 中。 资源规划 本实践方案内容仅涉及Kafka专享版实例。 分布式消息服务 Figure 1 分布式消息服务 资源类型 配置项 配置明细 说明 :::: 企业中间件 DMS Kafka专享实例 需已购买kafka专享实例,创建好Topic,并成功消费消息。 方案正文
        来自:
        帮助文档
        分布式消息服务Kafka
        最佳实践
        日志收集系统Flume接入Kafka
      • PG控制台部署
        该任务用于指导软件工程师安装部署PG控制台。 该任务用于指导软件工程师安装部署PG控制台。 操作步骤 上传组件模块程序包。 将获取PG二进制程序包(teledbx1.1.08k.x8664.tar.gz telepgconsole1.5.9.zip)程序包(直接使用下载后的程序包,不要修改程序包名)拷贝至已部署后端服务的主机的目录,如/app/pg/localpackage。
        来自:
        帮助文档
        分布式融合数据库HTAP
        私有云产品历史版本
        V1.1.0版本产品文档
        安装部署手册
        安装过程
        PG控制台部署
      • 功能特性
        审计分析 对实时动态分析的日志进行归并处理和监测,可及时发现高危安全事件,如用户违规行为、数据泄露、攻击利用和主机通信异常。 关联分析策略是系统中的核心功能之一,主要关注各类日志之间的逻辑关联关系。它不仅支持以预定义规则进行事件关联,还能基于状态、时序和归并等方式发现关联。 系统可审计以下不同类型日志或事件(需结合相关设备,如防火墙和IPS等):网络攻击、有害代码、漏洞、用户访问存取、系统运行、设备故障、配置状态、网络连接和数据库操作等。 关联事件的结果将在关联事件中显示,如果符合关联策略,将以告警形式在实时监控模块呈现给用户。用户可以对告警进行处理,以确保及时应对潜在的安全问题。 数据展示 提供可视化的总体概览,通过仪表板可以直观地展示日志数据的统计和分析结果,帮助用户快速了解系统的运行状态和问题。用户可以自定义展示安全事件以及各类审计分析信息,提供实时的审计分析可视化界面。 全局监视仪表板,可展示不同设备类型、不同安全区域的实时日志流曲线、统计图,以及网络整体运行态势、待处理告警信息等。 风险报表 用户可以根据自己的需求,自由选择需要包含在报表中的指标和数据,以便更好地满足特定的业务需求。系统还提供了对预置报表模板的选择和预览功能。用户可以浏览系统中已经存在的报表模板,并选择其中的一个进行生产。这有助于用户快速生成符合自己需求的报表,节省了手动设计和生成报表的时间和工作量。 在报表中,系统以柱状图、曲线图和饼状图的方式统计安全报警和原始日志情况。这种可视化的报表展示方式使得数据更加直观易懂,用户可以更轻松地分析和理解报表中的信息。报表格式方面,系统支持PDF、Word等文件格式的导出。用户可以根据需要选择合适的文件格式,以便将报表分享给其他人或保存到本地进行进一步分析。 此外,系统还支持周期性生成报表并通过邮件推送给用户。用户可以设置报表的生成周期,例如每天、每周或每月定期生成报表,并通过电子邮件将其发送给用户。这样,用户可以及时获得最新的安全报警和日志信息,以便及时采取相应的措施。
        来自:
        帮助文档
        日志审计(原生版)
        产品介绍
        功能特性
      • 专家服务
        本文为您介绍多活容灾服务专家服务的相关内容。 概述 天翼云多活容灾服务提供从容灾架构设计到实施落地的全流程专家支持,帮助您构建高可用、可演练的容灾体系。 服务概述 天翼云多活容灾专家服务分为两大子服务,可根据您的需求单独或组合购买: 服务名称 核心目标 适用场景 容灾架构设计专家服务 输出定制化的容灾设计方案和演练流程 尚未有明确容灾架构,需要专业咨询和规划。 容灾实施专家服务 将设计方案落地,完成产品部署、策略配置和实战演练 已有容灾方案或已完成设计服务,需要实施交付。 服务范围说明 容灾架构设计服务: 天翼云服务与产品功能的咨询、使用、配置,并根据您的容灾需求提供最佳实践建议。 基于您现有应用架构和容灾目标(RTO、RPO等),进行容灾方案和演练流程的设计。 协助完成容灾方案中所需天翼云产品的选型与配置指导。 提供完整的容灾架构设计方案与演练流程文档,涵盖网络规划、数据同步策略、切换流程等。 容灾实施专家服务: 协助您部署产品客户端。 针对主机高可用、数据库双活、CDP等核心功能,配置最佳同步策略。 协助将人工切换流程转化为产品内的自动化编排流程。 指导您完成首次实战演练。
        来自:
        帮助文档
        多活容灾服务
        用户指南
        专业支持
        专家服务
      • 保存文件完整性保护配置
        参数 是否必填 参数类型 说明 示例 下级对象 secureStatus 是 Boolean 文件保护配置防护状态 true开启 false关闭 true effectiveScope 是 String 生效范围 OPTIONAL自选机器 ALL所有机器 OPTIONAL agentGuidList 否 Array of Strings 主机guid列表 [] secureConfigList 是 Array of Objects 保护目录 表 secureConfigList excludeConfigList 否 Array of Objects 排除目录 表 excludeConfigList 表 secureConfigList
        来自:
        帮助文档
        服务器安全卫士(原生版)
        API参考
        API
        2022-10-20
        文件完整性保护
        保存文件完整性保护配置
      • 设置静态网站托管
        参数 是否必填 参数类型 说明 示例 下级对象 Condition 否 Array of Objects 用于描述应用指定重定向必须满足的条件 Condition Redirect 否 Array of Objects 容器用于重定向信息,可以将请求重定向到另一个主机、另一个页面或使用另一种协议,在发生错误时,可以指定要返回的不同错误代码 Redirect
        来自:
        帮助文档
        媒体存储
        API参考
        API(OpenAPI)
        关于桶的操作
        静态网站
        设置静态网站托管
      • Top10榜单
        主机漏洞Top10榜单展示统计数量最高的事件排行榜,排行榜根据筛选数据实时更新。 查询方法 1.点击事件图示,可以把该事件加入筛选条件进一步分析。 2.点击具体的告警,自动把告警名称加入筛选条件。
        来自:
        帮助文档
        安全专区
        用户指南
        威胁分析
        Top10榜单
      • 1
      • ...
      • 208
      • 209
      • 210
      • 211
      • 212
      • ...
      • 514
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      818 天翼云云智盛典

      爆款云主机低至1.5折起,Token套餐低至9.9元/月起

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      聚力AI赋能 天翼云大模型专项

      大模型特惠专区·Token Plan 轻享包低至9.9元起

      青云志云端助力计划

      一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云

      企业出海解决方案

      助力您的业务扬帆出海,通达全球!

      天翼云信创专区

      “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      天翼云奖励推广计划

      加入成为云推官,推荐新用户注册下单得现金奖励

      产品推荐

      物理机 DPS

      应用云主机 ACS

      GPU云主机

      多活容灾服务 MDR

      弹性高性能计算 E-HPC

      天翼云CTyunOS系统

      公共算力服务

      应用托管

      星辰TokenHub运营服务平台

      推荐文档

      天翼云进阶之路④:多网卡绑定

      慢日志查询

      云课堂 第一课:玩转天翼云安全组

      上报自定义指标并进行监控

      扩容磁盘

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 息壤智算平台
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号