AI创作平台套餐32.67元/年起,花卷聆记AI录音卡598元起
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 818 天翼云云智盛典 NEW 爆款云主机低至1.5折起,Token套餐低至9.9元/月起
  • 安全隔离版OpenClaw NEW OpenClaw云服务器专属“龙虾“套餐低至1.5折起
  • 聚力AI赋能 天翼云大模型专项 大模型特惠专区·Token Plan 轻享包低至9.9元起
  • 青云志云端助力计划 NEW 一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云
  • 企业出海解决方案 NEW 助力您的业务扬帆出海,通达全球!
  • 天翼云信创专区 NEW “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富
  • 云上钜惠 爆款云主机全场特惠,2核4G只要1.8折起!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

息壤智算

领先开放的智算服务平台,提供算力、平台、数据、模型、应用“五位一体”智算服务体系,构建全流程的AI基础设施能力
星辰TokenHub
  • 模型广场
  • 体验中心
  • 服务接入
星辰MaaS平台
  • 星辰MaaS智能体平台
  • 星辰大模型
大模型
  • glm-5.3-flash
  • GLM-5.2
  • deepseek-v4-pro-0813
  • deepseek-v4-flash-0731-new
  • qwen3.8-flash
AI Store
  • 算力市场
  • 模型市场
  • 应用市场
应用托管
  • 天翼云DramaFlow2.0
  • 应用实例
科研助手
  • 开发机
  • 并行计算
训推服务
  • 模型开发
  • 训练任务
  • 服务部署
智能体引擎
  • 智能体引擎
可信数据空间
  • 可信数据空间
公共算力服务
  • 裸金属
  • 定制裸金属
智算一体机
  • 智算一体机
模型适配专家服务
  • 模型适配专家服务
算力服务商
  • 入驻算力服务商

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入AI Store公有云生态专区智云上海应用生态专区
建站工具
  • 新域名服务
  • SSL证书
  • 翼建站
企业办公
  • 智教云电脑
  • WPS 365 天翼云版
灾备迁移
  • 云管家2.0
  • 翼备份(SaaS版)
  • 琥珀数据压缩归档服务
智慧教育
  • 智擎思政平台(个人版)
  • 智擎研学平台(个人基础版)

定价

协助您快速了解云产品计费模式、价格详情,轻松预估上云成本
价格计算器
  • 动态测算产品价格
定价策略
  • 快速了解计费模式

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
天翼云培训认证
  • 天翼云学堂
天翼信创云专区
  • 信创云专区
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
培训与认证
  • 天翼云学堂
  • 天翼云认证
开源社区
  • 魔乐社区
  • OpenTeleDB

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 服务保障
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家
我要反馈
  • 建议与反馈
  • 用户体验官
信息公告
  • 客户公告

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2026智能云生态大会
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 息壤智算
  • 产品
  • 解决方案
  • 应用商城
  • 定价
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      数据集成工具_相关内容
      • 使用数据集
        本节介绍如何使用数据集。 在创建离线训练任务时,可以使用已有数据集,包括公共数据集和私有数据集。 操作步骤 创建AI训练应用 进入AI应用列表,点击创建AI应用按钮。 使用公共数据集 1. 点击训练数据选择数据集,在弹出页面选择公共数据集,找到需要挂载的公共数据集。 2. 选中数据集及版本后,写入挂载路径即可。 3. 若需要挂载多个数据集,可使用同样方式进行多次挂载。 使用私有数据集 私有数据集在选择数据集时,需点击私有数据集进行选择,其余操作和公共数据集一致。
        来自:
        帮助文档
        智算套件
        用户指南
        资产管理
        数据集
        使用数据集
      • 更改实例时区
        本文介绍如何为弹性云主机更改时区。 操作场景 弹性云主机默认时区设置取决于您制作镜像时选择的时区。如果您需要修改弹性云主机的时区,按照本节内容进行操作,将系统时间与本地时间同步或更改为其他所需的时区。 更改Linux弹性云主机的时区 更改Linux弹性云主机的时区可以通过修改系统配置文件来实现。以下是在CentOS中更改时区的详细操作方法: 1. 登录到您的CentOS弹性云主机:使用您的凭据登录到弹性云主机。 2. 打开终端或使用远程登录工具:获取访问弹性云主机的命令行界面。 3. 查看当前时区:您可以使用以下命令来查看当前的时区设置: timedatectl 您可以使用以下命令列出系统中可用的时区: timedatectl listtimezones 4. 使用以下命令将新时区应用到系统中,将“YourTimeZone”替换为您要设置的时区: sudo timedatectl settimezone YourTimeZone 例如“Asia/Shanghai”: 5. 保存更改并退出编辑器:在Vi编辑器中,按下Esc键,然后输入":wq"保存更改并退出编辑器。 :wq 6. 使用以下命令再次运行 timedatectl 来验证时区是否已更改: timedatectl 系统将显示当前日期和时间,确保显示的时间与您所设置的时区一致,如下图示。 7. 至此,您已完成CentOS中更改时区。 更改Windows弹性云主机的时区 1. 使用您的凭据登录到您的Windows弹性云主机,本次以Windows Server 2016为例。 2. 点击Windows开始菜单,选择“控制面板”。 3. 在控制面板中,选择“日期和时间”或“时钟和区域”(具体名称可能会略有不同)。 4. 在日期和时间设置页面,点击“更改时区”按钮。 5. 在时区设置对话框中,选择适合您所在地区的时区。您可以通过从下拉列表中选择时区,或者在搜索框中键入相关的地区名称进行搜索。 6. 在选择了适当的时区后,点击“确定”按钮以保存更改。 7. 打开系统的日期和时间显示,或者运行命令提示符(CMD)并输入"date"命令,确保显示的时间与您所设置的时区一致。 8. 至此,您已在Windows弹性云主机上成功更改时区。
        来自:
        帮助文档
        弹性云主机 ECS
        用户指南
        云主机实例
        管理实例属性
        更改实例时区
      • 视频拼接
        视频拼接功能介绍 。 综述 视频拼接是将多个视频文件合并成一个单一的视频文件的过程。它可以用于将多个短视频片段拼接成一个完整的视频,或者将不同来源的视频文件合并为一个连续的视频。常见的场景是用户需要在主视频的前后增加固定的片头、片尾,以宣告版权或增强宣传效应。更复杂的场景主要是将多个视频片段按照一定的逻辑关系组合成为一个新的视频,片段直接会增加各种过渡或特效,以提升视频的观赏性和连续性。此类场景往往需要专业的视频剪辑软件才能完成。 云点播目前提供了基础的拼接服务,在不使用复杂剪辑软件的前提下,通过编码技术实现主文件和固定片头、片尾的合并,实现培训类视频、短视频的快速生产。视频拼接通常涉及以下步骤: 1. 准备要拼接的主视频文件,这些文件需要在云点播支持的媒体类型范围内。 2. 准备固定的片头、片尾视频。 3. 将片头、主视频、片尾按照一定的顺序组装好,并配置完成最终输出文件的规格(视频格式、分辨率等),即可开始启动拼接任务。 注意 1. 由于视频拼接的过程其本质也是转码的过程,目前几乎所有的视频转码都是有损转码。因此实际输出的文件相比较与原始文件,在画质上可能会存在一定的损失。为保证最终画面在可以接受的损失范围内,原始视频(包括主视频、片头、片尾)应尽量保持视频码率足够大,画面足够清晰。 2. 云点播提供的拼接功能只能按照指定顺序对视频进行编排组装,在两个视频画面拼接处可能会存在一定的画面跳跃或音频突进。如需要精细的过渡效果,需要使用专用剪辑工具增加过渡效果。为了尽量实现良好的拼接效果,建议片头、片尾视频提前做好画面过渡效果,并在片段衔接前后尽量保持音轨平静,不要有噪音或者跳跃声响。 3. 如果片头、片尾和主视频在视频分辨率、帧率等视频规格上可能存在差异,在实际拼接过程中只能按照一个固定分辨率、帧率进行转换,因此可能存在某些画面的失真扭曲、频闪等。为了保证拼接后的效果,建议准备多种分辨率规格的片头片尾,在不同主视频拼接时选用合适的素材。
        来自:
        帮助文档
        云点播
        用户指南
        点播模式
        视频拼接
      • 分享文件
        本节主要介绍怎么通过控制台分享文件。 操作场景 您可以使用对象分享功能,通过对象的临时URL将存放在OBS中的对象分享给所有用户。 背景知识 文件分享强调临时性,所有分享的URL都是临时URL,存在有效期。 临时URL是由文件的访问域名和临时鉴权信息组成。 临时鉴权信息主要包含 AccessKeyId 、 Expires 、xobssecuritytoken 和Signature 四个参数。其中 AccessKeyId 、xobssecuritytoken 和Signature 用于鉴权,Expires定义鉴权的有效期。 当在OBS控制台上单击了对象后的“分享”之后,OBS就会以默认5分钟的有效期获取临时鉴权信息,并生成分享链接,此时链接就已经生效并且开始计算时间了。每调整一次URL有效期,OBS就会重新获取一次鉴权信息以生成新的分享链接,新链接的有效期从调整的时候开始计算。 约束与限制 通过OBS控制台分享的文件,有效期的范围为1分钟到18小时。如果想要设置更长的有效期,建议使用客户端工具OBS Browser+,OBS Browser+支持1分钟到30天的有效期。如果想要设置永久的权限,请通过桶策略或对象策略实现。 仅桶版本号为3.0的桶支持文件分享功能。桶版本号可以在桶概览页的“基本信息”中查看。 加密对象不能分享。 归档存储对象需恢复后才能分享。 操作步骤 步骤 1 在桶列表单击待操作的桶,进入“对象”页面。 步骤 2 选中待分享的文件,并单击右侧的“分享”。 此时,链接信息中的链接就已经生效并开始计时,有效期为默认的5分钟。修改URL有效期,链接会相应变化,新链接的有效期从修改时开始计算。 步骤 3 URL相关操作。 单击“打开URL”,将在新页面打开文件进行预览或者直接下载文件到本地。 单击“复制链接”,您可以将该链接分享给所有用户,用户可以在浏览器中通过此链接直接访问文件。 单击“复制路径”,您可将该路径分享给所有拥有对象所在桶权限的用户,用户可以在对应桶中的文件搜索框中输入该路径搜索并访问文件。 说明 在“URL有效期”内,任何用户都可以访问该文件。
        来自:
        帮助文档
        对象存储 OBS
        用户指南
        管理对象
        分享文件
      • 集群内请求会话保持
        本文为您介绍如何Serverless集群内请求会话保持。 背景信息 会话保持,有时也称为“粘性会话”(Sticky Sessions)。启用会话保持后,负载均衡会将来自同一客户端的访问请求持续分发到同一台后端云服务器上进行处理。简单来说,如果用户需要登录,就可以理解为会话;如果不需要登录,就可以理解为连接。 实际上,会话保持机制与负载均衡的基本功能是完全矛盾的。负载均衡的目标是将来自客户端的连接和请求均衡地转发至后端的多台服务器,以避免单台服务器负载过高;而会话保持机制则要求将某些请求转发至同一台服务器进行处理。因此,在实际的部署环境中,需要根据应用环境的特点选择适当的会话保持机制。 前提条件 确保您已经创建Serverless集群,具体操作请参阅创建Serverless集群。 确保kubectl工具已经连接目标集群。 确保您的Serverless集群群已安装CoreDNS插件。 操作步骤 不启用会话保持 步骤一:创建工作负载 创建一个nginx工作负载,并确保工作负载的实例个数大于1,部署2个副本,工作负载不需要其他的额外特殊配置。 1. 登录容器服务控制台,在左侧菜单栏选择“集群”。 2. 在集群列表页面,选择目标集群名称,然后在左侧菜单栏选择“工作负载”下的“无状态”,点击“创建deployment”。 也可以使用yaml创建工作负载,创建nginx工作负载参考如下: apiVersion: apps/v1 kind: Deployment metadata: name: nginxdeployment namespace: default spec: replicas: 2 selector: matchLabels: app: nginx template: metadata: labels: app: nginx spec: containers: image: registryhuadong1.crsinternal.ctyun.cn/opensource/nginx:1.25alpine imagePullPolicy: Always name: nginx ports: containerPort: 80 protocol: TCP 步骤二:创建service服务 为nginx工作负载创建service,注意Session Affinity不需要设置,保持默认值即可。参考如下: apiVersion: v1 kind: Service metadata: name: nginxservice namespace: default spec: ports: port: 30003 protocol: TCP targetPort: 80 selector: app: nginx type: ClusterIP 步骤三:使用service域名访问前端应用实现负载均衡 进入任意pod容器内部,发起服务调用,使用service域名访问后端应用,在pod容器内部执行这个命令100次。 $for i in $(seq 1 100); do curl nginxservice.default:30003; done; 观察工作负载日志,查看Pod实例的日志输出。 可以看到服务请求会随机的转发到任一个Pod实例,实现了负载均衡。
        来自:
        帮助文档
        云容器引擎 Serverless版
        最佳实践
        集群内请求会话保持
      • 将DLI数据导出至OBS
        本章节主要介绍将DLI数据导出至OBS。 支持将数据从DLI表中导出到OBS服务中,导出操作将在OBS服务新建文件夹,或覆盖已有文件夹中的内容。 注意 支持导出json格式的文件,且文本格式仅支持UTF8。 只支持将DLI表(表类型为“Managed”)中的数据导出到OBS桶中,且导出的路径必须指定到文件夹级别。 支持跨帐号导出数据,即,如果B账户对A账户授权后,A账户拥有B账户OBS桶的元数据信息和权限信息的读取权限,以及路径的读写权限,则A账户可将数据导出至B账户的OBS路径中。 导出数据步骤 1.导出数据的入口有两个,分别在“数据管理”和“SQL编辑器”页面。 在“数据管理”页面导入数据。 a. 在管理控制台左侧,单击“数据管理”>“库表管理”。 b. 单击需导出数据的表对应的数据库,进入该数据的“表管理”页面。 c. 在对应表(DLI表)的“操作”栏中选择“更多”中的“导出”,弹出“导出数据”页面。 在“SQL编辑器”页面导出数据。 a. 在管理控制台左侧,单击“SQL编辑器”。 b. 在左侧导航栏选择“数据库”页签,鼠标左键单击需要导出数据的表对应的数据库名,进入“表”区域。 c. 鼠标左键单击需要导出数据的表(Managed表,即DLI表)右侧的,在列表菜单中选择“导出”,选择弹出“导出数据”页面。 2.在“导出数据”对话框,参考下表填写导出数据相关信息。 参数名称 描述 数据库 当前表所在的数据库。 表名称 当前表名称。 数据格式 导出数据的文件格式。当前只支持json格式。 队列 选择队列。 压缩格式 导出数据的压缩方式,选择如下压缩方式。 none bzip2 deflate gzip 存储路径 输入或选择OBS路径。 导出路径必须为OBS桶中不存在的文件夹,即用户需在OBS目标路径后创建一个新文件夹。 文件夹名称不能包含下列特殊字符: / : ? " l,并且不能以“.”开头和结尾。 导出方式 导出数据的保存方式。 随导出创建指定路径:指定的导出目录必须不存在,如果指定目录已经存在,系统将返回错误信息,无法执行导出操作。 覆盖指定路径:在指定目录下新建文件,会删除已有文件。 表头:无/有 设置导出数据是否含表头。 3.单击“确定”即可导出数据。 4.(可选)您可以在“作业管理”>“SQL作业”页面查看导出作业的“状态”、“执行语句”等信息。 a.在“作业类型”中选择“EXPORT”,输入导出数据的时间段,即可查询出对应条件下的作业列表。 b.单击导出作业名称前的可查看导出作业。
        来自:
        帮助文档
        数据湖探索
        用户指南
        数据管理
        库表管理
        将DLI数据导出至OBS
      • 概述
        数据安全专区数据脱敏能力具有广泛的数据库支持、出色的性能和良好的可扩展性。它采用独特的脱敏与水印/溯源算法,能够高效处理敏感数据,实现去标识化和匿名化。多种处理方式如固定值替换、置空、乱序、保留统计特征等确保了在不改变现有业务逻辑的前提下,脱敏后的数据仍能保留原有业务逻辑特征。 数据安全专区支持软硬件一体机或虚拟化部署(保证与生产环境和开发 第三方测试环境前后路由可达即可)。生产库中的原始数据,经过数据脱敏清洗后离线分发至测试环境,所有敏感数据全部在内存中处理,可保证整个环节敏感数据不落地。 主要功能 敏感数据自动发现 数据脱敏系统内置多种发现规则,支持基于数据内容的识别,不仅依赖于用户的元数据管理系统、字段名或字段注释等信息。支持用户基于自身需求自定义规则,实现对敏感数据的自动发现和标识。 同时数据脱敏系统可和数据分级分类平台进行对接,可基于行业或法律法规对敏感数据进行分类分级与梳理,便于用户按照不同级别进行脱敏算法的配置,有效避免数据的过度保护。 支持采用随机采样的方式,在采样的过程中过滤空值及脏数据。如在业务初期数据逻辑定义不规范往往会产生较多脏数据,而传统的敏感数据检索方式通常是简单过滤表中前若干条数据,无法有效避免此类脏数据的干扰。数据脱敏系统的随机采样是基于表总行数进行随机抽取,可有效避免脏数据的干扰,提高敏感数据识别的准确性。数据发现算法除常规的正则表达式、字典等,还加入了NLP算法,开箱即用70多种通用敏感字段识别算法,大幅提升了对敏感数据内容的识别和处理能力。有效避免敏感数据的误报、漏报。
        来自:
        帮助文档
        数据安全专区
        用户指南
        数据脱敏操作指导
        概述
      • 数据同步服务
        概述 天翼云数据迁移功能,目前支持[共享模式] 与[独立模式],其中独立模式内部使用的是:数据同步服务进行支撑; 相比于[共享模式],数据同步服务会单独新开云主机运行迁移任务,不占据业务实例资源,适用于高OPS下的数据同步场景。 计费模式 目前数据同步服务供包周期(包年/包月)、按需两种计费模式供您灵活选择,使用越久越便宜。 实例规格 规格 VCPU(核) 内存(GB) 最大带宽(GBbps) 基准带宽(GBbps) migration.large.2 2 4 4 0.8 migration.xlarge.2 4 8 8 1.6 migration.2xlarge.2 8 16 15 3 migration.4xlarge.2 16 32 20 6 功能说明 1. 订购 该产品总共有两个订购途径,分别是: 数据迁移>数据同步服务>创建同步服务 数据迁移>数据迁移任务>创建任务>选择独立模式>创建服务 2. 退订 仅数据同步服务处于空闲状态时才支持退订(如退订前数据迁移任务仍然在运行中,请先停止任务,再进行退订操作),操作途径: 数据迁移>数据同步服务>退订 3. 发起在线迁移 登录 ++Redis管理控制台++ 在管理控制台左上角选择实例所在的区域 进入数据迁移>数据迁移任务页面 点击创建任务,任务模式选择:独立模式,选择数据同步服务 填写源库和目标库的实例信息 点击创建任务,创建后后台自动进行数据迁移操作
        来自:
        帮助文档
        分布式缓存服务Redis版
        数据迁移指南
        数据同步服务
      • 计费模式
        本章节主要介绍数据治理中心DataArts Studio的计费方式。 计费项 计费项目 计费子项 计费模式 计费说明 数据治理中心 DataArts Studio(基础包) 初级版、企业版 包年包月 数据治理中心基础包的计费详情,请参见数据治理中心价格详情。 在使用数据治理中心过程中,使用其他云服务的费用(如弹性公网IP/带宽、对象存储服务OBS等),需按照相应云服务的计费规则进行计费,数据治理中心基础包不包含此类费用。例如,在数据开发过程中,创建了DWS数据连接,并创建了数据库和表,DWS服务所需的费用需按照DWS服务的计费规则进行计费。 DataArts Studio增量包批量数据迁移CDM(可选) 批量数据迁移增量包 按需计费 计费详情请参见数据治理中心批量数据迁移增量包价格详情。 购买“DataArts Studio增量包批量数据迁移CDM”时,需注意如下几点: 购买“按需计费”增量包,系统会按照您所选规格自动创建一个批量数据迁移的集群/实时数据接入通道。 您可以将批量数据迁移集群关机,以降低费用成本。关机期间会产生一定的低额按需费用。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        计费说明
        计费模式
      • 配置Hive数据连接
        本章节主要介绍如何配置Hive数据连接。 本章节指导用户在创建后,将现有集群的Hive元数据切换为本地数据库或者RDS数据库中存储的元数据。该操作可以使多个MRS集群共用同一份元数据,且元数据不随集群的删除而删除。也能够避免集群迁移时Hive元数据的迁移。 说明 不同集群间Hive元数据切换时,MRS当前只对Hive组件自身的元数据数据库中的权限进行同步。这是由于当前MRS上的权限模型是在Manager上维护的,所以不同集群间的Hive元数据切换,不能自动把用户/用户组的权限同步到另一个集群的Manager上。 对于MRS 3.x之前版本,当用户选择的数据连接为“RDS服务MySQL数据库”时,请确保使用的数据库用户为root用户。如果为非root用户,请参考 管理数据连接章节配置数据连接中的 数据连接前置操作新建用户并为该用户进行赋权。 对于MRS 3.x及之后版本,当用户选择的数据连接为“RDS服务MySQL数据库”时,数据库用户不允许为root用户,请参考 管理数据连接章节配置数据连接中的 数据连接前置操作新建用户并为该用户进行赋权。 配置Hive数据连接 该功能在MRS 3.0.5版本暂不支持。 1.登录MRS控制台,在导航栏选择“集群列表 > 现有集群”。 2.单击集群名称,进入集群详情页面。 3.在集群详情页的“概览”页签,单击“数据连接”右侧的“单击管理”。 4.在“数据连接”页面显示集群已关联的数据连接,单击“编辑”或“删除”可对数据连接进行编辑或删除。 5.若“数据连接”页面没有关联连接,单击“配置数据连接”进行增加。 说明 一种模块类型只能配置一个数据连接,如在Hive元数据上配置了数据连接后,不能再配置其他的数据连接。当没有可用的模块类型时,“配置数据连接”按钮不可用。 配置Hive数据连接 参数 说明 组件名称 Hive 模块类型 Hive元数据 连接类型 RDS服务MySQL数据库 本地数据库 连接实例 当“连接类型”参数选择“RDS服务PostgreSQL数据库”或“RDS服务MySQL数据库”时有效。选择MRS集群与RDS服务数据库连接名称,该连接必须先创建才能在此处引用。可单击“创建数据连接”进行创建,具体请参考配置数据连接中的创建数据连接。 6.单击“测试”,测试此数据连接和集群的连通性。 7.连接成功后单击“确定” 完成配置数据连接。 说明 配置了Hive元数据后,请重启Hive服务,Hive会在指定的数据库下创建Hive必须的数据库表(如表已经存在则不会创建)。 重启Hive服务前,请确保已安装对应驱动包到所有MetaStore实例所在节点中。 Postgres:使用开源驱动包替换集群已有的驱动包。将postgres驱动包postgresql42.2.5.jar上传至所有MetaStore实例节点${BIGDATAHOME}/thirdlib/Hive目录下(开源驱动包下载地址: MySQL:进入MySQL官网( > Community > MySQL Connectors > Connector/J”下载对应版本的驱动包,将MySQL对应版本的驱动包上传至所有Metastore实例节点“/opt/Bigdata/FusionInsightHD /install/FusionInsightHive /hive/lib/”目录下。
        来自:
        帮助文档
        翼MapReduce
        用户指南
        配置集群
        管理数据连接
        配置Hive数据连接
      • 接入云容器引擎-应用日志
        本文主要介绍云日志服务如何接入云容器引擎文本日志。 本文将介绍如何在云日志服务控制台配置云容器引擎的日志接入与采集规则配置。 使用场景 云容器引擎业务日志采集功能是为用户提供的天翼云云容器引擎集群内的业务日志采集工具,可以将集群内的业务日志采集至云日志服务中进行统一存储。 日志采集功能需要为云容器引擎集群安装日志采集ctglogoperator插件并配置采集规则。采集插件安装后,日志采集器将会在集群内以 DaemonSet 的形式运行,并根据用户在云日志服务控制台配置的采集规则(包括采集源、日志单元和日志切割方式等),从采集源进行日志采集。 前提条件 已创建日志项目与日志单元,详情请参考创建日志项目与日志单元。 已创建天翼云云容器引擎。 应用日志接入步骤 1. 登录云日志服务控制台。 2. 左侧点击【日志接入】菜单,进入日志接入页面。选择“云容器引擎应用日志”进行容器接入配置。 3. 选择日志单元。 1. 点击“所属日志项目”后的目标框,在下拉列表中选择具体的日志项目,若没有所需的日志项目,点击“所属日志项目”目标框后的“新建”,在弹出的创建日志项目页面创建新的日志项目。 2. 点击“所属日志单元”后的目标框,在下拉列表中选择具体的日志单元,若没有所需的日志单元,点击“所属日志单元”目标框后的“新建”,在弹出的创建日志单元页面创建新的日志单元。 3. 单击“云容器引擎集群”后的目标框,在下拉列表中选择具体的集群。 4. 点击下一步。 4. 检查依赖项。 系统将自动检查以下检查项是否符合要求,若检测不通过,请根据页面指引进行修复。 1. 云容器引擎需要处于正常运行状态。 2. 云容器引擎已安装ctglogoperator插件且插件版本满足要求。 3. 存在名为“ccsegroup集群ID”的主机组。 4. 云容器引擎所在的VPC已创建云日志服务终端节点。 5. 配置采集规则。 对日志采集设置具体的采集规则。具体请参考[采集配置](
        来自:
        帮助文档
        云日志服务
        用户指南
        日志接入
        接入云容器引擎-应用日志
      • 分享文件
        操作场景 您可以使用对象分享功能,通过对象的临时URL将存放在OBS中的对象分享给所有用户。 背景知识 文件分享强调临时性,所有分享的URL都是临时URL,存在有效期。 临时URL是由文件的访问域名和临时鉴权信息组成。 临时鉴权信息主要包含 AccessKeyId 、 Expires 、xobssecuritytoken 和Signature 四个参数。其中 AccessKeyId 、xobssecuritytoken 和Signature 用于鉴权,Expires定义鉴权的有效期。 当在OBS控制台上单击了对象后的“分享”之后,OBS就会以默认5分钟的有效期获取临时鉴权信息,并生成分享链接,此时链接就已经生效并且开始计算时间了。每调整一次URL有效期,OBS就会重新获取一次鉴权信息以生成新的分享链接,新链接的有效期从调整的时候开始计算。 约束与限制 通过OBS控制台分享的文件,有效期的范围为1分钟到18小时。如果想要设置更长的有效期,建议使用客户端工具OBS Browser+,OBS Browser+支持1分钟到30天的有效期。如果想要设置永久的权限,请通过桶策略或对象策略实现。 仅桶版本号为3.0的桶支持文件分享功能。桶版本号可以在桶概览页的“基本信息”中查看。 加密对象不能分享。 归档存储对象需恢复后才能分享。 操作步骤 步骤 1 在桶列表单击待操作的桶,进入“对象”页面。 步骤 2 选中待分享的文件,并单击右侧的“分享”。 此时,链接信息中的链接就已经生效并开始计时,有效期为默认的5分钟。修改URL有效期,链接会相应变化,新链接的有效期从修改时开始计算。 步骤 3 URL相关操作。 单击“打开URL”,将在新页面打开文件进行预览或者直接下载文件到本地。 单击“复制链接”,您可以将该链接分享给所有用户,用户可以在浏览器中通过此链接直接访问文件。 单击“复制路径”,您可将该路径分享给所有拥有对象所在桶权限的用户,用户可以在对应桶中的文件搜索框中输入该路径搜索并访问文件。 说明 在“URL有效期”内,任何用户都可以访问该文件。
        来自:
        帮助文档
        对象存储 OBS
        快速入门
        分享文件
      • 全局配置
        配置创建命令 执行下面命令可以自动创建config.yaml 文件 plaintext ./ctlts configure ak sk endpoint regionid regionname ​ CLI工具内默认配置regionid为huadong1,如果在华东1地区,可简化为如下: ./ctlts configure ak sk 使用完配置创建命令后,会在配置文件路径下,生成config.yaml 文件,里面包含配置信息。regionname 参数可自定义,比如huadong1,后续使用OpenApi命令时,只需要指定配置文件的regionname即可,例如: plaintext ./ctlts project confighuadong1 或者 ./ctlts project chuadong1 CLI命令规范 命令格式:./ctlts [options] 执行: ./ctlts plaintext Usage: ctlts [command] ​ Available Commands: configure Configure Log credentials(ak,sk,endpoint,regionid) save to config.yaml dataDownload Ctyun Log Service Data Download openApi help Help about any command instance Ctyun Log Instance openApi log Ctyun Log Service OpenApi logUnit Ctyun Log LogUnit openApi project Ctyun Log projects openApi 查看日志项目project 相关OpenApi列表: ./ctlts project plaintext Usage: ctlts project [command] ​ Available Commands: checkProjectExist Check log project exist by project name and project code countProject Count the number of log projects createProject Create a new log project deleteProject Delete log project getCodeByName Get project code by project name getProject Get log project details by project code getProjectByCode Get log project information by project code getProjectDescription Get a log project's description by project code listProject List log project all or by project name pageProject Search log project by page queryProjectAliasName Query project alias names by original project names queryProjectNameByCode Query original project names by project codes renameProject Rename a log project by project code updateProject Update log project description updateProjectDescription Update a log project's description by project code ​ Flags: a, ak string accessid c, config string use config.yaml ,such as: confighuadong1 e, endpoint string endpoint h, help help for project i, regionid string regionid s, sk string accesskey 查看createProject OpenApi:./ctlts project createProject plaintext Usage: ctlts project createProject [flags] ​ Examples: ctlts log createProject projectname [description ] [ak sk endpoint regionid or config ] ​ Flags: d, description string log project description h, help help for createProject n, projectname string name of the project to create ​ Global Flags: a, ak string accessid c, config string use config.yaml ,such as: confighuadong1 e, endpoint string endpoint i, regionid string regionid s, sk string accesskey 执行createProject OpenApi: plaintext ./ctlts project createProject projectname"test" chuadong1 ​ 或者 ​ ./ctlts project createProject n"test" chuadong1
        来自:
        帮助文档
        云日志服务
        API参考
        日志服务CLI
        全局配置
      • Java SDK
        签名生成工具 示例代码如下: java import java.util.ArrayList; import java.util.Arrays; import java.util.Base64; import java.util.HashMap; import java.util.Iterator; import java.util.List; import java.util.Map; import java.util.Set; import javax.crypto.Mac; import javax.crypto.spec.SecretKeySpec; import io.netty.util.internal.StringUtil; import io.vertx.core.MultiMap; import io.vertx.core.http.HttpClientRequest; public class SignatureHelper { public static String getStringToSign(HttpClientRequest request) { String method request.method() .name(); String pathname request.path(); MultiMap headers getHeadersToLower(request.headers()); Map query buildQueryMap(request.query()); String contentMD5 headers.get("contentmd5") null ? "" : (String)headers.get("contentmd5"); String contentType headers.get("contenttype") null ? "" : (String)headers.get("contenttype"); String date headers.get("date") null ? "" : (String)headers.get("date"); String header method + "n" + contentMD5 + "n" + contentType + "n" + date + "n"; String canonicalizedHeaders getCanonicalizedHeaders(headers); String canonicalizedResource getCanonicalizedResource(pathname, query); return header + canonicalizedHeaders + canonicalizedResource; } private static Map buildQueryMap(String query) { Map map new HashMap<>(); if (!StringUtil.isNullOrEmpty(query)) { String[] params query.split("&"); Arrays.stream(params) .forEach(param > { String[] kv param.split(""); map.put(kv[0], kv[1]); }); } return map; } protected static MultiMap getHeadersToLower(MultiMap headers) { MultiMap map MultiMap.caseInsensitiveMultiMap(); Set keys headers.names(); Iterator iterator keys.iterator(); while (iterator.hasNext()) { String key iterator.next(); map.add(key.toLowerCase(), headers.get(key)); } return map; } protected static String getCanonicalizedHeaders(MultiMap headers) { String prefix "xceb"; Set keys headers.names(); List canonicalizedKeys new ArrayList(); Iterator var4 keys.iterator(); while (var4.hasNext()) { String key (String)var4.next(); if (key.startsWith(prefix)) { canonicalizedKeys.add(key); } } String[] canonicalizedKeysArray (String[])canonicalizedKeys.toArray(new String[canonicalizedKeys.size()]); Arrays.sort(canonicalizedKeysArray); StringBuilder result new StringBuilder(); for (int i 0; i query) { String[] keys (String[])query.keySet() .toArray(new String[query.size()]); if (keys.length < 0) { return pathname; } else { Arrays.sort(keys); StringBuilder result new StringBuilder(pathname); result.append("?"); for (int i 0; i < keys.length; ++i) { String key keys[i]; result.append(key); String value (String)query.get(key); if (!StringUtil.isNullOrEmpty(value) && !"".equals(value.trim())) { result.append(""); result.append(value); } result.append("&"); } return result.deleteCharAt(result.length() 1) .toString(); } } public static String getSignature(String stringToSign, String secret) throws Exception { Mac mac Mac.getInstance("HmacSHA1"); mac.init(new SecretKeySpec(secret.getBytes("UTF8"), "HmacSHA1")); byte[] signData mac.doFinal(stringToSign.getBytes("UTF8")); return Base64.getEncoder() .encodeToString(signData); } }
        来自:
        帮助文档
        事件总线
        开发参考
        Cloudevents SDK参考
        Java SDK
      • 创建数据集
        本节介绍如何创建数据集。 前置条件 1、若从开源社区导入数据集(则需确保集群节点可以公网访问开源社区,如集群节点绑定EIP或者配置公网类型NAT网关) 2、在导入私有数据集前,请确保集群已安装 cstorcsi 插件。 要求 操作说明 插件 如何安装上述插件? 在集群列表页点击进入指定集群; 在左侧导航栏中选择“插件/插件市场”,进入插件市场列表页; 搜索指定插件,点击“安装”; 操作步骤 1、进入智算套件应用管理数据集私有数据集页面,点击创建数据集按钮 2、输入数据集基本信息,包括数据集名称,描述,选择存储类型(对象存储或并行文件)及数据集类别 3、选择是否导入数据集,若不导入数据集,则创建空数据集,然后点击提交即可,后续可以在空数据基础上新增数据集版本 4、若需导入数据集,选择导入方式,这里有三种导入方式(开源社区、本地上传、自定义) 5、若选择开源社区,则依次选择社区名称,输入开源数据集名称,访问token(私有),数据集标签,默认挂载路径,版本描述和创建人,然后点击提交按钮即可
        来自:
        帮助文档
        智算套件
        用户指南
        资产管理
        数据集
        私有数据集
        创建数据集
      • 补数据监控
        本章节主要介绍运维调度的补数据监控。 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 补数据监控”,进入补数据的任务监控页面。 用户可以在补数据监控主页,查看补数据的任务状态、业务日期、并行周期数、补数据作业名称,以及停止运行中的任务。 在补数据监控主页,单击补数据名称,进入补数据监控详情页面。在此页面,用户可以查看补数据的任务执行情况,以及手动干预实例和节点的执行(如需了解更多,请参见批作业监控章节中的 补数据 )。 说明 支持计划时间,开始时间,结束时间的排序,注意三者之间,同一时间只有其中一个当前排序有效。 排序按钮点击顺序为:点击1下为升序,点击2下为降序,点击3下取消排序。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据开发
        运维调度
        补数据监控
      • 数据水印功能会不会修改源数据?
        本章为您介绍数据水印功能会不会修改源数据。 天翼云数据安全中心服务的数据水印功能不会修改源数据。 使用数据水印功能时,DSC通过调用OBS桶数据或者本地文件,将水印信息嵌入到文件后生成新的文档,该文档会下载到您指定的本地路径,所以对源数据不会有任何影响。更详细的了解,请参考数据水印章节。
        来自:
        帮助文档
        数据安全中心
        常见问题
        数据水印类
        数据水印功能会不会修改源数据?
      • 查看数据投递情况
        数据投递成功后,可以到投递目的地查看数据投递情况。 前提条件 已完成数据投递操作,具体操作请参见新增数据投递。 在数据投递的目的数据管道中查看数据投递 1. 登录管理控制台。 2. 单击页面左上方的,选择“安全 > 态势感知(专业版)”,进入态势感知(专业版)管理页面。 3. 在左侧导航栏选择“工作空间 > 空间管理”,并在工作空间列表中,单击目标工作空间名称,进入目标工作空间管理页面。 4. 在左侧导航栏选择“日志审计 > 安全数据”,进入安全分析页面。 5. 在左侧数据空间导航栏中,单击数据空间名称,展开数据管道列后,再单击管道名称,右侧将显示管道数据的检索页面。 6. 在目标管道中,查看投递的日志信息。
        来自:
        帮助文档
        态势感知(专业版)(新版)
        用户指南
        日志审计
        数据投递
        投递日志数据至其他数据管道
        查看数据投递情况
      • 配置MongoDB/DDS源端参数
        本章节主要介绍配置MongoDB/DDS源端参数。 从MongoDB、DDS迁移数据时,CDM会读取集合的首行数据作为字段列表样例,如果首行数据未包含该集合的所有字段,用户需要自己手工添加字段。 作业中源连接为配置MongoDB连接,即从本地MongoDB或DDS导出数据时,源端作业参数如下表所示。 表 MongoDB/DDS作为源端时的作业参数 参数名 说明 取值样例 数据库名称 选择待迁移的数据库。 mongodb 集合名称 相当于关系数据库的表名。单击输入框后面的按钮可进入选择集合名的界面,用户也可以直接输入集合名称。 如果选择界面没有待选择的表,请确认表是否已经创建,或者对应连接里的帐号是否有元数据查询的权限。 COLLECTION 查询筛选 创建用于匹配文档的筛选条件,CDM只迁移符合条件的数据。例如: 1. 按表达式对象筛选:例如{'lastname': 'Smith'},表示查找所有“lastname”属性值为“Smith”的文档。 2. 按参数选项筛选:例如{ x : "john" }, { z : 1 },表示查找xjohn的所有z字段。 3. 按条件筛选:例如{ "field" : {gt: 5 } },表示查找field字段中大于5的值。 4. 按时间宏筛选:例如 {"ts":{gte:ISODate("${dateformat(yyyyMMdd'T'HH:mm:ss.SSS'Z',1,HOUR)}")}},表示查找ts字段中大于 时间宏转换后的值。 {'lastname': 'Smith'}
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据集成
        管理作业
        配置作业源端参数
        配置MongoDB/DDS源端参数
      • 添加数据目录
        本节主要介绍如何使用API添加数据目录。 此操作用来添加指定服务器的数据目录至HBlock。一次可以添加多个数据目录。 说明 对于新增的数据目录,建议设置开机自动挂载,或使用已设置自动挂载的目录或子目录。 注意 每台服务器最多只能添加100个数据目录。 添加数据目录时,如果提示内存不足,您可以等此类操作全部执行完毕后,再增加系统总内存,或单独提高服务器中HBlock可使用的内存。提高服务器中HBlock可使用的内存详见批量修改服务器属性。 请求语法 plaintext POST /rest/v1/system/server/serverId/diskpaths HTTP/1.1 Date: date ContentType: application/json; charsetutf8 ContentLength: length Host: ip:port Authorization: authorization { "diskPaths": [ { "path":path, "capacityQuota": capacityvalue }, { "path":path, "capacityQuota": capacityvalue }, …… ] } 请求参数 参数 类型 描述 是否必须 serverId String 要添加的数据目录所属服务器ID。 是 diskPaths Array of diskPath 数据目录属性集合,详见“表1 请求参数diskPath说明”。 是 表1 请求参数diskPath说明 参数 类型 描述 是否必须 path String 指定添加的数据目录。数据目录用于存储数据,建议不要与操作系统共用磁盘或文件系统。 取值:只能包含字母、数字、汉字和特殊字符(~ ! @ $ ( ) + ; . :)。 是 capacityQuota Long 指定数据目录的容量配额,即针对加入到服务器中的每个数据目录,HBlock可写入的数据总量。当HBlock的使用空间一旦达到配额,就立刻阻止数据写入,不允许再使用超出配额的空间。 取值:小于数据目录所在磁盘的总容量,单位是bytes。负整数表示无限制写入,0表示禁止写入。默认不限制写入。 注意 如果相同的数据目录出现多次,以第一次出现的数据目录的容量配额为准。 否
        来自:
        帮助文档
        存储资源盘活系统
        API参考
        服务器管理
        添加数据目录
      • 购买类
        本文主要介绍数据智能中台的购买类问题。 天翼云都有哪些资源池可以订购数据智能中台产品? 当前只支持在华东1资源池订购,全网可访问。 数据智能中台的哪些销售品可以独立购买? 数据中台、高质量数据集平台和AI中台。 数据智能助理可以怎么购买? 购买数据智能助理之前,首先需要先购买数据中台。
        来自:
        帮助文档
        数据智能中台
        常见问题
        购买类
      • 方案概述
        本章节主要介绍通过数据地图查看数据血缘关系的方案概述。 什么是数据血缘 大数据时代,数据爆发性增长,海量的、各种类型的数据在快速产生。这些庞大复杂的数据信息,通过联姻融合、转换变换、流转流通,又生成新的数据,汇聚成数据的海洋。 数据的产生、加工融合、流转流通,到最终消亡,数据之间自然会形成一种关系。我们借鉴人类社会中类似的一种关系来表达数据之间的这种关系,称之为数据的血缘关系。与人类社会中的血缘关系不同,数据的血缘关系还包含了一些特有的特征: 归属性 :一般来说,特定的数据归属特定的组织或者个人,数据具有归属性。 多源性 :同一个数据可以有多个来源(多个父亲)。一个数据可以是多个数据经过加工而生成的,而且这种加工过程可以是多个。 可追溯性 :数据的血缘关系,体现了数据的生命周期,体现了数据从产生到消亡的整个过程,具备可追溯性。 层次性 :数据的血缘关系是有层次的。对数据的分类、归纳、总结等对数据进行的描述信息又形成了新的数据,不同程度的描述信息形成了数据的层次。 详见下图:数据血缘关系示例 DataArts Studio数据血缘实现方案 数据血缘的产生: 在DataArtsStudio平台,自动分析血缘是通过在数据开发模块中配置数据处理迁移类型的节点产生的,当前支持采集节点静态配置产生的血缘和部分节点实例上的血缘。详情请参见 配置数据血缘章节中的 自动分析血缘。 另外,DataArtsStudio平台还支持手动配置血缘方式,当用户手动配置血缘时,自动分析血缘将不生效。详情请参见 配置数据血缘章节中的 手动配置血缘。 数据血缘的展示: 当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据目录
        使用教程
        通过数据地图查看数据血缘关系
        方案概述
      • 方案概述
        本章节主要介绍节点数据血缘的方案概述。 什么是数据血缘 大数据时代,数据爆发性增长,海量的、各种类型的数据在快速产生。这些庞大复杂的数据信息,通过联姻融合、转换变换、流转流通,又生成新的数据,汇聚成数据的海洋。 数据的产生、加工融合、流转流通,到最终消亡,数据之间自然会形成一种关系。我们借鉴人类社会中类似的一种关系来表达数据之间的这种关系,称之为数据的血缘关系。与人类社会中的血缘关系不同,数据的血缘关系还包含了一些特有的特征: 归属性 :一般来说,特定的数据归属特定的组织或者个人,数据具有归属性。 多源性 :同一个数据可以有多个来源(多个父亲)。一个数据可以是多个数据经过加工而生成的,而且这种加工过程可以是多个。 可追溯性 :数据的血缘关系,体现了数据的生命周期,体现了数据从产生到消亡的整个过程,具备可追溯性。 层次性:数据的血缘关系是有层次的。对数据的分类、归纳、总结等对数据进行的描述信息又形成了新的数据,不同程度的描述信息形成了数据的层次。 详见下图:数据血缘关系示例 DataArts Studio数据血缘实现方案 数据血缘的产生: 在DataArts Studio平台,自动分析血缘是通过在数据开发模块中配置数据处理迁移类型的节点产生的,当前支持采集节点静态配置产生的血缘和部分节点实例上的血缘。详情请参见 配置数据血缘章节中的 自动分析血缘。 另外,DataArts Studio平台还支持手动配置血缘方式,当用户手动配置血缘时,自动分析血缘将不生效。详情请参见 配置数据血缘章节中的 手动配置血缘。 数据血缘的展示: 当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据开发
        节点参考
        节点数据血缘
        方案概述
      • 模型压缩
        模型压缩旨在帮助客户在尽量不减少模型效果的前提下压缩模型大小,进而提升模型在推理调用时的性能。 前置条件 资源准备:本功能仅支持910b硬件。 模型准备:您需要先对支持评估的模型完成模型精调后,再在评估页面创建评估任务。 创建模型压缩任务 1. 您可通过以下方式使用: 入口1:进入“模型工具”>“模型压缩”菜单,进入评估任务列表,点击【创建压缩任务】,进入创建页面; 入口2:进入“智算资产”>“我的模型”菜单,在我的模型菜单页面中,找到支持压缩的模型,点击【压缩】按钮,进入到创建页面。 2. 进入创建压缩任务页面后,填写相关配置: 类型 字段 说明 基本信息 任务名称 压缩任务名称,不超过20个字符 基本信息 任务描述 该任务的描述,300个字符以内 模型配置 选择源模型 此处支持选择用户希望压缩的模型,目前仅支持Llama38BInstruct基座模型精调出的模型 模型配置 模型创建方式 选择压缩后模型的保存方式,支持保存为已有模型新版本(默认为最新版本)或保存为新模型(默认V1版本) 模型配置 选择已有模型/新模型名称 选择已有模型:同一模型各版本的基础模型需保持一致,已自动过滤不符合要求的模型; 新模型名称:保存为新模型的名称 压缩策略配置 压缩方法 选择压缩方法,支持W8A16: W8A16:WxAxCx中W、A、C分别代表模型权重(weight)、激活(activation)和键值缓存(kv cache),数字x代表模型压缩后相应部分的比特数。模型压缩过程后,高比特浮点数会映射到低比特量化空间,从而达到降低显存占用、提升推理性能等目的。 模型的推理性能收益均需要通过实际测试获得,表中策略类型仅做参考。W8A16的权重使用8位整数量化,但是激活值仍然保留较高的精度,通常是使用16位浮点数(FP16)或者混合精度(MixedPrecision)。这种方式相比于W8A8,可能会提供更好的模型准确性,但是代价是在激活值上保留了更高的精度,因此可能不会像 W8A8那样大幅度减少内存使用。 输出配置 模型输出路径 指压缩产物的输出路径,模型压缩过程中的输出物将写入该目录下。为保证多任务输出结果不覆盖,压缩任务实时输出将保存至/compress任务id/的目录名下。 选择对应的目标存储对象,并填写已被授权的目录路径,您可根据提示示例进行填写,平台会对您填写路径的存在性进行校验,若校验不通过会进行提示,并禁止提交。 资源配置 集群 选择适合的集群 资源配置 资源配额 选择可用资源配额 资源配置 资源规格 选择资源规格类型,不同的算力规格对应不同的价格 3. 点击提交,创建压缩任务。
        来自:
        帮助文档
        训推服务
        用户指南
        模型工具
        模型压缩
      • 数据架构概述
        本章节主要介绍数据架构概述。 数据架构简介 DataArts Studio数据架构以关系建模、维度建模理论支撑,实现规范化、可视化、标准化数据模型开发,定位于数据治理流程设计落地阶段,输出成果用于指导开发人员实践落地数据治理方法论。 数据架构作为数据治理的一个核心模块,承担数据治理过程中的数据加工并业务化的功能。数据架构主要包括数据调研、标准设计、模型设计和指标设计四个部分。数据架构支持DLI、POSTGRESQL、DWS、MRSHive数据连接类型。 DataArts Studio数据架构致力于: 构建统一的数据分类体系,用于目录化管理所有业务数据,便于数据的归类、查找、评价和使用。 构建统一的数据标准体系,基于国家或行业标准,用于标准化每一行数据,每一个字段的具体取值,提升数据质量和易用性。 构建统一的数据模型体系,通过规范定义和数据建模,自顶向下构建企业数据分层体系,沉淀企业数据公共层和主题库,便于数据的流通、共享、创造、创新,提升数据使用效率,极大的减少数据冗余、混乱、隔离、不一致以及谬误等。 模型设计方法概述 根据业务需求抽取信息的主要特征,模拟和抽象出一个能够反映业务信息(对象)之间关联关系的模型,即数据模型。数据模型也是可视化的展现企业内部信息如何组织的蓝图。数据模型应满足三方面要求:能比较真实地模拟业务(场景);容易为人所理解;便于在IT系统中实现。 在DataArts Studio数据架构的数据建模过程中,用到的建模方法主要有以下两种:
        来自:
        帮助文档
        数据治理中心 DataArts Studio
        用户指南
        数据架构
        数据架构概述
      • 创建数据订阅任务
        本文为您介绍创建数据订阅任务的操作场景、前提条件和操作步骤。 操作场景 场景一:数据实时分析 使用云监控数据订阅功能,将业务进行异步解耦,在不影响源库业务的情况下,实时同步监控数据(指标、事件)或告警数据到客户自有分析系统中,帮助企业用户进行实时数据分析。 场景二:数据归档存储 使用云监控数据订阅功能,您可将资源监控或告警数据的增量更新数据,实时地推送到归档数据库或数据仓库。 说明 数据订阅功能当前为受限开放,如有需求可以联系客户经理为您开放此功能。 资源池下单个用户最多可创建10个数据订阅任务。 前提条件 注册天翼云账号,并完成实名认证。具体操作,请参见天翼云账号注册流程。 注意 数据订阅功能数据类型支持指标数据、事件数据,订阅方式支持分布式消息服务及API方式。 指标数据订阅支持分布式消息服务(kafka)及remotewriteapi方式。 事件数据订阅支持分布式消息服务(kafka)及apipush方式。(事件订阅入口为:云监控服务>事件监控>事件订阅) 创建订阅任务需提前创建订阅渠道。 操作步骤 1. 登录控制中心。 2. 在控制中心页面左上角点击,选择区域,本文我们选择华东1。 3. 依次选择“管理与部署”,单击“云监控”,进入监控概览页面。 4. 单击左侧“数据订阅”菜单,进入数据订阅任务列表。 5. 单击“创建订阅任务”功能,进入数据订阅任务创建二级页面。 6. 创建订阅任务参数配置如下: 模块 参数 参数说明 配置示例 备注 选择订阅对象 服务维度 选择需要订阅数据的服务维度信息,支持多选 云主机云主机 选择订阅对象 监控对象类型 具体实例 选择订阅对象 选择对象 选择资源实例对象 具体实例 定义订阅方式 订阅通道 选择公网/内网 分布式消息服务 定义订阅方式 发送渠道 Kafka Kafka 定义订阅方式 订阅失败缓存时间 输入用户客户端地址 基础信息 订阅任务名称 填写自定义订阅任务名称 testtask 基础信息 描述 填写订阅任务描述信息 说明 关于告警数据订阅全部资源的场景,涉及两个周期: 订阅服务subscription同步订阅配置的周期,预计上线配置2分钟。 数据订阅配置全部资源,也需要周期同步全量的实例资源,预计线上配置3分钟。 因此,考虑极限情况,告警订阅服务在周期1 + 周期2之后产生的告警,订阅服务才能匹配消费到。
        来自:
        帮助文档
        云监控服务
        用户指南
        数据订阅
        创建数据订阅任务
      • 基本概念
        本文主要介绍云日志服务中数据加工的基本概念。 基本概念 ETL ETL是指将对业务系统的数据进行抽取、清洗、转换、加载的过程,从而整合零散、不标准、不统一的数据。云日志服务支持加载源日志单元数据,将数据转换后输出到目标日志单元。 事件、数据、日志 在数据加工功能中,事件、数据都表示日志,例如事件时间就是日志时间,字段操作指令fields就是用于保留或丢弃特定日志字段的指令。 日志时间 日志时间指事件所发生的时间,也称事件时间。在云日志服务中的保留字段为ts,一般由日志中的时间信息直接提取生成。数据类型为datetime。 日志标签 日志存在标记,区别于其他字段,在数据加工中,标签字段以tag:作为前缀。包括: 用户自定义标签:用户通过API PutLogs写入数据时添加的标签。 系统标签:云日志服务为用户添加的标签,包括tagfileName和taghostIp等。 配置相关概念 源日志单元 数据加工中,从中读取数据再进行加工的日志单元是源日志单元。 一个加工任务仅支持一个源日志单元,但可以对一个源日志单元配置多个加工任务。 目标日志单元 数据加工中,数据写入的日志单元是目标日志单元。 一个加工任务可以配置多个目标日志单元,可以是静态配置,也可以是动态配置。具体配置方法,请参见多目标日志单元数据分发。 SPL SPL(Semistructured Processing Language)是云日志服务数据加工使用的一种类Linux Shell的脚本语言。SPL提供内置8个基本指令和一百多个类SQL函数,简化了常见的数据加工模式。
        来自:
        帮助文档
        云日志服务
        用户指南
        数据加工
        基本概念
      • 观测与监控数据加工任务
        本文介绍数据加工任务运行的指标详情。 操作入口 1. 登录云日志服务控制台。 2. 点击左侧菜单栏数据加工。 3. 点击目标数据加工任务名称,进入加工任务详情页面。 总览指标 加工速率:默认时间周期为1小时,统计窗口为1分钟,速率为数据条目数/秒。 read:从源日志单元中读到的数据条数。 delivered:成功写入到目标日志单元的数据条数。 dropped:在加工过程中丢弃的日志数据条数。 failed:从源日志单元中读取,在加工过程中发生失败的数据条数。 读取日志数统计:从源日志单元读取到的数据条数总计,默认时间周期为1小时。 写出日志数统计:成功写入到所有目标日志单元的数据条数总计,默认时间周期为1小时。 失败日志数统计:从源日志单元中读取、并在加工过程中发生失败的数据条数总计,默认时间周期为1小时。 写出日志数占比:成功投递到目标日志单元的数据条数占源日志单元读取到数据条数的比例,默认时间周期为1小时。
        来自:
        帮助文档
        云日志服务
        用户指南
        数据加工
        观测与监控数据加工任务
      • 规格说明
        本页为您介绍数据传输服务DTS的产品规格。 数据传输服务DTS产品规格说明 数据传输服务DTS提供如下可用的产品规格: 任务类型 分类 适用场景 参考性能 数据迁移 小规格 小规格实例,一般仅用于个人学习或者非生产环境下的产品体验和功能验证 1000RPS 数据迁移 中规格 小型企业及个人在线业务的去O迁移或上云 3000RPS 数据迁移 大规格 中小型企业及个人在线业务的去O迁移或上云 5000RPS 数据迁移 超大规格 大型型企业在线业务的去O迁移或上云 7000RPS 数据迁移 极大规格 超大型企业在线业务的去O迁移或上云 12000RPS 数据同步 小规格 小规格实例,一般仅用于个人学习或者非生产环境下的产品体验和功能验证 1000RPS 数据同步 中规格 小型企业及个人在线业务的数据复制与灾备 3000RPS 数据同步 大规格 中小型企业在线业务的数据复制与灾备 5000RPS 数据同步 超大规格 大型企业核心业务的本地同城灾备或异地灾备环境搭建 7000RPS 数据同步 极大规格 超大型企业核心业务的本地同城灾备或异地灾备环境搭 12000RPS 数据同步 特大规格 特大型企业核心业务的本地同城灾备或异地灾备环境搭建 30000RPS 说明 如需进行MySQL实例间双向同步、PostgreSQL实例间双向同步,请务必在订购时选择订购数据同步大规格及以上规格。您可以在订购时选择同步拓扑双向同步,此时系统将自动为您限制仅能选择数据同步大规格及以上规格;如订购时未选择双向同步,那么仅当您订购的数据同步实例是大规格及以上规格时,还可以在在实例配置配置迁移对象及高级配置环节选择双向同步。 订购MySQL>MySQL、PostgreSQL>PostgreSQL数据同步实例小规格,将不支持启动任务后修改同步对象,如需动态修改同步对象请选择订购中规格及以上规格。 当用户订购DDS/MongoDBDDS/MongoDB迁移链路、数据架构类型为分片,分片数>5时,可订购极大规格。 当用户订购DDS/MongoDBDDS/MongoDB同步链路、数据架构类型为分片,分片数>5时,可订购极大规格;分片数>9时,可订购特大规格。 各规格的线上运行性能受网络环境、源实例和目标实例的性能、延迟等因素影响,实际的性能数字会有差异。
        来自:
        帮助文档
        数据传输服务DTS
        产品概述
        规格说明
      • 功能特性
        本文主要介绍可信数据空间的功能特性。 企业级数据要素开放门户 开放门户是集中展示和共享数据要素,为数据的提供者和使用者可以相互发现、合作与交流,促进数据的流通与共享,是中国电信企业级数据要素平台对外服务的统一入口。 数据要素管理与交易体系 数据要素管理和交易体系主要包含数据开放共享门户、数据要素管理、交易管理能力、用户中心、商机管理、资产目录,支撑数据要素管理、交易。 可信流通计算与共享体系 可信流通计算与共享体系,主要包含可信流通任务编排与管理、可信数据流通计算、可控多模式数据共享、以及支撑数据流通的互联互通的高性能异构计算底座,支撑数据管理。 运营与管理支撑体系 运营与管理支撑体系,主要包含开放运营、安全管控、合规监管三个主要能力,支撑数据要素运营、数据生态运营、流通过程安全、合规等运营与管理工作。企业级数据要素平台构建独立的存储隔离区,存放待流通的数据要素,以及数据流通过程存证。 开放门户是集中展示和共享数据要素,为数据的提供者和使用者可以相互发现、合作与交流,促进数据的流通与共享,是中国电信企业级数据要素平台对外服务的统一入口。 数据要素管理与交易体系 数据要素管理和交易体系主要包含数据开放共享门户、数据要素管理、交易管理能力、用户中心、商机管理、资产目录,支撑数据要素管理、交易。
        来自:
        帮助文档
        可信数据空间
        产品介绍
        功能特性
      • 创建数据密钥
        创建客户端CEK数据密钥,用来对数据库用户数据加解密。 plaintext CREACREATE COLUMN ENCRYPTION KEY columnencryptionkeyname WITH( CLIENTMASTERKEY clientmasterkeyname, ALGORITHM algorithmtype, ENCRYPTEDVALUE encryptedvalue ); 参数描述: columnencryptionkeyname:CEK数据密钥对象名,在同一命名空间中满足唯一性约束 CLIENTMASTERKEY:指定用于对当前CEK加密的CMK ALGORITHM:指定该CEK将用于何种加密算法,支持: AEADAES256CBCHMACSHA256:采用AES256 CBC模式对数据加密实现数据机密性,通过消息验证码(SHA256生成数据摘要)确保数据的完整性和身份校验。 AEADAES128CBCHMACSHA256:采用AES128 CBC模式对数据加密实现数据机密性,通过消息验证码(SHA256生成数据摘要)确保数据的完整性和身份校验。 SM4SM3:采用国密SM4 CBC模式对数据加密实现数据机密性,通过消息验证码(国密SM3生成数据摘要)确保数据的完整性和身份校验。 ENCRYPTEDVALUE(可选项):用户指定的密钥口令,如果不指定,则会自动生成密钥。密钥口令长度范围为[28, 256]个字符。28个字符派生出来的密钥安全强度满足AES128。如果采用用AES256,密钥口令的长度需要39个字符。如果不指定,则会自动生成256比特的密钥。
        来自:
        帮助文档
        分布式融合数据库HTAP
        私有云产品
        开发手册
        全密态
        创建数据密钥
      • 安装部署
        本文为您介绍对象存储数据灾备安装部署的相关操作。 概要 对象存储数据灾备主要解决对象存储相关的数据同步场景。帮助用户将海量非结构化数据同步至对象存储中,进而提高非结构化数据的检索与访问性能。既降低了运营的成本,又提高了数据的安全性。文件归档功能使得数据归档管理更加灵活方便,能够及时将本地存储符合归档条件的数据同步至对象存储中,从而释放本地存储资源;所有归档记录可以通过管理界面快速查询和恢复,十分适合有海量数据存储的场景。 对象存储数据灾备的使用场景主要有: 本地/NAS存储上的数据同步至对象存储,详情见本地到对象存储规则、文件比较与同步规则两章节; 对象存储上的数据同步至本地/NAS存储,详情见对象存储到本地规则章节; 对象存储到对象存储之间的数据同步,详情见文件比较与同步规则章节。 针对以上场景:对象存储数据灾备可以实现间隔为秒级的数据定期同步。 操作步骤 一、购买许可 持续数据保护/主机高可用/数据定时灾备/文件存储数据灾备/对象存储数据灾备/数据库双活的购买许可步骤类似。下面以持续数据保护为例,介绍购买许可步骤。 1. 登录天翼云,进入控制中心。 2. 单击管理控制台左上角的,选择区域。 3. 在服务列表选择“计算”“多活容灾服务”,进入多活容灾服务控制台。 4. 点击左侧菜单栏“资源同步”“资源同步管理”,进入资源管理模块页面。 5. 点击左侧菜单栏“对象存储数据灾备”,点击“许可”,进入许可页面。 6. 点击右上角“购买对象存储数据灾备许可”按钮,弹出购买许可弹窗。按需购买许可。 7. 填写购买数量和时长,勾选已阅读并同意相关协议后,点击“购买”按钮,完成许可支付。
        来自:
        帮助文档
        多活容灾服务
        用户指南
        资源同步管理
        对象存储数据灾备
        安装部署
      • 1
      • ...
      • 74
      • 75
      • 76
      • 77
      • 78
      • ...
      • 444
      跳转至
      推荐热词
      天翼云运维管理审计系统天翼云云服务平台云服务备份云日志服务应用运维管理云手机云电脑天翼云云hbase数据库电信云大数据saas服务电信云大数据paas服务轻量型云主机天翼云客户服务电话应用编排服务天翼云云安全解决方案云服务总线CSB天翼云服务器配置天翼云联邦学习产品天翼云云安全天翼云企业上云解决方案天翼云产品天翼云视频云存储

      天翼云最新活动

      818 天翼云云智盛典

      爆款云主机低至1.5折起,Token套餐低至9.9元/月起

      安全隔离版OpenClaw

      OpenClaw云服务器专属“龙虾“套餐低至1.5折起

      聚力AI赋能 天翼云大模型专项

      大模型特惠专区·Token Plan 轻享包低至9.9元起

      青云志云端助力计划

      一站式科研助手,海外资源安全访问平台,助力青年翼展宏图,平步青云

      企业出海解决方案

      助力您的业务扬帆出海,通达全球!

      天翼云信创专区

      “一云多芯、一云多态”,国产化软件全面适配,国产操作系统及硬件芯片支持丰富

      云上钜惠

      爆款云主机全场特惠,2核4G只要1.8折起!

      天翼云奖励推广计划

      加入成为云推官,推荐新用户注册下单得现金奖励

      产品推荐

      弹性云主机 ECS

      应用云主机 ACS

      镜像服务 IMS

      弹性伸缩服务 AS

      天翼云CTyunOS系统

      AI Store

      科研助手

      星辰MaaS智能体平台

      星辰MaaS模型服务平台

      推荐文档

      如何填写备案信息

      报账单据

      PC端需求(windows及MAC系统)

      管理员

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 息壤智算平台
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 天翼云国际站
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2026 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号