云数据库Clickhouse_云数据库Clickhouse文档介绍内容-天翼云

数据处理
数据清洗数据清洗可对原始数据进行异常清洗、文本过滤、去重以及隐私信息去除等操作,解决数据规范性、合规性、一致性及重复等问题,提升数据质量,优化模型训练效果。数据准备目前只支持对指令微调类型的标注数据集进行清洗,数据清洗前,请先到“我的数据集-标注数据集”模块下,创建“大语言-SFT-指令微调”类型的数据集。详见标注数据集新建数据清洗任务从清洗任务列表点击【新建清洗任务】到新建页面,填写任务名称、选择数据集、配置字段和算子后提交即可。

来自：
帮助文档
训推服务
用户指南
数据工具
数据处理
数据目录
本节主要介绍数据目录监控信息。在“监控”页面点击“数据目录”,可以查看对应数据目录的实时监控信息:数据目录容量、数据目录已用容量、数据目录使用率、容量配额、已用容量配额、容量配额使用率、健康状态、健康详情。说明对于单机版,可以根据健康状态,选择查看对应数据目录的信息。对于集群版,可以根据存储池名称或者健康状态,选择查看对应数据目录的信息。图1 数据目录实时监控信息(单机版)图2 数据目录实时监控信息(集群版)项目描述数据目录具体数据目录路径。数据目录容量数据目录所在磁盘的容量。

来自：
帮助文档
存储资源盘活系统
用户指南
运维
监控
数据目录
数据目录
本章节主要介绍数据目录的数据目录。通过数据目录可以对资产进行搜索、过滤、查看详情、查看血缘、查看关系、添加分类与标签等操作。资产搜索通过资产名称和描述的关键字或按所有属性搜索资产,支持模糊搜索。 1.在DataArts Studio控制台首页,选择实例,点击“进入控制台”,选择对应工作空间的“数据目录”模块,进入数据目录页面。详见下图: 选择数据目录 2.选择“数据地图 > 数据目录”。 3.在资产搜索输入框输入需要查找的数据关键字进行搜索,搜索结果以列表方式显示。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
数据地图
数据目录
数据投递概述
操作场景态势感知(专业版)支持将数据实时投递至其他管道或其他云产品中,便于您存储数据或联合其它系统消费数据。配置数据投递后,态势感知(专业版)将定时将采集到的数据投递至其他管道或对应的云产品。分类投递场景场景说明数据投递场景投递日志数据至其他数据管道投递日志数据到其他数据管道。投递日志数据至OBS桶投递日志数据到对象存储服务(Object Storage Service,OBS)。投递日志数据至LTS投递日志数据到云日志服务(Log Tank Service,LTS)。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
日志审计
数据投递
数据投递概述
数据安全
在数字化时代,数据已成为企业的重要资产。确保数据的安全性对于保护企业的商业机密、维护客户信任以及满足法规要求至关重要。天翼云提供了全面的数据安全解决方案,帮助用户保障数据的完整性、机密性和可用性。数据完整性数据完整性是指数据在存储和传输过程中保持准确和一致,未被未经授权的修改或损坏。天翼云通过以下几种技术确保数据的完整性。数据三副本技术数据三副本技术是一种在分布式存储系统中使用的数据冗余技术。它的原理是将数据分块后的三个副本保存在集群中不同的节点上,以提高数据的可靠性和容错性。

来自：
帮助文档
弹性云主机
安全合规
数据安全
查看数据血缘
本章节主要介绍通过数据地图查看数据血缘关系的查看数据血缘。当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。前提条件已完成血缘关系的自动配置或手动配置,请参见配置数据血缘。启动作业调度登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
使用教程
通过数据地图查看数据血缘关系
查看数据血缘
冷热数据分离
本节主要介绍冷热数据分离。 GeminiDB Influx在同一数据保留策略(Retention Policy,简称RP,包含数据保留时长,备份个数等信息)里实现了冷热数据分离,系统会根据RP中用户设置的冷热数据分界线自动将符合转冷条件的热数据归档到冷存储中。背景在海量大数据场景下,时序数据冷热分明,即随着时间推移历史的时序数据被查询和分析的概率越低,同时因为这些数据占用量比较大,降低这部分冷数据的存储容量将会极大的节省企业的成本。

来自：
帮助文档
云数据库GeminiDB
GeminiDB Influx接口
用户指南
冷热分离
冷热数据分离
查看数据血缘
本章节主要介绍节点数据血缘的查看数据血缘。当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。前提条件已完成血缘关系的自动配置或手动配置,请参见配置数据血缘。启动作业调度 1.登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
节点参考
节点数据血缘
查看数据血缘
数据源
本小节介绍日志审计(原生版)数据源用户指南。数据源是获取需要展示日志/告警字段条件数据,配置后可在报表中选择并通过图表的形式展示。新增数据源 1.登录日志审计(原生版)控制台。 2.在左侧导航栏选择“审计报表 > 数据源”,进入“数据源”页面。 3.单击“新增”,并填写新增数据源的相关参数。参数参数说明取值样例数据源名称自定义需要创建的数据源名称。 Test 是否抽样统计确认是否使用抽样统计,不选择默认为“是”。

来自：
帮助文档
日志审计（原生版）
用户指南
审计报表
数据源
开启数据消费
在左侧数据空间导航栏中,单击数据空间名称,展开数据管道列后,单击目标管道名称后的“更多> 数据消费”,进入数据消费页面。在数据消费页面中,单击当前状态后的,开启数据消费。开启后,将显示消费配置信息,具体说明如下表所示。参数名称参数说明当前状态当前管道中数据消费配置状态。管道名称当前数据管道的名称。订阅器系统预制的订阅模式,决定数据如何传递给消费者。访问节点当前数据的访问节点。相关操作数据消费开启后,如需关闭,则可在数据消费页面,单击“当前状态”后的,关闭数据消费。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
日志审计
安全分析
开启数据消费
查看数据类
当数据类较多时,可以通过搜索功能,选择数据类的“名称”、“业务编码”、“内置”或者“描述”,并在搜索框中输入关键词,单击,即可快速查询指定数据类。参数名称参数说明名称数据类的名称。业务编码数据类的业务编码。内置是否为系统内置数据类。创建人数据类的创建人信息。创建时间数据类的创建时间。更新时间数据类的更新时间。描述数据类的具体描述信息。操作可对数据类进行编辑、删除等操作。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
安全编排
运营对象管理
查看数据类
数据集
对于主账号在“数据准备”>“k8s共享存储中”已创建成功的k8s共享存储,数据集功能可以对其进行进一步的划分。通过数据集,用户可在k8s共享存储的基础上,为特定的数据、模型、算法代码指定特定的目录并为之命名,起到标签管理的作用。同时对于ZOS数据集,支持在英伟达物理机集群开启数据加速功能。使用前提在数据准备模块已成功创建k8s共享存储。操作说明创建数据集点击“数据准备”>“数据集”>“创建数据集”。进入“创建数据集”页面,按要求配置相关信息。

来自：
帮助文档
一体化计算加速平台·异构计算
用户指南
工作空间
数据集
分布式缓存服务Redis与原生RedisCluster有什么区别？
本文介绍分布式缓存服务Redis版与原生RedisCluster区别分布式缓存是一种兼容Redis协议的NoSQL内存数据库产品,具备高性能、高可用、可水平扩展的特性,支持分库、分表的内存管理,并提供了容灾、恢复、监控、迁移等能力,分布式缓存服务Redis实例在内核性能方面进行大量优化,包含但不限如下: 主从数据高可靠,主从数据采用半同步机制解决了原生集群因异步同步问题而产生数据丢失问题。集群高可用,节点自愈,故障自动恢复。主机宕机后从节点秒级切换自动接管业务。

来自：
帮助文档
分布式缓存服务Redis版
常见问题
功能类
分布式缓存服务Redis与原生RedisCluster有什么区别？
新增数据投递
参数名称参数说明投递类型数据投递类型,默认显示为PIPE,即默认从态势感知(专业版)管道投递。区域当前管道所在区域。工作空间当前管道所属的工作空间。数据空间当前管道所属的数据空间。管道管道的名称数据位置策略当前管道中数据位置的策略。读取身份数据源读取身份信息说明。配置数据目的,请根据投递目的进行配置。PIPE:将当前管道数据投递到本账号其他管道或其他账号的管道中,请根据您的需要进行选择配置。本账号投递:将当前管道数据投递到本账号的其他管道中,参数配置说明如下表所示。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
日志审计
数据投递
投递日志数据至其他数据管道
新增数据投递
数据与安全
本节为您介绍数据安全相关内容。了解数据在准备云迁移之前,需要确保全面了解自己的数据及其需求。这意味着迁移团队必须深入了解当前和未来的数据使用情况,并理解公司数据治理框架所制定的存储和保留策略。为了处理数据理解和优化任务,可以借助各种云管理工具,例如重复数据删除软件。这些工具可以帮助识别和处理冗余数据,提高存储效率。同时,保护云数据也是非常重要的,这需要准确了解云数据的内容以及最终的使用和处理方式。

来自：
帮助文档
云迁移服务CMS
产品简介
安全
数据与安全
数据存储
本文主要介绍云日志服务中数据存储常见问题。云日志服务中的数据可以保存多久? 云日志服务的数据支持1-365天的保存自定义设置,超过保存时间设定数据将会被丢弃。日志项目或日志单元数据在删除后是否可找回? 日志项目和日志单元的数据在执行删除操作后,会进行任务调度删除,不可找回。请您谨慎操作,并注意保管平台的账号密码防止恶意破坏。日志数据是否安全存储?

来自：
帮助文档
云日志服务
常见问题
数据存储
使用Elasticsearch搜索数据
}检索数据首先,我们进行基本的全文检索,不设置匹配条件,可以得到所有数据。

来自：
帮助文档
云搜索服务
快速入门
使用Elasticsearch搜索数据
补数据监控
本章节主要介绍运维调度的补数据监控。在数据开发模块控制台的左侧导航栏,选择“运维调度 > 补数据监控”,进入补数据的任务监控页面。用户可以在补数据监控主页,查看补数据的任务状态、业务日期、并行周期数、补数据作业名称,以及停止运行中的任务。在补数据监控主页,单击补数据名称,进入补数据监控详情页面。在此页面,用户可以查看补数据的任务执行情况,以及手动干预实例和节点的执行(如需了解更多,请参见批作业监控章节中的补数据 )。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
运维调度
补数据监控
备份元数据
本章节主要介绍备份元数据。操作场景为了确保元数据信息安全,或者用户需要对元数据功能进行重大操作(如扩容缩容、安装补丁包、升级或迁移等)前后,需要对元数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。元数据包含OMS数据、LdapServer数据、DBService数据和NameNode数据。备份Manager数据包含同时备份OMS数据和LdapServer数据。默认情况下,元数据备份由“default”任务支持。

来自：
帮助文档
翼MapReduce
用户指南
MRS Manager操作指导（适用于2.x及之前）
备份与恢复
备份元数据
上传/下载数据
选择挂载的数据集目录,并点击进入。按照下图操作指引,在JupyterLab页面上传或下载数据。网盘上传/下载数据使用方法详见网盘数据集

来自：
帮助文档
科研助手
用户指南
科研版
数据存储
数据集管理
上传/下载数据
切换组织
背景信息组织是数据管理服务中的一个基础概念。每一个天翼云主账号进入数据管理服务系统均自动创建一个组织并把该主账号作为该组织的超级管理员。此外,该主账号下的子账号进入数据管理服务会自动加入到对应主账号的同组织。主账号可添加其他账号进入组织。主账号或子账号均可以加入不同组织。每个组织下的用户和数据库实例均互相隔离,操作互不影响。查看组织信息登录数据管理服务。访问控制台首页,点击右上角的头像查看个人信息,其中包含当前所在组织信息。切换组织登录数据管理服务。

来自：
帮助文档
数据管理服务
用户指南
控制台首页
切换组织
恢复NameNode数据
须知只支持进行数据备份时的系统版本与当前系统版本一致时的数据恢复。当业务正常时需要恢复数据,建议手动备份最新管理数据后,再执行恢复数据操作。否则会丢失从备份时刻到恢复时刻之间的NameNode数据。建议一个恢复任务只恢复一个组件的元数据,避免因停止某个服务或实例影响其他组件的数据恢复。同时恢复多个组件数据,可能导致数据恢复失败。 HBase元数据不能与NameNode元数据同时恢复,会导致数据恢复失败。对系统的影响数据恢复后,会丢失从备份时刻到恢复时刻之间的数据。

来自：
帮助文档
翼MapReduce
用户指南
FusionInsight Manager操作指导（适用于3.x）
备份恢复管理
恢复数据
恢复NameNode数据
数据权限简介
本章节主要介绍数据治理中心的数据目录的数据权限简介。为确保数据使用安全可控,使用数据表需要先申请权限。数据权限模块为用户提供便捷的权限管控能力,提供可视化申请审批流程,并可以进行权限的审计和管理。提高数据安全的同时,还可以方便用户进行数据权限管控。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
数据权限
数据权限简介
数据取回费用
计费说明计费项含义计费模式低频存储-数据取回流量费用下载低频存储类型的数据时,会根据对象大小收取额外的数据取回流量费用。按需计费包年包月归档存储-数据取回流量费用解冻归档存储类型的数据时,会根据对象大小收取额外的数据取回流量费用。解冻后下载归档类型的文件不会产生数据取回流量费用,但会产生归档流出流量费用。按需计费包年包月归档存储-直读取回流量费用开启归档直读后,下载归档存储类型的数据时,会根据对象大小收取额外的归档直读取回流量费用。

来自：
帮助文档
对象存储
计费说明
计费项
数据取回费用
接入日志数据
说明操作成功后,日志数据订阅预计在十分钟内生效。接入完成后,将创建默认数据空间和管道。查看日志数据的存储位置日志数据接入完成后,请前往安全分析的安全数据表页面查看接入的日志数据:在左侧导航栏选择“日志审计 > 安全数据”,进入安全分析页面。在左侧数据空间导航栏中,单击数据空间名称,展开数据管道列后,再单击管道名称,右侧将显示管道数据的检索页面。在管道数据检索页面即可查看接入的日志数据。

来自：
帮助文档
态势感知（专业版）（新版）
用户指南
日志审计
云服务接入
接入日志数据
查看监控数据
您可以选择监控时间段,查看对应的弹性文件服务监控数据。也可以点击具体监控项图标右上角的“查看”按钮设定所需查看的监控时间段、周期等,获取想要的监控数据。方式二:通过OpenAPI获取弹性文件服务的监控指标支持通过云监控服务OpenAPI获取: 实时监控数据:查询弹性文件设备的实时监控数据。历史监控数据:查询指定时间段内的弹性文件时序指标监控数据。导出监控数据:导出指定时间段内的弹性文件时序指标监控数据,导出格式为csv文件。

来自：
帮助文档
弹性文件服务
用户指南
高级管理
监控告警
查看监控数据
使用数据订阅
选择“数据订阅”菜单,即可进入数据订阅任务列表页面。

来自：
帮助文档
云监控服务
快速入门
使用数据订阅
消费订阅数据
、事件类数据、告警类数据。

来自：
帮助文档
云监控服务
用户指南
数据订阅
消费订阅数据
配置MySQL认证授权
POST https://[endpoint].ctapi.ctyun.cn/v3/api/addAuthInfo Content-Type...数据库名

来自：
帮助文档
分布式消息服务MQTT
API参考
API
第三方认证授权
配置MySQL认证授权
更新MySQL认证授权
POST https://[endpoint].ctapi.ctyun.cn/v3/api/updateAuthInfo Content-T...数据库名 accessAccount String 是用户名 accessKey String 是

来自：
帮助文档
分布式消息服务MQTT
API参考
API
第三方认证授权
更新MySQL认证授权
查看任务详情
前提条件已登录数据库复制服务控制台。已成功创建迁移任务。操作步骤说明任务列表中,仅展示当前登录用户所创建的全部任务,同一租户下的不同用户之间的任务不可见。步骤1、在“实时迁移管理”界面,选择指定的迁移任务,单击任务名称。步骤2、在“基本信息”页签,查看当前迁移任务的详细信息。您可查看到当前迁移任务下对应的任务信息、迁移实例信息和迁移信息。

来自：
帮助文档
数据库复制
用户指南
实时迁移
任务管理
查看任务详情
访问控制
操作步骤 1、登录分布式关系型数据库控制台。 2、选择“实例管理 > 实例名称 > 基本信息页 > 网络信息”,单击打开“访问控制”的开关。 3、单击“设置”,弹出“修改访问控制”弹框,,输对应名单的IP地址,单击“确定”。

来自：
帮助文档
分布式关系型数据库
用户指南
实例管理
访问控制

天翼云最新活动

12.12年度钜惠

爆款云主机2核2G仅需28.8元/年，X实例35.1元/半年起！ 8代机+XSSD新客专享2.5折！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云AI产品特惠

人脸识别+文字识别焕新，新用户免费试用

中小企业服务商合作专区

国家云助力中小企业腾飞，高额上云补贴重磅上线

出海产品促销专区

爆款云主机低至2折，高性价比，不限新老速来抢购！

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

息壤智算

应用商城

定价

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

物理机

GPU云主机

镜像服务

弹性高性能计算

一体化计算加速平台·异构计算

应用托管

知识库问答

人脸实名认证

人脸属性识别

推荐文档

如何提现？

如何修改账号的密码？

云间高速的优势

续订

产品优势