天翼云大数据paas平台_天翼云大数据paas平台文档介绍内容-天翼云

查看元数据
本章节主要介绍查看元数据。元数据说明元数据(Metadata)是用来定义数据类型的数据。主要是描述数据自身信息,包含源、大小、格式或其它数据特征。数据库字段中,元数据用于诠释数据仓库的内容。创建表时,会定义元数据,由列名、类型、列描述三列组成。 “元数据”页面将显示目标表的列名、列类型、类型和描述。查看元数据步骤查看元数据的入口有两个,分别在“数据管理”和“SQL编辑器”页面。在“数据管理”页面查看元数据。在管理控制台左侧,单击“数据管理”>“库表管理”。

来自：
帮助文档
数据湖探索
用户指南
数据管理
库表管理
查看元数据
数据目录
本节主要介绍数据目录监控信息。在“监控”页面点击“数据目录”,可以查看对应数据目录的实时监控信息:数据目录容量、数据目录已用容量、数据目录使用率、容量配额、已用容量配额、容量配额使用率、健康状态、健康详情。说明对于单机版,可以根据健康状态,选择查看对应数据目录的信息。对于集群版,可以根据存储池名称或者健康状态,选择查看对应数据目录的信息。图1 数据目录实时监控信息(单机版)图2 数据目录实时监控信息(集群版)项目描述数据目录具体数据目录路径。数据目录容量数据目录所在磁盘的容量。

来自：
帮助文档
存储资源盘活系统
用户指南
运维
监控
数据目录
数据目录
本章节主要介绍数据目录的数据目录。通过数据目录可以对资产进行搜索、过滤、查看详情、查看血缘、查看关系、添加分类与标签等操作。资产搜索通过资产名称和描述的关键字或按所有属性搜索资产,支持模糊搜索。 1.在DataArts Studio控制台首页,选择实例,点击“进入控制台”,选择对应工作空间的“数据目录”模块,进入数据目录页面。详见下图: 选择数据目录 2.选择“数据地图 > 数据目录”。 3.在资产搜索输入框输入需要查找的数据关键字进行搜索,搜索结果以列表方式显示。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
数据地图
数据目录
数据库
数据库模块为您清晰地展示数据库表数据,支持快速查询数据和查询表结构等。使用限制当前数据库仅支持展示内置Hive数据源的元数据,其他数据源的元数据敬请期待。页面进入单击左上方的图标,选择全部产品 > 数据处理 > 即席查询 > 数据库。页面说明 1、查看数据库表字段信息您可以按库、表、字段逐级查看元数据信息。 2、查询表数据选择指定表,右键选择查询表,即可快速生成查询表数据的SQL并执行。

来自：
帮助文档
大数据管理平台 DataWings
用户指南
数据处理
即席查询
数据库
功能特性
本文介绍云容器引擎的功能特性。集群管理支持1.15/1.18版本的Kubernetes 。支持设置Master节点数量1个(基础版)或3个(高级版)。支持50个Worker节点的集群规模。支持绑定弹性IP,使用云主机、云硬盘、VPC作为集群的基础计算、存储、网络资源。支持通过不同企业项目纳管集群。支持挂载普通IO、高IO类型数据盘。支持通过前端web界面及后台kubectl操控集群。支持管理命名空间,可创建/删除命名空间。

来自：
帮助文档
云容器引擎（旧版）
产品简介
功能特性
数据源
本小节介绍日志审计数据源用户指南。数据源是获取需要展示日志/告警字段条件数据,配置后可在报表中选择并通过图表的形式展示。新增数据源 1.登录日志审计(原生版)控制台。 2.在左侧导航栏选择“审计报表 > 数据源”,进入“数据源”页面。 3.单击“新增”,并填写新增数据源的相关参数。参数参数说明取值样例数据源名称自定义需要创建的数据源名称。 Test 是否抽样统计确认是否使用抽样统计,不选择默认为“是”。

来自：
帮助文档
日志审计（原生版）
用户指南
审计报表
数据源
新建数据标准
本章节主要介绍新建数据标准。数据标准是用于描述公司层面需共同遵守的数据含义和业务规则,它描述了公司层面对某个数据的共同理解,这些理解一旦确定下来,就应作为企业层面的标准在企业内被共同遵守。数据标准,也称数据元,由一组属性规定其定义、标识、表示和允许值的数据单元,是不可再分的最小数据单元。您可以将数据标准关联到各个业务上的数据库中。其中,标识符、数据类型、表示格式、值域是数据交换的基础,它们用于描述表的字段元信息,规范字段所存储的数据信息。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据架构
标准设计
新建数据标准
零信任服务概述
在部署连接器之后,您能够实现:企业内部系统资源到零信任服务边缘节点网络连通性,从而支持客户端访问;企业数据双向传输(暂不支持官网自助,如有需要可联系我们);连接器使企业网络分布管理更灵活,尤其是解决多数据中心、混合云的企业场景。安全策略主要是指丰富的零信任安全管控策略,来提高企业安全性,目前仅开放部分安全能力自助,如有企业办公安全需求,可联系我们。终端管理终端管理主要针对用户登录的终端设备进行相关管控,包含终端相关策略。终端资产企业员工使用的资产情况,设备情况、设备策略等。

来自：
帮助文档
边缘安全加速平台
零信任服务
零信任服务概述
查看数据血缘
本章节主要介绍通过数据地图查看数据血缘关系的查看数据血缘。当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。前提条件已完成血缘关系的自动配置或手动配置,请参见配置数据血缘。启动作业调度登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
使用教程
通过数据地图查看数据血缘关系
查看数据血缘
CCE接入
如果日志中不存在年份信息,则云日志会自动补齐年份数据为当前年份数据。

来自：
帮助文档
云日志服务
用户指南
日志接入
云服务接入
CCE接入
查看数据血缘
本章节主要介绍节点数据血缘的查看数据血缘。当数据开发模块中的作业已完成血缘关系配置后,启动作业调度,并在数据目录模块进行元数据采集任务,则可以在数据目录模块可视化查看数据血缘关系。前提条件已完成血缘关系的自动配置或手动配置,请参见配置数据血缘。启动作业调度 1.登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
节点参考
节点数据血缘
查看数据血缘
数据源
本小节介绍日志审计(原生版)数据源用户指南。数据源是获取需要展示日志/告警字段条件数据,配置后可在报表中选择并通过图表的形式展示。新增数据源 1.登录日志审计(原生版)控制台。 2.在左侧导航栏选择“审计报表 > 数据源”,进入“数据源”页面。 3.单击“新增”,并填写新增数据源的相关参数。参数参数说明取值样例数据源名称自定义需要创建的数据源名称。 Test 是否抽样统计确认是否使用抽样统计,不选择默认为“是”。

来自：
帮助文档
日志审计（原生版）
用户指南
审计报表
数据源
数据集
对于主账号在“数据准备”>“k8s共享存储中”已创建成功的k8s共享存储,数据集功能可以对其进行进一步的划分。通过数据集,用户可在k8s共享存储的基础上,为特定的数据、模型、算法代码指定特定的目录并为之命名,起到标签管理的作用。同时对于ZOS数据集,支持在英伟达物理机集群开启数据加速功能。使用前提在数据准备模块已成功创建k8s共享存储。操作说明创建数据集点击“数据准备”>“数据集”>“创建数据集”。进入“创建数据集”页面,按要求配置相关信息。

来自：
帮助文档
一体化计算加速平台·异构计算
用户指南
工作空间
数据集
数据处理
本文主要介绍如何对数据清洗任务进行管理以及如何新建数据清洗任务。数据清洗任务管理通过模块功能,可以对数据清洗任务进行管理,包括查看任务详情、查看结果、删除、重新启动等操作。查看任务详情:点击任务名称,可跳转至“数据清洗任务详情”页面,点击【清洗日志】,可查看具体任务日志记录。查看数据来源/数据流向:点击两个字段下的数据集名称,即可跳转至我的数据集页面,于“标注数据集”分类下,会自动筛选出对应的数据集。

来自：
帮助文档
一站式智算服务平台
用户指南
数据工具
数据处理
维护基础数据
在模型配置过程中需要接入外部数据,可创建基础数据,供业务场景调用在模型配置过程中需要接入外部数据,可创建基础数据,供业务场景调用。基础数据支持内部手动添加、外部系统获取。约束与限制具有基础数据管理权限。操作步骤 1.进入工作区设置—基础数据配置。 2.点击“新建”,进入基础数据配置页面。 3.基础数据配置完成后,若是“手动添加”的,需要维护数据内容。 4.数据维护完成后,可通过“工作项模型配置”——布局——“高级数据类型”字段调用维护号的基础数据。

来自：
帮助文档
EasyCoding敏捷开发平台
企业管理
工作项配置
工作项模型配置
维护基础数据
读写SQL_Server数据（tds_fdw）
操作场景 RDS-PostgreSQL支持 tds_fdw插件,可以连接到使用表格数据流(TDS)协议的数据库,如Sybase数据库和Microsoft SQL Server。前提条件请确保您的实例内核大版本满足,本插件所支持的内核版本,请参考支持的版本插件列表。注意事项请确保目标数据库的网络与您的数据库实例互通。

来自：
帮助文档
关系数据库PostgreSQL版
用户指南
插件管理
读写SQL_Server数据（tds_fdw）
实现数据列的加解密
技术背景哈希函数哈希函数又称为摘要算法,对于数据data,Hash函数会生成固定长度的数据,即Hash(data)=result。这个过程是不可逆的,即Hash函数不存在反函数,无法由result得到data。在不应保存明文场景(比如口令password属于敏感信息),系统管理员用户也不应该知道用户的明文口令,就应该使用哈希算法存储口令的单向哈希值。实际使用中会加入盐值和迭代次数,避免相同口令生成相同的哈希值,以防止彩虹表攻击。

来自：
帮助文档
数据仓库服务
最佳实践
安全管理
实现数据列的加解密
数据对比类
本页为数据对比类常见问题。内容级对比有哪些不支持的数据类型? 以下数据类型的字段不会参与对比: 源数据库为MySQL:TINYBLOB、BLOB、MEDIUMBLOB、LONGBLOB、TINYTEXT、TEXT、MEDIUMTEXT、LONGTEXT; 源数据库为PostgreSQL:用户自定义的DOMAIN或者TYPE类型。内容对比会自动跳过以下特征的表: 表为空表,无数据。不具有主键、唯一字段、唯一索引。主键、唯一字段、唯一索引组成字段为多字段的复合类型。

来自：
帮助文档
数据传输服务DTS
常见问题
数据对比类
术语解释
ApacheApache是一款Web服务器软件。它可以运行在几乎所有广泛使用的计算机上,由于其跨平台和安全性被广泛使用,是最流行的Web服务器端软件之一。CC攻击CC攻击(Challenge Collapsar Attack,挑战黑洞攻击)是DDoS攻击的一种类型,使用代理服务器向受害服务器发送大量假冒合法的请求,造成被攻击服务器资源耗尽,一直到宕机崩溃。

来自：
帮助文档
云等保专区
产品介绍
术语解释
补数据监控
本章节主要介绍运维调度的补数据监控。在数据开发模块控制台的左侧导航栏,选择“运维调度 > 补数据监控”,进入补数据的任务监控页面。用户可以在补数据监控主页,查看补数据的任务状态、业务日期、并行周期数、补数据作业名称,以及停止运行中的任务。在补数据监控主页,单击补数据名称,进入补数据监控详情页面。在此页面,用户可以查看补数据的任务执行情况,以及手动干预实例和节点的执行(如需了解更多,请参见批作业监控章节中的补数据 )。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据开发
运维调度
补数据监控
创建数据密钥
创建客户端CEK数据密钥,用来对数据库用户数据加解密。

来自：
帮助文档
分布式融合数据库HTAP
私有云产品
开发手册
全密态
创建数据密钥
删除/退订存储库
删除存储库后,存储库内副本将一并删除,删除后将无法找回相关数据并进行恢复。退订存储库操作步骤点击天翼云门户首页的“控制中心”,输入登录的用户名和密码,进入控制中心页面。在管理控制台上方点击图标,选择所需的资源池节点,以下操作选择华东-华东1。在系统首页,选择“存储>云主机备份”。选择要退订的存储库,点击操作列下的“退订”。选择“退订原因”,勾选“我已确认本次退订金额和相关费用”,点击“退订”完成。退订申请提交成后,您可以在订单详情中查看退订进度。

来自：
帮助文档
云主机备份
用户指南
存储库管理
删除/退订存储库
部署HBlock
详细步骤请先完成以下准备工作:在每台服务器上准备一个或多个目录作为HBlock数据目录(每台服务器上的目录可以不同),用来存储HBlock数据,如:/mnt/storage01,/mnt/storage02。将安装包放到服务器欲安装HBlock的目录下并解压缩,进入解压缩后的文件夹。说明建议安装目录不要与数据目录共用磁盘或文件系统。

来自：
帮助文档
存储资源盘活系统
快速入门
服务器端部署
HBlock部署-集群版
部署HBlock
资源包
日志资源包是天翼云云日志服务LTS针对不同的计费项推出的优惠套餐,您购买资源包后,即可使用资源包额度抵扣云日志服务中所有的计费项,包括存储、读写与索引流量。与按需计费方式对比,资源包包年期时长越长,折扣优惠力度越大,若您每月的日志消费相对固定,建议您使用资源包来获取更多折扣优惠。

来自：
帮助文档
云日志服务
计费说明
计费模式
资源包
备份元数据
本章节主要介绍备份元数据。操作场景为了确保元数据信息安全,或者用户需要对元数据功能进行重大操作(如扩容缩容、安装补丁包、升级或迁移等)前后,需要对元数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。元数据包含OMS数据、LdapServer数据、DBService数据和NameNode数据。备份Manager数据包含同时备份OMS数据和LdapServer数据。默认情况下,元数据备份由“default”任务支持。

来自：
帮助文档
翼MapReduce
用户指南
MRS Manager操作指导（适用于2.x及之前）
备份与恢复
备份元数据
数据保护
本页介绍了关系数据库MySQL版的数据安全技术。关系数据库MySQL版通过多种数据安全手段和特性,保障存储在数据库实例中的数据安全可靠。表1 关系数据库MySQL版的数据安全手段和特性数据安全手段简要说明详细介绍传输加密(SSL) 支持SSL和非SSL传输协议,推荐您使用SSL协议来保证数据传输安全性。

来自：
帮助文档
关系数据库MySQL版
产品简介
安全
数据保护
无法建立与文档数据库服务的连接
需要将 DB_HOST、DB_PORT、DB_USER、AUTH_DB 和 CA_FILE_PATH>替换为实际的 MongoDB 数据库的主机名、端口号、用户名、认证数据库和 SSL CA 文件的路径。确认用户权限 : 确保使用的用户名和密码具有连接到文档数据库服务实例的权限。尝试使用其他客户端工具 : 如果连接失败是由于客户端工具问题,尝试使用其他客户端工具进行连接,以排除客户端工具本身的问题。

来自：
帮助文档
文档数据库服务
常见问题
操作类
数据库连接
无法建立与文档数据库服务的连接
申请数据权限
本文介绍申请数据权限功能,使用户可以快速熟悉申请数据权限页面的相关操作,以及如何申请数据权限。前提条件用户需要具有进入申请数据权限页面的功能权限。注意事项申请数据权限功能仅限企业版。用户仅限申请已加入团队内实例的相关数据权限。每次申请仅限一种类型的资源粒度,资源粒度从大到小依次是实例、库/模式、表。数据权限支持按资源粒度继承,即用户拥有大粒度资源的数据权限时,则默认拥有该大粒度资源下所有小粒度资源的数据权限。

来自：
帮助文档
数据管理服务
用户指南
个人中心
我的权限
申请数据权限
导出数据
注意事项数据复制工单中对源数据库的操作会被认为是一种DML操作。数据导出的风险拦截规则只对关系型数据库生效。功能介绍导出数据的风险识别规则会拦截用户导出操作,并识别出其中的风险等级,匹配到对应的审批模板,走工单审批流程。若该行为不需要进行审批,则可以直接执行。用户可以自定义导出数据类型不同风险等级需要通过的审批流程。导出数据类型支持的风险管控因子如下: 导出行数导出行数支持的运算符为==,!=,>, >=,<,<=。因子值为正整数,由用户输入。

来自：
帮助文档
数据管理服务
用户指南
SQL治理
SQL风险
导出数据
云服务使用KMS加解密数据
EVS服务端加密简介当您由于业务需求需要对存储在云硬盘的数据进行加密时,EVS为您提供加密功能,可以对新创建的云硬盘进行加密。加密云硬盘使用的密钥由数据加密服务(DEW,Data Encryption Workshop)中的密钥管理(KMS,Key Management Service)功能提供,无需您自行构建和维护密钥管理基础设施,安全便捷。哪些用户有权限使用云硬盘加密安全管理员(拥有“Security Administrator”权限)可以直接授权EVS访问KMS,使用加密功能。

来自：
帮助文档
数据加密
最佳实践
云服务使用KMS加解密数据
数据权限简介
本章节主要介绍数据治理中心的数据目录的数据权限简介。为确保数据使用安全可控,使用数据表需要先申请权限。数据权限模块为用户提供便捷的权限管控能力,提供可视化申请审批流程,并可以进行权限的审计和管理。提高数据安全的同时,还可以方便用户进行数据权限管控。

来自：
帮助文档
数据治理中心 DataArts Studio
用户指南
数据目录
数据权限
数据权限简介
VPN连接服务创建方式一
说明 IKE策略指定了IPsec隧道在协商阶段的加密和认证算法,IPsec策略指定了IPsec在数据传输阶段所使用的协议,加密以及认证算法;这些参数在VPC上的VPN连接和您数据中心的VPN中需要进行相同的配置,否则会导致VPN无法建立连接。以下算法安全性较低,请慎用:认证算法:SHA1、MD5。加密算法:3DES。DH算法:Group 1、Group 2、Group 5。配置对端设备配置对端设备可参见以下示例,帮助您配置本地的VPN设备,实现您本地网络与天翼云VPC子网的互联互通。

来自：
帮助文档
VPN连接
快速入门
VPN连接服务创建方式一

天翼云最新活动

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云脑AOne

连接、保护、办公，All-in-One！

一键部署Llama3大模型学习机

0代码一键部署，预装最新主流大模型Llama3与StableDiffusion

中小企业应用上云专场

产品组合下单即享折上9折起，助力企业快速上云

息壤高校钜惠活动

天翼云息壤杯高校AI大赛，数款产品享受线上订购超值特惠

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

GPU云主机

轻量型云主机

多活容灾服务

天翼云CTyunOS系统

天翼云息壤一体化智算服务平台

科研助手

算力互联调度平台

一站式智算服务平台

智算一体机

推荐文档

产品功能

配置目的端

如何充值？

天翼云域名的优势

查询日志

新增实例

快速入门