数据集成工具_数据集成工具文档介绍内容-天翼云

数据管理服务
数据管理服务是一站式、全生命周期的数据库管理平台,提供全局数据库管理、查询窗口、协同开发、运维管理等功能,让数据库的使用更高效、更安全、更规范。

来自：
帮助文档
数据管理服务
数据安全中心
数据安全中心(Data Security Center)是新一代的云原生数据安全平台,提供数据分类分级,敏感数据扫描,数据安全体检,数据水印溯源,数据脱敏等基础数据安全能力。通过数据安全总览整合数据安全生命周期各阶段状态,对外整体呈现云上数据安全态势

来自：
帮助文档
数据安全中心
数据库审计
数据库审计(DBAudit)是一款专为监控、记录和分析数据库活动的审计产品,基于智能的数据库协议解析和精准SQL解析技术,通过对数据库全量行为的审计溯源,挖掘数据库运行过程中各类潜在风险和隐患,保障云上数据库的安全同时,也是企业的等保合规利器。

来自：
帮助文档
数据库审计
数据库审计
数据库审计(DBAudit)是一款专为监控、记录和分析数据库活动的审计产品,基于智能的数据库协议解析和精准SQL解析技术,通过对数据库全量行为的审计溯源,挖掘数据库运行过程中各类潜在风险和隐患,保障云上数据库的安全同时,也是企业的等保合规利器。

来自：
帮助文档
数据库审计
数据安全专区
数据安全专区是一个一体化的云上数据安全防护产品方案,从数据采集、传输、存储、处理、共享、销毁的全流程建立安全防护体系,快速满足《数据安全法》等合规要求,帮助用户解决数据安全治理难、防护难的问题

来自：
帮助文档
数据安全专区
数据加工-日志过滤
本文主要介绍云日志服务如何使用e_drop函数或e_keep函数过滤日志。

来自：
帮助文档
云日志服务
最佳实践
数据加工-日志过滤
镜像优化类
镜像源为云主机或镜像文件表1 云主机相关配置项操作系统相关配置项 Windows 设置网卡属性为DHCP开启远程桌面连接...工具 Linux 设置网卡属性为DHCP安装Cloud-Init工具清理网络规则文件修改grub文件的磁盘标识方式为UUID修改fstab文件的磁盘标识方式为UUID卸载云主机的数据盘表2 镜像文件(用于创建云主机)相关配置项操作系统相关配置项 Windows 设置网卡属性为DHCP开启远程桌面连接功能安装

来自：
帮助文档
镜像服务
常见问题
镜像优化类
下载采集的日志文件
注意只有采集成功的日志和部分采集成功的日志才能被下载。请求语法GET /rest/v1/system/logcollect/id/file HTTP/1.1 Date: date Host: ip:port Authorization: authorization请求参数参数类型描述是否必须idString日志ID。是请求示例下载ID为903fec5908534445b847a2b13bd205e2的日志。

来自：
帮助文档
存储资源盘活系统
API参考
事件和日志管理
下载采集的日志文件
通知组管理
WebHook集成支持以WebHook的方式对第三方通知对象(企微、飞书、钉钉)发送告警信息。点击【新建Webhook】。输入通知组名称与webhook调用地址。您需要在各个Webhook通知渠道侧完成相关配置,并获取Webhook URL地址。渲染方式选择模板渲染,点击【选择模板自动填入】,选择对应的通知渠道。点击确定,完成创建。

来自：
帮助文档
云日志服务
用户指南
日志告警
通知组管理
产品定义
它提供了一种易于搭建和管理的云计算解决方案,集成了计算、存储和网络服务资源。轻量型云主机的特点是简单、易用、轻便、实惠。适用于低负载应用场景,例如网站搭建和云端学习等。术语解释下表为您介绍轻量型云主机相关的名词概念。概念介绍镜像提供了运行实例所需的信息,包括操作系统和运行环境、初始化应用数据等。云硬盘分布式持久块存储设备、可弹性扩展的数据块级存储设备,可以用作实例的系统盘和数据盘使用。

来自：
帮助文档
轻量型云主机
产品简介
产品定义
通过命令创建数据库
图创建数据库步骤2 创建后必须向数据库中插入数据,才能在数据库的列表中看到新创建的数据库。图插入数据说明系统自带三个数据库:admin、local、test。如果不创建新的数据库,直接插入数据,则数据默认插入到test库中。图查看数据库步骤 3查看数据库中的数据。图查看数据

来自：
帮助文档
文档数据库服务
用户指南
数据库使用
通过命令创建数据库
如何创建和管理数据库
本页介绍了如何创建和管理文档数据库服务。在文档数据库服务中,可以使用 use命令来创建和切换数据库,使用show命令来显示数据库列表和数据库信息,使用 db命令来管理当前数据库。以下是一些常见的文档数据库服务创建和管理数据库的方法: 创建数据库:使用 use 命令创建数据库,并切换到该库: use mydatabase 如果数据库不存在,则会自动创建。这个创建是隐式创建,创建完如果不做任何操作,使用 show dbs是看不到刚创建的数据库的。

来自：
帮助文档
文档数据库服务
开发指南
数据库使用
如何创建和管理数据库
元数据库配置
数据库用户名与密码:开通实例后,可前往账号管理创建账户,并为该账号授予目标数据库的权限。请确保填写的用户拥有该数据库的读写权限。说明1、当前仅支持通过内网地址进行数据库连接。请选择关联与当前集群同一虚拟私有云(VPC)下的MySQL数据库。2、配置元数据库信息时,请提前创建数据库,若需要部署多个服务,请创建多个数据库,创建方式可参考创建数据库。3、元数据配置所需信息可前往数据库控制台查看。4、请确保配置的数据库用户具有该数据库的读写权限。

来自：
帮助文档
翼MapReduce
产品介绍
功能特性
元数据库配置
敏感数据链路刻画
敏感数据链路查询在数据安全运营中心上方导航栏选择“敏感数据链路刻画”,进入敏感数据链路刻画页面。可在查询栏根据不同数据查询。数据类型查询:支持根据邮箱、身份证、手机号、银行卡号。数据内容查询:可敏感数据进行查询,也可根据历史数据查询。数据库资产查询:根据数据库资产名称检索并进行查询。应用系统查询:根据应用系统名称检索并进行查询。

来自：
帮助文档
数据安全专区
用户指南
数据安全运营中心
敏感数据链路刻画
功能特性
主要功能模块说明容量管理企业/个人空间容量分配,动态扩容权限设置支持读写权限设置日志审计支持新建、修改、删除操作日志审计功能清单类型功能网络...集成访问支持不支持天翼AI云电脑、网盘网页端、App、PC客户端访问支持不支持共享范围跨资源池共享支持支持文件对外分享不支持(规划中)不支持跨企业(租户)共享不支持(规划中)不支持数据安全文件落盘自动加密支持支持多数据中心备份,数据异地容灾高可用支持部分资源池支持翼起来生态融合支持虚拟应用保存文件至翼共享盘支持支持支持翼连访问打开翼共享盘的文件

来自：
帮助文档
天翼云电脑（政企版）
扩展功能
翼共享
功能特性
数据库迁移服务模块
本节为您介绍数据库迁移服务功能特性。多种源和目标数据库迁移服务支持多种数据库之间的数据迁移。数据"0"丢失数据库迁移服务在传输过程存在数据校验保证数据一致,用户也可通过数据稽核功能相对准确的检验出两端数据的异同。自定义迁移数据库迁移服务可以根据用户的特定需求智能地筛选出要迁移的数据,例如根据表名进行筛选。多模式迁移数据库迁移服务支持表结构、全量、增量多模式迁移,可将数据库割接窗口降至分钟级,减少迁移带来的业务影响。

来自：
帮助文档
云迁移服务CMS
产品简介
功能特性
数据库迁移服务模块
使用数据库安全服务
建议购买数据库的同时,购买对应的数据库安全服务。数据库安全服务(Database Security Service,DBSS)是一个智能的数据库安全服务,基于机器学习机制和大数据分析技术,提供数据库审计,SQL注入攻击检测,风险操作识别等功能,保障云上数据库的安全。建议使用DBSS来提供扩展的数据安全能力,详情请参考数据库安全服务。优势助力企业满足等保合规要求。满足等保测评数据库审计需求。

来自：
帮助文档
关系数据库MySQL版
用户指南
数据安全性
使用数据库安全服务
将DLI数据导出至OBS
导出数据步骤 1.导出数据的入口有两个,分别在“数据管理”和“SQL编辑器”页面。在“数据管理”页面导入数据。 a. 在管理控制台左侧,单击“数据管理”>“库表管理”。 b. 单击需导出数据的表对应的数据库,进入该数据的“表管理”页面。 c. 在对应表(DLI表)的“操作”栏中选择“更多”中的“导出”,弹出“导出数据”页面。在“SQL编辑器”页面导出数据。 a. 在管理控制台左侧,单击“SQL编辑器”。 b.

来自：
帮助文档
数据湖探索
用户指南
数据管理
库表管理
将DLI数据导出至OBS
创建数据库和表
本章节主要介绍创建数据库和表。数据库和表说明数据库是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。表是数据库最重要的组成部分之一。表是由行与列组合成的。每一列被当作是一个字段。每个字段中的值代表一种类型的数据。数据库是一个框架,表是其实质内容。一个数据库包含一个或者多个表。 DLI中数据库的概念、基本用法与Oracle数据库基本相同,是DLI管理权限的基础单元,赋权以数据库为单位。用户可通过管理控制台或SQL语句创建数据库和表。

来自：
帮助文档
数据湖探索
用户指南
数据管理
库表管理
创建数据库和表
数据库实例规格
本页介绍了文档数据库服务提供了丰富的产品规格,用户可根据业务场景选择订购最合适的规格产品。文档数据库服务提供了丰富的产品规格,用户可根据业务场景选择订购最合适的规格产品。

来自：
帮助文档
文档数据库服务
产品介绍
实例说明
数据库实例规格
提升数据库的读写性能
数据分片:如果数据规模非常大,可以考虑使用文档数据库的分片集群,将数据分散到多个节点上,实现水平扩展和负载均衡。硬件升级:确保文档数据库服务运行在性能良好的硬件上,包括CPU、内存和磁盘。SSD硬盘通常比传统机械硬盘更适合文档数据库,因为它可以提供更快的读写速度。维护:定期进行数据库维护操作,例如索引重建、压缩数据、日志清理等,可以优化数据库性能。

来自：
帮助文档
文档数据库服务
用户指南
性能调优
提升数据库的读写性能
创建数据库和账号
授权数据库否您可以为普通用户选择需要授权的数据库并设置权限,权限类型分为只读、读写和所有者三种,授权数据库步骤如下:在未授权数据库框中选择需要授权的数据库,可根据实际需求选择一个或多个。单击穿梭框中间转移按钮,将选择的数据库添加到已授权数据库框中,默认为读写权限。在已授权数据库框内可以分别设置各个数据库的权限,权限说明参考账号权限列表。创建数据库在天翼云官网首页的顶部菜单栏,选择产品 > 数据库 > 关系型数据库 > 关系数据库SQL Server版,进入关系数据库SQL Server产品页面。

来自：
帮助文档
关系数据库SQL Server版
快速入门
创建数据库和账号
数据库迁移服务模块
;如仅执行全量数据迁移,请勿向源端数据库写入新的数据,否则会导致源和目标数据不一致;数据一致性的保持需要用户业务配合,请勿两个业务节点上对同一个主键数据进行更新,避免主键冲突或相互覆盖。

来自：
帮助文档
云迁移服务CMS
产品简介
使用须知
约束与限制
数据库迁移服务模块
数据安全应用场景
本章节介绍数据安全相关实践。媒体存储深知数据安全对用户的重要性。在媒体存储中,我们致力于为您提供可靠、安全的数据存储解决方案,并积极推动数据安全的最佳实践。我们将通过本文为您介绍媒体存储数据安全的最佳实践,帮助您保护和管理存储在我们平台上的数据。我们将分享一系列有效的措施,旨在确保数据的机密性、完整性和可用性。我们将从访问控制,数据加密,数据备份和灾难恢复,数据完整性检查,安全审计和监控等几个方面,介绍天翼云媒体存储的数据安全实践。

来自：
帮助文档
媒体存储
最佳实践
对象存储
数据安全
数据安全应用场景
数据库备份与恢复
如何将数据库备份到弹性云主机上弹性云主机(ECS)上不限制您存放哪些数据,但数据必须是符合国家法律法规的。您可以通过导出SQL语句或使用第三方软件的方式将数据库备份到ECS上,但是不建议您将ECS作为数据库备份空间使用。强烈建议您使用关系数据库MySQL版自带的备份管理功能将数据备份到云硬盘或对象存储中以保障数据的安全性和获得更加专业的服务。

来自：
帮助文档
关系数据库MySQL版
常见问题
操作类
数据库备份与恢复
新增三方数据中心
本文为您介绍新增三方数据中心的具体操作。概述三方数据中心模块提供将用户三方数据中心接入多活容灾服务平台功能,新增三方数据中心后,可用于命名空间、容灾管理、预案编排功能中,实现云下-云上场景下的灾备场景。操作步骤登录天翼云,进入控制中心。单击管理控制台左上角的,选择区域。在服务列表选择“计算”-“多活容灾服务”,进入多活容灾服务控制台。点击左侧菜单栏-“三方数据中心”,进入三方数据中心列表页。点击右上角“新增三方数据中心”按钮,弹出新增三方数据中心弹窗。填写数据中心名称、区域、可用区、描述信息。

来自：
帮助文档
多活容灾服务
用户指南
三方数据中心
新增三方数据中心
购买数据安全中心服务
本节为您介绍如何购买开通数据安全中心服务。数据安全中心提供两个服务版本:标准版和专业版,两种扩展包:数据库扩展包和OBS扩展包。您可以根据业务需求购买数据安全中心服务。购买约束降配:数据安全中心DSC不支持降低购买版本的规格。如果您需要降低购买的DSC规格,可以先退订当前的DSC,再重新购买较低版本的DSC。绑定关系:数据库扩展包和OBS扩展包与DSC版本绑定,不能单独续费或退订。

来自：
帮助文档
数据安全中心
用户指南
开通数据安全中心
购买数据安全中心服务
按备份集恢复数据
数据恢复的耗时取决于数据量,数据量越大则恢复耗时越长。只支持恢复用户自定义数据库,不支持恢复系统数据库(系统数据库不需要恢复)。数据恢复时,会设置目标实例上的同名库为单用户模式,此时该库是无法使用的。恢复数据到实例时,恢复后的数据库名不能与目标实例中已有的数据库名相同,即如果目标实例里已经有同名的库了,恢复时一定要用新名字。恢复增量备份集,不仅仅只是恢复增量的部分数据,而是全量+增量的全部数据。表级备份暂不支持恢复到新实例。表级备份暂不支持覆盖恢复表。

来自：
帮助文档
关系数据库SQL Server版
用户指南
备份与恢复
恢复
按备份集恢复数据
使用Logstash导入数据到Elasticsearch
本章节主要介绍如何使用Logstash导入数据到Elasticsearch。云搜索服务支持使用Logstash将其收集的数据迁移到Elasticsearch中,方便用户通过Elasticsearch搜索引擎高效管理和获取数据。数据文件支持JSON、CSV等格式。 Logstash 是开源的服务器端数据处理管道,能够同时从多个来源采集数据、转换数据,然后将数据发送到Elasticsearch中。数据导入分为如下2种场景: Logstash部署在外网时导入数据。

来自：
帮助文档
云搜索服务
用户指南
使用Elasticsearch搜索数据
导入数据到Elasticsearch
使用Logstash导入数据到Elasticsearch
编辑三方数据中心
各配置项与新增三方数据中心配置项内容相同,具体说明如下:参数是否必填配置说明数据中心名称√填写数据中心名称,数据中心名称需唯一。长度为2-63字符。区域×选择或填写数据中心所在地域。长度为2-63字符。可用区×填写数据中心所在可用区。长度为2-63字符。描述×填写数据中心描述。长度为0-100字符。

来自：
帮助文档
多活容灾服务
用户指南
三方数据中心
编辑三方数据中心
数据库运维实名审计
本小节介绍数据库安全运维实名操作控制及审计最佳实践。背景数据库资产作为企业各类经营业务数据的承载体,其重要性不言而喻。企业的核心业务数据往往是私密且敏感的,如何有效防护数据库资产安全,防止越权访问、违规操作以及进一步导致数据泄露等事件发生,成为企业在数据安全防护工程建设中重点关注的一项内容。传统数据库审计或数据库防火墙产品可审计及控制操作,但很难实名到自然人操作。

来自：
帮助文档
云堡垒机（原生版）
最佳实践
数据库运维实名审计
数据库运维实名审计
本小节介绍数据库安全运维实名操作控制及审计最佳实践。背景数据库资产作为企业各类经营业务数据的承载体,其重要性不言而喻。企业的核心业务数据往往是私密且敏感的,如何有效防护数据库资产安全,防止越权访问、违规操作以及进一步导致数据泄露等事件发生,成为企业在数据安全防护工程建设中重点关注的一项内容。传统数据库审计或数据库防火墙产品可审计及控制操作,但很难实名到自然人操作。

来自：
帮助文档
云堡垒机（原生版）
最佳实践
数据库运维实名审计

天翼云最新活动

818算力跃迁·礼遇盛夏

爆款云主机2核2G限时秒杀，28.8元/年起！

免费体验DeepSeek，上天翼云息壤

新老用户均可免费体验2500万Tokens，限时两周

云上钜惠

爆款云主机全场特惠，更有万元锦鲤券等你来领！

算力套餐

让算力触手可及

天翼云AI产品特惠

8折特惠，新老同享不限购

中小企业服务商合作专区

国家云助力中小企业腾飞，高额上云补贴重磅上线

出海产品促销专区

爆款云主机低至2折，高性价比，不限新老速来抢购！

天翼云电脑专场

移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！

智算服务

应用商城

定价

合作伙伴

开发者

支持与服务

了解天翼云

天翼云最新活动

产品推荐

轻量型云主机

多活容灾服务

一体化计算加速平台·异构计算

算力互联调度平台

科研助手

智算一体机

人脸实名认证

人脸活体检测

动作活体识别

推荐文档

代码示例

Redis集群管理