活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
- 使用HostPath存储卷背景信息 云容器引擎服务兼容kubernetes原生HostPath本地挂载方案,关于HostPath特定场景使用用法及注意点参见:Kubernetes官方 使用限制 HostPath 存储卷可能会暴露特权系统凭据(例如 Kubelet)或特权 API(例如容器运行时套接字),可用于容器逃逸或攻击集群的其他服务; 具有相同配置(例如基于同一 PodTemplate 创建)的多个 Pod 会由于节点上文件的不同而在不同节点上有不同的行为; 主机节点上特定文件或目录只能由 root 用户写入。
- MRS SparkMRS Spark作业的运行程序参数,请参见《MapReduce服务用户指南》“管理集群 >作业管理> 运行Spark作业”章节。 输入数据路径 否 选择输入数据所在的路径。 输出数据路径 否 选择输出数据存储的路径。 高级参数 参数 是否必选 说明 节点状态轮询时间(秒) 是 设置轮询时间(1~60秒),每隔x秒查询一次节点是否执行完成。
- 使用简介本章节主要介绍数据仓库服务使用流程概述。 数据仓库服务(DWS)是一种基于云基础架构和平台的在线数据处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于融合数据仓库GaussDB产品的云原生服务,兼容标准ANSI SQL 99和SQL 2003,同时兼容PostgreSQL/Oracle数据库生态,为各行业PB级海量大数据分析提供有竞争力的解决方案。 DWS提供了简单易用的Web管理控制台,帮助您快速创建数据仓库集群,轻松执行数据仓库管理任务。 DWS 使用流程介绍
- 云硬盘服务本文主要介绍云硬盘服务支持审计的关键操作 云硬盘服务(Elastic Volume Service,以下简称EVS)是一种基于分布式架构的,可弹性扩展的虚拟块存储设备。您可以在线进行操作,使用方式与传统服务器硬盘完全一致。同时,云硬盘具有更高的数据可靠性,更高的I/O吞吐能力和更加简单易用等特点,适用于文件系统、数据库或者其他需要块存储设备的系统软件或应用。 通过云审计服务,您可以记录与云硬盘相关的操作事件,便于日后的查询、审计和回溯。
- 功能特性DLI在开源Flink基础上进行了特性增强和安全增强,提供了数据处理所必须的Stream SQL特性。 DLI服务架构:Serverless DLI是无服务器化的大数据查询分析服务,其优势在于: 自动扩缩容:根据业务负载,对计算资源进行预估和自动扩缩容。
- 集群注册集群注册页面为您提供了集群信息管理的能力,您可以同步和编辑当前主账号已购买的翼MR大数据集群。 背景信息 为了能够更好的使用大数据管理平台的能力,若您需要使用数据处理模块,需先购买翼MR大数据集群,并绑定大数据引擎。 前提条件 已购买开通翼MapReduce产品。 进入页面 单击左上方的图标,选择全部产品 > 系统管理 > 集群管理 > 集群注册。 同步集群信息 点击同步集群信息,DataWings将自动同步当前租户主账号下已购买开通的翼MapReduce集群信息(目前仅支持数据湖集群)。
- pg_profile_user_password本页介绍天翼云TeleDB数据库元数据pg_profile_user_password的内容。 存储管理和配置用户的密码策略和验证信息。
- 购买1.注册天翼云官网账号,登录后进入官网首页; 2.在官网首页,单击左上角“产品”,【大数据>云搜索服务】; 3.在【云搜索服务】界面,单击【立即开通】; 4.在云搜索服务集群创建页面选择计费模式、订购周期、当前区域(即资源池)、可用区、集群类型、集群版本、集群名称、节点规格等基础配置信息后,按提示进入“网络配置”、“高级配置”页面并根据需要进行配置,最后单击【立即创建】; 基础配置 网络配置 高级配置 5.按页面提示,勾选相关协议,进入支付页面完成付款。
- 配置存算分离本章节主要介绍翼MR产品中通过与天翼云对象存储产品配合使用,实现翼MR大数据集群存算分离配置流程。 翼MapReduce产品基于JeekeFS组件服务提供存算分离能力,支持用户将数据存储在天翼云对象存储产品中,同时使用翼MR集群做数据计算处理,从而实现更灵活、低成本的数据分析方式。 集群准备 开始配置前,请确保购买的翼MR集群中已部署JeekeFS组件服务。目前,翼MapReduce产品主要支持在数据湖、数据服务和实时数据流场景下可选JeekeFS组件服务。
- 云日志服务Logback SDK此处需要填入5个必填参数,相关参数获取,详情参考天翼云官网云日志服务-SDK接入概述。购买本章节主要介绍开通翼MapReduce服务的基本流程。 操作步骤 注册天翼云官网账号,登录后进入官网首页。 在官网首页,单击左上角“产品”,【大数据>数据计算与分析>翼MapReduce】。 在【翼MapReduce】界面,单击【立即开通】。 在翼MapReduce服务集群创建页面根据实际需求选择集群类型、节点规格、购买时长等后,勾选相关协议,单击【立即购买】,详情请参考快速创建集群。 按照页面提示,进入支付页面完成付款。云专线的功能支持MSTP专线接入 依托中国电信传送网,为用户提供具有灵活调整带宽和以太网接入功能数据专线。通过MSTP专线可实现自有IT环境(私有云)与云资源的高效、安全的连接和统一管理。 为客户提供从客户站点到云资源池站点的以太专线服务(IPRAN、MSTP、PON等),客户端采用以太网接口接入,在客户端和局端设备以太网端口允许范围内,可以根据客户需求增加或减少带宽而不需频繁更换客户端和局端设备。 物理专线 连接天翼云与本地数据中心的物理线路连接,您的数据中心和天翼云专线网络接入点间建立网络连接。运行SparkSql作业本章节主要介绍如何运行SparkSql作业。 用户可将自己开发的程序提交到MRS中,执行程序并获取结果。本章节教您在MRS集群页面如何提交一个新的SparkSql作业。SparkSQL作业用于查询和分析数据,包括SQL语句和Script脚本两种形式,如果SQL语句涉及敏感信息,请使用Spark Script提交。 前提条件 用户已经将运行作业所需的程序包和数据文件上传至OBS系统或HDFS中。 通过界面提交作业 1.登录MRS管理控制台。运行SparkSubmit作业服务配置参数 可选参数,用于为本次执行的作业修改服务配置参数。该参数的修改仅适用于本次执行的作业,如需对集群永久生效,请参考配置服务参数页面进行修改。如需添加多个参数,请单击右侧增加,如需删除参数,请单击右侧“删除”。常用服务配置参数如下表“服务配置参数”。说明 如需运行长时间作业如SparkStreaming等,且需要访问OBS,需要通过“服务配置参数”传入访问OBS的AK/SK。 命令参考 用于展示提交作业时提交到后台执行的命令。使用限制限制事件限制规格每个事件跟踪限制的ZOS桶数量1个支持审计的服务计算:云主机、云硬盘、镜像服务、物理机、弹性伸缩存储:云硬盘、海量文件服务网络:弹性公网IP、弹性负载均衡、NAT网关、虚拟私有云、共享带宽容器与中间件:容器镜像服务数据库:关系型数据库MySQL版、文档数据库服务大数据:云搜索服务、翼MapReduce服务安全及管理:数据库审计、云安全中心、Web应用防火墙(原生版)迁移与管理:云监控其他:统一身份认证用户操作后多久可以通过云审计查询到数据管理类事件:1分钟数据类事件:5分钟用户通过云审计能查询到多久前的操作事件云硬盘扩容概述云硬盘扩容功能支持扩大云硬盘容量,不支持缩小云硬盘容量。当磁盘已经投入使用后,请在扩容前务必检查磁盘的分区形式,具体说明如下:分区形式注意事项MBR分区容量最大支持2TB(2048GB),超过2TB的部分无法使用。GPT分区容量最大支持18EB(19327352832 GB)。云硬盘服务支持的最大数据盘容量为32TB(32768 GB),即您最大可将数据盘扩容至32TB。购买本文为您介绍如何订购天翼云云搜索服务。 注册天翼云官网账号,登录后进入官网首页。在官网首页,单击左上角“产品”,【大数据>云搜索服务】。在【云搜索服务】产品页,单击【立即开通】。4.在云搜索服务实例创建页面选择计费模式、订购周期、当前区域(即资源池)为资源节点内支持的一类节点、可用区、实例类型、实例版本、实例名称、节点规格等基础配置信息后,按页面提示并根据需要进行配置,然后点击下一步。资源概述说明 大数据集群为Yarn分配的资源是静态服务资源,可以由Yarn动态分配给任务队列计算使用。 存储资源 存储资源是分布式文件存储服务HDFS中可分配的数据存储空间资源。目录是HDFS存储资源分配的基本单位,租户通过指定HDFS文件系统的目录来获取存储资源。产品介绍应用场景 多数据库引擎自动安装部署 在政务云、⾏业云以及⼤型企业私有云建设中,管理计算、存储、网络资源的IaaS层日趋成熟,但是PaaS层尤其是数据库PaaS还处于建设阶段,存在数据库的安装部署交付时间长,人工介入多等问题,TeleDB资源全生命周期管理模块支持多种数据库引擎的自动开通,通过参数配置化,自动选择主机等功能,实现分钟级实例开通,同时提供系列数据库生态工具,配合数据库网关、数据迁移服务、数据备份服务、数据管理服务实现数据库全生命周期的管理。购买1.注册天翼云官网账号,登录后进入官网首页; 2.在官网首页,单击左上角“产品”,【大数据>数据仓库服务】; 3.在【数据仓库服务】界面,单击【立即开通】; 4.在数据仓库服务集群创建页面选择资源池、区域、可用分区、节点规格、热数据存储量、节点数量等基础配置信息后,再根据页面提示,点击“下一步”进入网络配置、高级配置页面,最后单击【立即购买】; 基础配置 网络配置 高级配置 5.按页面提示,勾选相关协议,进入支付页面完成付款; 说明 如您的天翼云账户余额不足100元,在集群订购页面将会弹出账户受限的提示创建自定义集群Loader:基于开源sqoop 1.99.7开发,专为Apache Hadoop和结构化数据库(如关系型数据库)设计的高效传输大量数据的工具。(MRS 3.x版本不支持) Hadoop为必选组件,且Spark与Hive组件需要配套使用。请根据业务选择搭配组件。Flink:分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态计算。Oozie:Hadoop作业调度系统。(仅MRS 3.x版本支持)HetuEngine:HetuEngine是一个同异构大数据集的分布式SQL查询引擎。支持滚动重启在修改了大数据组件的配置项后,需要重启对应的服务来使得配置生效,使用普通重启方式会并发重启所有服务或实例,可能引起业务断服。为了确保服务重启过程中,尽量减少或者不影响业务运行,可以通过滚动重启来按批次重启服务或实例(对于有主备状态的实例,会先重启备实例,再重启主实例)。滚动重启方式的重启时间比普通重启时间久。 当前MRS集群中,服务和实例是否支持滚动重启如下表所示。容器定时伸缩（CronHPA）5/10115HPA(min/max):11/11副本数:11当CronHPA中的目标副本数高于当前副本数时,保留CronHPA的目标副本数。当CronHPA目标副本数高于HPA的maxReplicas时,修改HPA的副本数上限。创建定时伸缩任务登录云容器引擎控制台,选择集群。在集群列表页面,单击目标集群名称,然后在左侧导航栏,选择工作负载 -> 无状态。在无状态页面,单击应用右侧“更多”操作列下的弹性伸缩。如果 cube-cronhpa 组件未被安装,页面提示点击安装。数据集成概述本章节主要介绍数据集成概述。 DataArts Studio数据集成是一种高效、易用的数据集成服务,围绕大数据迁移上云和智能数据湖解决方案,提供了简单易用的迁移能力和多种数据源到数据湖的集成能力,降低了客户数据源迁移和集成的复杂性,有效的提高您数据迁移和集成的效率。 数据集成即云数据迁移(Cloud Data Migration,后简称CDM)服务,本文中的“云数据迁移”、“CDM”均指“数据集成”。配置升级配置升级前需要前往Manager “集群服务—更多操作—停止所有集群服务”,手动关闭大数据集群服务,否则无法执行配置升级操作。 在配置升级页面,选择“升级后配置”,确认配置升级金额,勾选协议,并单击确定。 配置升级完成后,您可以按需前往Manager的"配置管理”页面进行配置更改。可以参考配置升级-服务配置修改建议。配置修改完成后,要前往Manager“集群服务—更多操作—启动所有集群服务”手动拉起大数据集群服务。部署Palworld幻兽帕鲁服务器最佳实践（Windows）端口也可自定义进行修改,修改后可提高服务器的安全性:Windows镜像云主机登录后,将C:\steamcmd路径下start.bat文件中修改最后一行,改为: start "" "C:\PalServer\PalServer.exe" -port=xxx 其中xxx为1-65535中的任意希望启用的端口,并重新启动服务器即可生效。 3)地址处将“1.1.1.1”更改为自己的IP地址。 点击“确定”,完成安全组规则修改。 进入游戏。MRS Spark PythonMRS集群名 是 选择支持spark python的mrs集群。MRS只有特定版本支持spark python的集群,请先测试运行,保证集群支持。如需新建集群,请参考以下方法:单击,进入“集群列表”页面新建MRS集群。前往MRS管理控制台进行新建。如何新建集群,请参见《MapReduce服务使用指南》中的创建集群。 作业名称 是 MRS作业名称,只能包含英文字母、数字、“_”,且长度为1~64个字符。说明 作业名称不得包含中文字符、超出长度限制等。云下MySQL数据迁移至DRDS实例方案避免大数据情况内存爆涨。 本场景保留。 --hex-blob 使用十六进制格式导出二进制字符串字段。如果有二进制数据就必须使用该选项。 本场景保留。 --no-create-info 只导出数据,而不添加CREATE TABLE 语句。导出数据时使用。 本场景保留。 --skip-comments 关闭附加注释信息。 本场景保留。 --skip-lock-tables 在不锁表的情况下导出数据。某些参数会默认开启加锁声明,因此建议在数据导出语句末尾增加此参数。 本场景保留。数据开发如果不通过数据开发,手动将作业实例中的业务场景处理后,可以强制成功作业实例,后续作业也会继续正常运行。 通过DataArts Studio调度大数据服务时需要注意什么? DLI和MRS作为大数据服务,不具备锁管理的能力。因此如果同时对表进行读和写操作时,会导致数据冲突、操作失败。 如果您需要对大数据服务数据表进行读表和写表操作,建议参考以下方式之一进行串行操作处理: 将读表和写表操作拆分为同一作业的不同节点,两个节点通过连线建立先后执行关系,避免同时执行冲突。购买本章节主要介绍数据湖探索(DLI)的购买流程。 1.注册天翼云官网账号,登录后进入官网首页; 2.在官网首页,单击左上角“产品”,【大数据>数据湖探索】; 3.在【数据湖探索】界面,单击【立即开通】; 4.在数据湖探索队列购买页面选择CPU架构、队列规格并填写相关配置信息,勾选服务协议,单击【立即购买】; 5.按页面提示,单击【提交】即完成队列创建。队列创建完成后,您可在产品控制台“队列管理”页面看到您创建的队列。CronHPA定时策略当CronHPA与HPA兼容使用时,需要将CronHPA中的scaleTargetRef字段设置为HPA策略,而HPA策略的scaleTargetRef字段设置为Deployment,这样CronHPA策略会在固定的时间调整HPA策略的实例数量上下限,即可实现工作负载定时伸缩和弹性伸缩的兼容。 步骤 1 为Deployment创建HPA策略。弹性伸缩服务产品服务协议天翼云提供产品服务协议,请您点击查看。 中国电信天翼弹性伸缩服务是产品服务协议,详情请参见《天翼云弹性伸缩服务等级协议》。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
