活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
- 818算力跃迁·礼遇盛夏 NEW 爆款云主机2核2G限时秒杀，28.8元/年起！
- 免费体验DeepSeek，上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens，限时两周
- 云上钜惠 HOT 爆款云主机全场特惠，更有万元锦鲤券等你来领！
- 算力套餐 HOT 让算力触手可及
- 天翼云AI产品特惠 NEW 8折特惠，新老同享不限购
- 中小企业服务商合作专区 国家云助力中小企业腾飞，高额上云补贴重磅上线
- 出海产品促销专区 NEW 爆款云主机低至2折，高性价比，不限新老速来抢购！
- 天翼云电脑专场 HOT 移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！
- 天翼云奖励推广计划 加入成为云推官，推荐新用户注册下单得现金奖励
大模型
智算一体机
模型适配专家服务
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
翼建站_相关内容
- 使用Hive加载HDFS数据并分析图书评分情况创建MRS离线查询集群 登录天翼云控制中心,选择“大数据 翼MapReduce服务 MRS”,单击“购买集群”,选择“快速购买”,填写软件配置参数,单击“下一步”。
- IAM用户权限管理最佳实践登陆天翼云官网并访问IAM控制台,选择需要授权的子账号。查看用户,选择所属用户组,添加用户组。如未创建所需用户组,请参考系统管理-主子账号创建用户组并给用户组授权微服务云应用平台权限策略。选择目标用户组,点击确定即可。IAM场景1租户是小团队,只区分功能权限(常用场景)进入IAM控制台 2. 创建自定义策略选择策略管理,创建自定义策略。测试策略内容,仅供参考,MSAP1.6后支持通配符策略。
- 执行Spark任务报内存不足告警如何处理？本章节主要介绍翼MapReduce组件Spark使用时的常见问题。 Spark 任务内存不足情况需要根据具体问题进行具体分析。 首先spark统一内存模型将内存分为off-heap和heap两部分内存,每一个部分都可能发生内存不足的情况。 off-heap内存不足的情况 off-heap内存作用 为了进一步优化内存的使用以及提高 Shuffle 时排序的效率,Spark 引入了堆外(Off-heap)内存,使之可以直接在工作节点的系统内存中开辟空间,存储经过序列化的二进制数据。
- 恢复DBService数据本章主要介绍翼MapReduce的恢复DBService数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对DBService进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对DBService进行恢复数据操作。 系统管理员可以通过FusionInsight Manager创建恢复DBService任务。只支持创建任务手动恢复数据。
- 备份OMS数据本章主要介绍翼MapReduce的备份OMS数据功能。 操作场景 为了确保FusionInsight Manager系统日常数据安全,或者系统管理员需要对Manager进行重大操作(如扩容、减容等)前后,需要对Manager数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 管理员可以通过FusionInsight Manager创建备份Manager任务并备份数据。支持创建任务自动或手动备份数据。
- 备份DBService数据本章主要介绍翼MapReduce的备份DBService数据功能。 操作场景 为了确保DBService日常数据安全,或者系统管理员需要对DBService进行重大操作(如升级或迁移等)时,需要对DBService数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份DBService任务并备份数据。支持创建任务自动或手动备份数据。
- 备份HBase元数据本章主要介绍翼MapReduce的备份HBase元数据功能。 操作场景 为了确保HBase元数据(主要包括tableinfo文件和HFile)安全,防止因HBase的系统表目录或者文件损坏导致HBase服务不可用,或者系统管理员需要对HBase系统表进行重大操作(如升级或迁移等)时,需要对HBase元数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份HBase任务并备份元数据。
- OMS健康检查指标项说明本章节主要介绍翼MapReduce服务OMS健康检查指标项说明。 OMS状态检查 指标项名称 :OMS状态检查 指标项含义 :OMS状态检查包括HA状态检查和资源状态检查。 HA状态取值为active、standby和NULL,分别表示主节点、备节点和未知。资源状态取值为normal、abnormal和NULL,分别表示正常、异常和未知。HA状态为NULL时,认为不健康;资源状态为NULL或abnormal时,认为不健康。
- 恢复NameNode数据本章主要介绍翼MapReduce的恢复NameNode数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对NameNode进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对NameNode进行恢复数据操作。 系统管理员可以通过FusionInsight Manager创建恢复NameNode任务并恢复数据。只支持创建任务手动恢复数据。
- 恢复HDFS业务数据本章主要介绍翼MapReduce的恢复HDFS业务数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对HDFS进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对HDFS进行恢复数据操作。 系统管理员可以通过FusionInsight Manager创建恢复HDFS任务。只支持创建任务手动恢复数据。 须知 只支持进行数据备份时的系统版本与当前系统版本一致时的数据恢复。
- 恢复HBase业务数据本章主要介绍翼MapReduce的恢复HBase业务数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对HBase进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对HBase业务数据进行恢复数据操作。 系统管理员可以通过FusionInsight Manager创建恢复HBase任务并恢复数据。只支持创建任务手动恢复数据。
- 通过专线网关实现本地IDC访问单VPC物理专线名称互联地址(天翼云侧)互联地址(用户侧)掩码VLAN物理专线10.250.0.110.250.0.2255.255.255.252...翼云华北2地域的VPC,配置如下。VPC名称VPC网段(IPv4)子网网段(IPv4)VPC10.10.0.0/1610.10.0.0/24前提条件1、在天翼云华北2已创建一条物理专线,具体操作说明详见创建物理专线。2、在天翼云华北2已创建一个专线网关,具体操作说明详见创建专线网关。3、在天翼云华北2已创建一个VPC,具体操作说明详见创建VPC。
- 恢复OMS数据本章主要介绍翼MapReduce的恢复OMS数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对FusionInsight Manager系统进行重大数据调整等操作后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,需要对Manager进行恢复数据操作。 管理员可以通过FusionInsight Manager创建恢复Manager任务。只支持创建任务手动恢复数据。 须知 只支持进行数据备份时的系统版本与当前系统版本一致时的数据恢复。
- Manager日志清单本章节主要介绍翼MapReduce服务Manager日志清单。 日志描述 日志存储路径 :Manager相关日志的默认存储路径为“/var/log/Bigdata/Manager 组件 ”。
- 加密HFile和WAL内容本章主要介绍翼MapReduce的加密HFile和WAL内容功能。 加密HFile和WAL内容 须知 设置HFile和WAL为SMS4加密或AES加密方式对系统的影响较大,一旦操作失误会导致数据丢失。不推荐使用此功能。 使用Bulkload批量导入的数据不支持加密。 缺省情况下,HBase中的HFile和WAL(Write ahead log)内容是不加密的。如果用户需要对其进行加密,可通过如下操作进行配置。 1.在任一安装HBase服务节点,使用omm用户执行如下命令创建密钥。
- 关于日志本章节主要介绍翼MapReduce服务关于日志。 日志描述 MRS集群的日志保存路径为“/var/log/Bigdata”。日志分类见下表: 日志分类一览表 日志类型 日志描述 安装日志 安装日志记录了Manager、集群和服务安装的程序信息,可用于定位安装出错的问题。 运行日志 运行日志记录了集群各服务运行产生的运行轨迹信息及调试信息、状态变迁、未产生影响的潜在问题和直接的错误信息。
- 恢复Hive业务数据本章主要介绍翼MapReduce的恢复Hive业务数据功能。 操作场景 在用户意外修改、删除或需要找回数据时,系统管理员对Hive进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对Hive进行恢复数据操作。 系统管理员可以通过FusionInsight Manager创建恢复Hive任务并恢复数据。只支持创建任务手动恢复数据。
- 备份HDFS业务数据本章主要介绍翼MapReduce的备份HDFS业务数据功能。 操作场景 为了确保HDFS日常用户的业务数据安全,或者系统管理员需要对HDFS进行重大操作(如升级或迁移等),需要对HDFS数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份HDFS任务并备份数据。支持创建任务自动或手动备份数据。 说明 加密目录不支持备份恢复。
- 通过专线网关实现本地IDC访问多VPC物理专线名称互联地址(天翼云侧)互联地址(用户侧)掩码VLAN物理专线10.250.0.110.250.0.2255.255.255.252...翼云华北2地域的VPC,配置如下。VPC名称VPC网段(IPv4)子网网段(IPv4)VPC110.10.0.0/1610.10.0.0/24VPC210.20.0.0/1610.20.0.0/24前提条件1、在天翼云华北2已创建一条物理专线,具体操作说明详见创建物理专线。2、在天翼云华北2已创建一个专线网关,具体操作说明详见创建专线网关。
- 备份HBase业务数据本章主要介绍翼MapReduce的备份HBase业务数据功能。 操作场景 为了确保HBase日常数据安全,或者系统管理员需要对HBase进行重大操作(如升级或迁移等),需要对HBase业务数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份HBase任务并备份数据。支持创建任务自动或手动备份数据。
- 备份Hive业务数据本章主要介绍翼MapReduce的备份Hive业务数据功能。 操作场景 为了确保Hive日常用户的业务数据安全,或者系统管理员需要对Hive进行重大操作(如升级或迁移等),需要对Hive数据进行备份,从而保证系统在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低。 系统管理员可以通过FusionInsight Manager创建备份Hive任务。支持创建任务自动或手动备份数据。 Hive备份恢复功能不支持识别用户的Hive表、索引、视图等对象在业务和结构上存在的关联关系。
- 备份恢复简介本章主要介绍翼MapReduce的备份恢复简介。 概述 FusionInsight Manager提供对集群内的用户数据及系统数据的备份恢复能力,备份功能按组件提供。系统支持备份Manager的数据、组件元数据及业务数据。 备份功能支持将数据备份至本地磁盘(LocalDir)、本端HDFS(LocalHDFS)、远端HDFS(RemoteHDFS)、NAS(NFS/CIFS)、SFTP服务器(SFTP)、OBS,具体操作请参考备份数据。
- 签约主体变更的影响有哪些天翼云对公账号信息变更如下: 变更前: 户名:中国电信股份有限公司云计算分公司 账号: 110060776018170076087 开户行...翼支付等充值账户。
- Host健康检查指标项说明本章节主要介绍翼MapReduce服务Host健康检查指标项说明。 Swap使用率 指标项名称 :Swap使用率 指标项含义 :系统Swap使用率,计算方法:已用Swap大小/总共Swap大小。当前阈值设置为75.0%,如果使用率超过阈值,则认为不健康。 恢复指导 : 1.确认节点Swap使用率。 登录检查结果不健康的节点,执行free -m查看swap总量和已使用量,如果swap使用率已超过阈值,则执行2。 2.如果Swap使用率超过阈值,建议对系统进行扩容,如:增加节点。
- 通过专线网关实现双链路负载访问VPC物理专线名称互联地址(天翼云侧)互联地址(用户侧)掩码VLAN物理专线110.250.0.110.250.0.2255.255.255.25...翼云华北2地域的VPC,配置如下。VPC名称VPC网段(IPv4)子网网段(IPv4)VPC110.10.0.0/1610.10.0.0/24前提条件1、在天翼云华北2已创建两条物理专线,具体操作说明详见创建物理专线。
- 使用限制OOS服务的主要特性使用限制详见下表: 限制项说明存储桶(Bucket)同一天翼云账号在同一地域内创建的存储桶(Bucket)总数不能超过10个。存储桶名称在OOS全局范围内必须全局唯一。存储桶创建后,其名称、索引位置不支持修改。单个存储桶的容量和文件数不限制。删除存储桶之前必须确保存储桶内所有文件已彻底删除。文件(Object)OOS控制台支持批量上传文件,单次最多支持500个文件同时上传,总大小不超过5GiB。如果只上传1个文件,则这个文件最大为5GiB。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
