活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
大模型
智算一体机
模型适配专家服务
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
翼视界魔云_相关内容
- 如何使用翼MR翼MapReduce使用简单,通过使用在集群中连接在一起的多台计算机,您可以运行各种任务,处理或者存储(PB级)巨量数据。翼MapReduce的基本使用流程如下: 创建集群:进入天翼云官网翼MapReduce服务订购页面,选择需要的业务场景,创建集群。用户可以通过业务场景简化大数据集群组合,可以用于数据湖、数据服务、云搜索、数据分析等业务需要。
- 如何使用翼MapReduce本章节主要介绍如何使用翼MapReduce。 翼MR是一个在云上部署和管理Hadoop系统的服务,一键即可部署Hadoop集群。翼MR提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件。 翼MR使用简单,通过使用在集群中连接在一起的多台计算机,您可以运行各种任务,处理或者存储(PB级)巨量数据。翼MR的基本使用流程如下: 上传程序和数据文件到对象存储服务(OBS)中,用户需要先将本地的程序和数据文件上传至OBS中。
- 创建翼MapReduce操作用户授予企业项目权限管理员可在“账号中心”-“统一身份认证服务”功能中,通过用户组授权或基于企业项目完成授权两种方式,为用户授予在目标企业项目下...翼MR使用权限。授权后,用户可在翼MR控制台看到该企业项目下的集群。集群创建后,若希望将集群从当前企业项目迁出,并迁入到新的企业项目中,可参考企业项目资源迁出/迁入。迁移时,请同步迁移与集群存在绑定关系的资源,如虚拟私有云、弹性IP等产品。翼MR控制台-用户管理为支持IAM用户使用翼MR集群,需要将新增IAM用户的信息同步至翼MR产品。
- 翼MR是否支持更换网段？本章节主要介绍翼MapReduce的网段设置规则。 当前,翼MR集群内节点暂不支持更换网段。因此,客户在选择开通翼MR集群前,建议基于业务需要,做好相关网段划分并提前在天翼云其它产品,如:虚拟私有云(CT-VPC)中开通好合适的资源。
- 翼MR Manager入门指导本章节主要介绍翼MR Manager的操作。 概述 翼MR Manager由天翼云自主研发,主要为运维工程师提供日常的大数据组件运维管理操作能力。通过可视化、流程化的方式对系统中的各个系统资源和数据资产进行管理,并支持自动化的运维调度、统一的配置文件管理、统一运维监控,支持组件集群服务管理、多租户管理、资源管理等功能。在提高运维人员工作效率的同时,为大数据运维工作者提供专业全面的运维能力,从而大幅降低大数据平台的运维门槛。
- 翼MapReduce集群节点简介节点类型和功能 翼MR集群中每个节点即为一台主机,节点类型及节点功能如下表所示: 节点类型 功能 master节点 翼MR集群管理节点,负责管理和监控集群。在翼MR管理控制台选择“我的集群”,选中一个运行中的集群并单击集群名,进入集群信息页面。在“节点管理”中查看节点信息。 节点可以通过点击”远程登录“选择界面的VNC方式登录,也可以通过SSH方式登录。 core节点 翼MR集群工作节点,负责处理和分析数据,并存储过程数据。
- 翼MR管理控制台和翼MR Manager页面区别与联系？本章节主要介绍翼MapReduce各模块的功能。 用户可以通过翼MR管理控制台的“翼MR Manager”页面进入到翼MR的Manager页面。
- 翼MR搜索引擎组件性能对比测试结果本章节主要介绍翼MapReduce服务中搜索引擎组件性能优化后与竞品的对比测试结果。 概述 为检验天翼云翼MapReduce服务中搜索引擎在经过多次性能优化增强后的效果,我们选取了两家国内头部竞品的相关测试报告,进行对比确认。下文后续我们分别用代号A云和H云来代表两家竞品厂商。
- 翼MR集群是否支持Hive on Spark？本章节主要介绍翼MapReduce集群使用规则。 当前,翼MR集群中的Hive服务,默认提供的是Hive on MR的计算能力。 用户可以在开通好翼MR集群后,进入翼MR Manager的管控平台中,并在Hive服务的配置管理页中,修改相关配置参数,重启Hive服务,完成Hive on Spark的切换并生效。
- 翼MR是否支持Hive on Tez和Hive on Kudu？本章节主要介绍翼MapReduce集群使用规则。 当前,翼MR集群中的Hive组件,支持Hive on Tez,暂不支持Hive on Kudu模式。 翼MR集群开通后,默认支持Hive on MR模式。客户可以在开通翼MR集群后,通过进入翼MR Manager管控平台,在Hive服务的配置管理中,修改相关配置参数,并重启Hive服务,实现Hive on Spark切换和生效。
- 翼MapReduce服务组件操作指南点此下载:《MapReduce服务组件操作指南(普通版)》 点此下载:《翼MapReduce组件操作指南(LTS版)》
- 翼MR产品支持Hive元数据库使用内置MySQL类型吗？本章节主要介绍翼MapReduce集群组件使用规则。 当前,翼MR产品不支持Hive元数据库使用内置MySQL类型。内置MySQL不具备生产运行所需要的高可用、高安全性,且该方式缺乏有效的技术保障能力,客户需要为此承担不必要的业务风险。 在翼MR集群开通的流程中,基于上述产品考量,不开放相关选配功能,默认推荐客户预先开通好天翼云成熟的数据库产品-关系数据库MySQL版(CT-RDS MySQL)作为Hive服务的元数据库。
- 翼MR集群内节点是否支持降配操作？本章节主要介绍翼MapReduce降配规则。 当前,翼MR集群内节点暂不支持降级配置规格。客户可以基于业务的需要,基于翼MR集群中的Master、Core、Task节点组按需进行升级配置规格操作。
- 翼MR集群版本对应的操作系统是什么？本章节主要介绍翼MapReduce集群版本适配的主机操作系统。 翼MR集群版本与主机操作系统对应的关系如下表:翼MR集群版本X86计算翼MR-2.16.0CtyunOs 2.0.1
- 是否支持修改翼MR集群中节点的IP地址？本章节主要介绍翼MapReduce集群节点IP地址如何修改。 当前,翼MR集群中的节点不支持修改IP地址,强行修改IP会带来翼MR集群服务间通信异常,导致整个翼MR集群业务不可用故障。建议客户在开通翼MR集群前,考虑好可用区和VPC的规划。
- 翼MR支持什么类型的分布式存储？本章节主要介绍翼MapReduce支持的分布式存储类型。 翼MR集群内当前使用主流的大数据Hadoop,目前支持Hadoop 3.3.3版本,并且会随着集群的演进逐步更新相关稳定版本。 同时客户可以在开通翼MR产品中选择使用Doris组件,Doris同样提供分布式数据存储能力,当前默认提供的Doris为2.1.8版本。 更多的翼MR产品中组件信息请参见产品文档中的版本概述。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
