活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
大模型
智算一体机
模型适配专家服务
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
翼学安在线督导_相关内容
- 创建翼MapReduce操作用户功能操作权限作用范围账号中心—统一身份认证服务授予翼MR与企业项目权限官网产品翼MR控制台-用户管理同步IAM账号至翼MR翼MR产品翼MR控制台-角色管理管理集群角色(含角色的新增、编辑与删除)翼MR产品翼MR集群-用户权限在指定集群内,为用户授予集群角色,支持被授权用户使用集群翼MR单集群账号中心—统一身份认证服务授予翼MR权限管理员可以通过“账号中心”-“统一身份认证服务”功能,为用户组授予“翼MapReduce 管理员”或“翼MapReduce 用户”权限。
- 翼MR管理控制台和翼MR Manager页面区别与联系？本章节主要介绍翼MapReduce各模块的功能。 用户可以通过翼MR管理控制台的“翼MR Manager”页面进入到翼MR的Manager页面。
- 翼MR Manager入门指导本章节主要介绍翼MR Manager的操作。 概述 翼MR Manager由天翼云自主研发,主要为运维工程师提供日常的大数据组件运维管理操作能力。通过可视化、流程化的方式对系统中的各个系统资源和数据资产进行管理,并支持自动化的运维调度、统一的配置文件管理、统一运维监控,支持组件集群服务管理、多租户管理、资源管理等功能。在提高运维人员工作效率的同时,为大数据运维工作者提供专业全面的运维能力,从而大幅降低大数据平台的运维门槛。
- 翼MR是否支持更换网段？本章节主要介绍翼MapReduce的网段设置规则。 当前,翼MR集群内节点暂不支持更换网段。因此,客户在选择开通翼MR集群前,建议基于业务需要,做好相关网段划分并提前在天翼云其它产品,如:虚拟私有云(CT-VPC)中开通好合适的资源。
- 在线创建索引避免阻塞DML语句本文为您介绍在线创建索引避免阻塞DML语句的具体操作。 新建索引 推荐使用加关键字concurrently的方式在线创建索引,此方式不阻塞DML、DQL语,不影响表的增、删、改、查操作。
- 如何查看直播流的在线人数本文介绍查看在线人数的方式。 您可以通过如下两种方式查看在线人数: 通过直播控制台查看:针对直播流为FLV或者RTMP业务时,支持在直播控制台查询域名粒度或流粒度的在线人数。 说明 一次只能查询三小时内的在线人数。 通过OpenAPI接口查询直播在线人数进行自助查看。 注意 目前只支持直播流为FLV或RTMP的在线人数统计,暂不支持HLS协议的在线人数统计。
- 使用在线迁移其他云厂商Redis本节主要介绍使用在线迁移其他云厂商Redis 场景描述 在满足源Redis和目标Redis的网络相通、源Redis已放通SYNC和PSYNC命令这两个前提下,使用在线迁移的方式,将源Redis中的数据全量迁移或增量迁移到目标Redis中。 注意 如果源Redis禁用了SYNC和PSYNC命令,请务必放通后再执行在线迁移,否则迁移失败,选择DCS Redis实例进行在线迁移时,会自动放开SYNC命令。在线迁移不支持公网方式直接迁移。
- 翼MR集群是否支持Hive on Spark？本章节主要介绍翼MapReduce集群使用规则。 当前,翼MR集群中的Hive服务,默认提供的是Hive on MR的计算能力。 用户可以在开通好翼MR集群后,进入翼MR Manager的管控平台中,并在Hive服务的配置管理页中,修改相关配置参数,重启Hive服务,完成Hive on Spark的切换并生效。
- 翼MR是否支持Hive on Tez和Hive on Kudu？本章节主要介绍翼MapReduce集群使用规则。 当前,翼MR集群中的Hive组件,支持Hive on Tez,暂不支持Hive on Kudu模式。 翼MR集群开通后,默认支持Hive on MR模式。客户可以在开通翼MR集群后,通过进入翼MR Manager管控平台,在Hive服务的配置管理中,修改相关配置参数,并重启Hive服务,实现Hive on Spark切换和生效。
- 翼MapReduce服务组件操作指南点此下载:《MapReduce服务组件操作指南(普通版)》 点此下载:《翼MapReduce组件操作指南(LTS版)》
- 翼MR集群版本对应的操作系统是什么？本章节主要介绍翼MapReduce集群版本适配的主机操作系统。 翼MR集群版本与主机操作系统对应的关系如下表:翼MR集群版本X86计算翼MR-2.16.0CtyunOs 2.0.1
- 翼MR集群内节点是否支持降配操作？本章节主要介绍翼MapReduce降配规则。 当前,翼MR集群内节点暂不支持降级配置规格。客户可以基于业务的需要,基于翼MR集群中的Master、Core、Task节点组按需进行升级配置规格操作。
- 是否支持修改翼MR集群中节点的IP地址？本章节主要介绍翼MapReduce集群节点IP地址如何修改。 当前,翼MR集群中的节点不支持修改IP地址,强行修改IP会带来翼MR集群服务间通信异常,导致整个翼MR集群业务不可用故障。建议客户在开通翼MR集群前,考虑好可用区和VPC的规划。
- 翼MR支持什么类型的分布式存储？本章节主要介绍翼MapReduce支持的分布式存储类型。 翼MR集群内当前使用主流的大数据Hadoop,目前支持Hadoop 3.3.3版本,并且会随着集群的演进逐步更新相关稳定版本。 同时客户可以在开通翼MR产品中选择使用Doris组件,Doris同样提供分布式数据存储能力,当前默认提供的Doris为2.1.8版本。 更多的翼MR产品中组件信息请参见产品文档中的版本概述。
- 使用KMS用户主密钥在线加解密数据encrypt指定CMK,直接输入明文数据,由KMS在线加密数据。decrypt解密由encrypt接口加密的数据,不需要指定CMK即可完成在线解密。操作步骤通过密钥管理服务控制台创建用户主密钥CMK。通过OpenAPI在线加密接口,对敏感数据进行加密。请求参数说明参数是否必填参数位置参数类型说明cmkUuid是bodyString主密钥(CMK)的全局唯一标识符。plaintext是bodyString待加密明文(必须经过Base64编码)。
- 翼MR如何连接spark-shell？本章节主要介绍翼MapReduce组件Spark使用说明。 任一用户登录集群客户端节点。 配置/usr/local/ 下spark客户端目录 conf下的配置,主要是Spark-env.sh 需要配置SPARK_HOME、HADOOP_HOME、HADOOP_CLASSPATH等。 如果当前集群已启用Kerberos认证,执行以下命令认证当前用户。如果当前集群未启用Kerberos认证,则无需执行此命令。
- 翼MR集群内节点上/var/log目录中的日志文件能否清理？本章节主要介绍翼MapReduce集群使用规则。 翼MR集群内节点上的/var/log目录中,存放了操作系统的相关操作、安全等关键性日志数据以及翼MR集群各个部署组件实例的应用和审计日志,以方便客户对云主机的系统问题以及翼MR组件集群进行定位和安全审计。 针对上述的系统日志文件,不建议客户进行清理,该操作属于高危操作,易引发弹性云主机的故障不可用问题。 针对上述的翼MR集群应用和审计日志,建议客户基于必要性考虑,确认是否需要清理。如果需要清理,优先考虑将相关历史久远的日志执行删除操作。
- 翼MR搜索引擎组件性能对比测试结果本章节主要介绍翼MapReduce服务中搜索引擎组件性能优化后与竞品的对比测试结果。 概述 为检验天翼云翼MapReduce服务中搜索引擎在经过多次性能优化增强后的效果,我们选取了两家国内头部竞品的相关测试报告,进行对比确认。下文后续我们分别用代号A云和H云来代表两家竞品厂商。
- 应用场景在线查询场景 基于Web和移动应用程序等生成的PB级别的结构化、半结构化或非结构化数据进行在线分析。 方便客户的Web应用或者数据可视化产品获取分析结果进行实时展示。
- 翼MR如何连接spark-beeline？本章节主要介绍翼MapReduce组件Spark的操作使用说明。 Spark-beeline连接的目标可以是spark thrift server、也可以是kyuubi server。 我们以spark thrift server为例,提供链接流程如下: 首先配置spark thrift相关配置。 Spark-env.sh 中配置需要配置JAVA_HOME、HADOOP_HOME、HADOOP_CLASSPATH、HADOOP_CONF_DIR等环境变量。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
