活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
- 618智算钜惠季 爆款云主机2核4G限时秒杀，88元/年起！
- 免费体验DeepSeek，上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens，限时两周
- 云上钜惠 HOT 爆款云主机全场特惠，更有万元锦鲤券等你来领！
- 算力套餐 HOT 让算力触手可及
- 天翼云脑AOne NEW 连接、保护、办公，All-in-One！
- 中小企业服务商合作专区 国家云助力中小企业腾飞，高额上云补贴重磅上线
- 出海产品促销专区 NEW 爆款云主机低至2折，高性价比，不限新老速来抢购！
- 天翼云电脑专场 HOT 移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！
- 天翼云奖励推广计划 加入成为云推官，推荐新用户注册下单得现金奖励
行业应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
天翼云大数据平台_相关内容
- 查询FusionInsight Manager版本号本章节主要介绍翼MapReduce的查询FusionInsight Manager版本号操作。 管理员通过查看FusionInsight Manager版本号,可以进行下一步的系统升级及日常维护操作。 界面方式 登录FusionInsight Manager,在主页界面,单击右上角的,在下拉框中单击“关于”,在弹框中查看FusionInsight Manager版本号。 命令方式 a. 以root用户登录FusionInsight Manager主管理节点。 b.
- Spark组件优化后TPC-DS测试结果如使用Hive事务表,随机测试单条删除语句耗时超过300s,而mt1测试中,共48条删除语句和14条插入语句,因此以开源Spark的mt测试...天翼云翼MR Spark的10倍估算QPhDS@SF分数。
- YARN扩容请前往翼MR Manager页面重启FlinkHistoryServer所有实例(需使用该文件作为依赖项或资源的客户Flink作业)。
- 操作类当前环境中将安装翼MR客户端所在的数据盘配置成“noexec”,即禁止二进制文件执行,从而无法使用java命令。 解决方法 以root用户登录翼MR客户端所在节点。 移除“/etc/fstab”文件中翼MR客户端所在的数据盘的配置项“noexec”。 执行umount命令卸载数据盘,然后再执行mount -a重新挂载数据盘。
- 告警规则-告警规则详情本章主要介绍告警规则详情页面操作。 告警规则详情 操作场景 查看告警规则配置信息,新增、修改、删除告警规则。 操作步骤 登录翼MR管理控制台。 单击“我的集群”,单击指定的集群名称,进入集群信息页面。 单击“翼MR Manager”tab,单击“前往翼MR Manager”。
- 购买本章节主要介绍开通翼MapReduce服务的基本流程。 操作步骤 注册天翼云官网账号,登录后进入官网首页。 在官网首页,单击左上角“产品”,【大数据>数据计算与分析>翼MapReduce】。 在【翼MapReduce】界面,单击【立即开通】。 在翼MapReduce服务集群创建页面根据实际需求选择集群类型、节点规格、购买时长等后,勾选相关协议,单击【立即购买】,详情请参考快速创建集群。 按照页面提示,进入支付页面完成付款。
- 购买本章节仅对开通翼MapReduce服务的基本流程进行介绍。 1.注册天翼云官网账号,登录后进入官网首页; 2.在官网首页,单击左上角“产品”,【大数据>数据分析>翼MapReduce】; 3.在【翼MapReduce】界面,单击【立即开通】; 4.在翼MapReduce服务集群创建页面根据实际需求选择区域、计费模式、购买时长,输入集群名称,选择版本类型、集群版本等信息,并根据需要选择组件、集群规格等配置信息后,单击【立即创建】; 5.按页面提示,勾选相关协议,进入支付页面完成付款。
- 其他云平台云主机迁移至天翼云本文为您介绍其他云平台云主机迁移至天翼云CT-ECS的介绍说明和相关操作。 介绍说明 CMS支持将您在不同环境如各云服务平台等云主机、IDC机房、本地虚拟机迁移至天翼云,通过CMS可以实现相应业务需求。 实现逻辑 CMS采用整机迁移的方式,进行业务系统的迁移工作,通过整机迁移保证了业务系统具有良好的兼容性,同时也避免繁琐的重新配置、重新部署工作。 采用标准的技术与规范化的接口与协议,保证系统各组成部分的协同一致,构建可兼容、易移植的系统平台。
- 大数据管理平台 DataWings天翼云大数据管理平台 DataWings,是一站式、开箱即用的大数据开发与数据资产管理工具,包括数据建模、数据集成、数据处理、数据治理、数据地图、数据服务等能力,致力于解决企业在数字化转型时面临的数据采集、开发、管理、治理等方面的问题,帮助企业高效上云,提升数据资产价值,构建数据智能应用,实现数据驱动业务增长。
- 与其他产品的关系本章节主要介绍翼MapReduce与其他产品的关系。 与其他产品的关系 服务名称 翼MR与其他产品的关系 主要交互功能 虚拟私有云(VPC) 翼MR集群创建在虚拟私有云(VPC)的子网内,VPC通过逻辑方式进行网络隔离,为用户的翼MR集群提供安全、隔离的网络环境。 创建虚拟私有云和子网。 弹性云主机(ECS) 翼MR服务使用弹性云主机作为集群的节点,每个弹性云主机是集群中的一个节点。 准备运行环境创建集群。
- 翼MR如何连接spark-shell？本章节主要介绍翼MapReduce组件Spark使用说明。 任一用户登录集群客户端节点。 配置/usr/local/ 下spark客户端目录 conf下的配置,主要是Spark-env.sh 需要配置SPARK_HOME、HADOOP_HOME、HADOOP_CLASSPATH等。 如果当前集群已启用Kerberos认证,执行以下命令认证当前用户。如果当前集群未启用Kerberos认证,则无需执行此命令。
- 续订本章节主要介绍翼MapReduce服务的续订操作。 包年包月续订 一、手动续订 方法一: 在天翼云官网,点击右上角的“管理中心”。 左侧导航栏点击“订单管理”-“续订管理”,找到需要续订的产品进行操作,详细操作可参考费用中心-手动续订。 方法二: 进入翼MR控制台-我的集群页面。 选择可续订的集群,在操作列点击高亮显示的续订按钮。 进入所选集群的“续订管理”页面,按提示完成续订操作即可。更多详细信息可参考费用中心-手动续订。
- 查看集群服务配置本章节主要介绍翼MR Manager的集群服务配置的查看操作。 操作步骤 登录翼MR管理控制台。 单击“我的集群”,单击指定的集群名称,进入集群信息页面。 单击“翼MR Manager”tab,单击“前往翼MR Manager”。 进入到翼MR Manager以后,单击菜单“集群服务”,进入集群服务列表页面。 选择指定集群服务,单击集群服务名称进入集群服务详情页面。 单击“配置管理”tab,即可查看该集群服务的所有配置。
- 翼MR如何连接spark-beeline？本章节主要介绍翼MapReduce组件Spark的操作使用说明。 Spark-beeline连接的目标可以是spark thrift server、也可以是kyuubi server。 我们以spark thrift server为例,提供链接流程如下: 首先配置spark thrift相关配置。 Spark-env.sh 中配置需要配置JAVA_HOME、HADOOP_HOME、HADOOP_CLASSPATH、HADOOP_CONF_DIR等环境变量。
- 查看集群静态资源本章节主要介绍翼MapReduce的查看集群静态资源操作。 操作场景 大数据管理平台支持通过静态服务资源池对没有运行在Yarn上的服务资源进行管理和隔离。系统支持基于时间的静态服务资源池自动调整策略,使集群在不同的时间段自动调整参数值,从而更有效地利用资源。
- 账号权限类管理员可通过用户组授权或基于企业项目完成授权两种方式,为子用户授予在目标企业项目下的翼MR使用权限。管理员授权后,权限预计在1分钟内生效,子用户可在翼MR控制台看到该企业项目下的集群。如果不开启Kerberos认证,翼MR集群能否支持访问权限细分?翼MR集群在开通过程中,数据湖、数据服务、实时数据流的业务场景是默认开启Kerberos认证。基于Kerberos认证,才能实现访问权限的细分设置。翼MR集群在开通过程中,云搜索和数据分析的业务场景是默认不使用Kerberos认证。
- 购买类本章节主要介绍翼MapReduce服务的购买类常见问题。 翼MapReduce(MRS)可以做什么? MapReduce服务(MRS)为客户提供ClickHouse、Spark、Flink、Kafka、HBase等Hadoop生态的高性能大数据引擎,支持数据湖、数据仓库、BI、AI融合等能力,完全兼容开源,快速帮助客户上云构建低成本、灵活开放、安全可靠、全栈式的云原生大数据平台,满足客户业务快速增长和敏捷创新诉求。 天翼云都有哪些资源池可订购翼MapReduce(MRS)?
- 支持天翼云APP产品控制台的云产品本文介绍天已支持翼云APP产品控制台的云产品。 天翼云支持在天翼云APP对云产品进行管理。
- 从零开始使用Kerberos认证集群本章节主要介绍翼MapReduce从零开始使用Kerberos认证集群。 本章节提供从零开始使用安全集群并执行MapReduce程序、Spark程序和Hive程序的操作指导。 翼MR 3.x版本Presto组件暂不支持开启Kerberos认证。
- 配置MongoDB连接本章节主要介绍数据治理中心的配置MongoDB连接功能。 MongoDB连接适用于第三方云MongoDB服务,以及用户在本地数据中心或ECS上自建的MongoDB,常用于从MongoDB同步数据到大数据平台。 连接本地MongoDB数据库时,相关参数详见下表:MongoDB连接参数 参数名 说明 取值样例 名称 连接的名称,根据连接的数据源类型,用户可自定义便于记忆、区分的连接名。
- 版本概述本章节主要介绍翼MapReduce服务产品的发行版本号格式、发行版本更新记录和发行版本说明。 产品发行版本号格式翼MapReduce采用类似翼MR-a.b.c格式的版本号,详细说明如下:a代表版本有较大的变动。b代表版本中一些组件的变动。c代表版本中Bug修复,可以向前兼容;以及一些较小的变动。翼MR每个版本的捆绑软件和集群创建说明捆绑软件:每个翼MapReduce发行版本上捆绑的软件和软件版本都是固定的。集群创建:创建某一个发行版本的翼MapReduce集群后,该集群版本不会自动升级。
- 上传示例数据和程序本章节主要介绍翼MapReduce如何上传示例数据和程序。 用户通过“文件管理”页面可以在分析集群进行文件夹创建、删除,文件导入、导出、删除操作。 背景信息 翼MR集群处理的数据源来源于OBS或HDFS,OBS为客户提供海量、安全、高可靠、低成本的数据存储能力。翼MR可以直接处理OBS中的数据,客户可以基于管理控制台Web界面和OBS客户端对数据进行浏览、管理和使用。 导入数据 翼MR目前只支持将OBS上的数据导入至HDFS中。上传文件速率会随着文件大小的增大而变慢,适合数据量小的场景下使用。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
