活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
大模型
智算一体机
模型适配专家服务
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
翼学安在线督导_相关内容
- 应用场景本章节主要介绍翼MapReduce服务在不同场景下的应用。 大数据在人们的生活中无处不在,在IoT、电子商务、金融、制造、医疗、能源和政府部门等行业均可以使用云MRS服务进行大数据处理。 海量数据分析场景 海量数据分析是现代大数据系统中的主要场景。通常企业会包含多种数据源,接入后需要对数据进行ETL(Extract-Transform-Load)处理形成模型化数据,以便提供给各个业务模块进行分析梳理,这类业务通常有以下特点: 对执行实时性要求不高,作业执行时间在数十分钟到小时级别。
- 配置服务自定义参数本章节主要介绍翼MapReduce服务配置服务自定义参数。 MRS各个组件支持开源的所有参数,在MRS Manager支持修改部分关键使用场景的参数,且部分组件的客户端可能不包含开源特性的所有参数。如果需要修改其他Manager未直接支持的组件参数,用户可以在Manager通过自定义配置项功能为组件添加新参数。添加的新参数最终将保存在组件的配置文件中并在重启后生效。 对系统的影响 配置服务属性后,需要重启此服务,重启期间无法访问服务。
- 数据备份/导出在线迁移需要注意哪些? 网络 在线迁移首先需要打通网络,迁移任务必须和源Redis、DCS缓存实例二者网络互通。 工具 在线迁移工具,推荐使用DCS控制台的在线迁移功能。 数据完整性 如果选择中断业务,则迁移完成后检查数据量和关键key。 如果选择不中断业务,则用户需要考虑增量数据的迁移。
- 告警与事件概述本章节主要介绍翼MapReduce的告警与事件操作。 告警 登录FusionInsight Manager,选择“运维 > 告警 > 告警”,进入如下图所示的界面,用户可以查看FusionInsight Manager中各集群上报的告警信息,包括告警名称、ID、级别、产生时间等信息,默认每页显示最近的十条告警。 单击指定告警名称左侧的,展开完整告警信息参数,各项说明如下表所示。 告警参数 告警参数 说明 告警ID 告警信息的ID。 告警名称 告警信息的名称。
- 服务详情概述本章节主要介绍翼MapReduce的服务详情操作。 总览 登录FusionInsight Manager以后,选择“集群 > 待操作集群的名称 > 服务”,在服务列表单击指定的服务名称打开服务详情页面,包含“概览”、“实例”、“实例组”和“配置”等页面,以及功能区。部分服务还支持显示自定义的管理工具页面,具体支持列表如下表所示。 自定义管理工具名称一览表 工具名称 对应服务 说明 Flume配置工具 Flume 用于为Flume的服务端和客户端配置采集参数。
- 使用RedisShake工具离线迁移其他云厂商Redis Cluster集群当你需要迁移部署在其他云厂商上的 Redis 集群数据时,如果无法进行在线迁移,你可以选择离线迁移的方式。 离线迁移(备份文件导入) 与在线迁移相比,离线迁移适宜于源实例与目标实例的网络无法连通的场景。 1、在DCS控制台创建缓存实例。 注意新创建的Redis实例容量不能小于源端Redis实例的实际使用容量。 2、准备一台云服务器,并安装RedisShake。 RedisShake既能访问源端缓存实例,也能访问目标端DCS 缓存,需要绑定弹性公网IP 3、导出RDB文件。
- 入服与退服实例本章节主要介绍翼MapReduce的入服与退服实例操作。 操作场景 部分角色实例以分布式并行工作的方式对外部业务提供服务,服务会单独保存每个实例是否可以使用的信息,所以需要使用FusionInsight Manager为这些实例执行入服或退服的操作,变更实例的业务可用状态方式。 不支持该此功能的实例,默认无法执行任务。 说明 当前支持退服和入服操作的角色有:HDFS的DataNode、Yarn的NodeManager、HBase的RegionServer。
- 使用Redis-Shake工具迁移自建Redis Cluster集群在线迁移 在线迁移主要适用于自建Redis Cluster集群迁移到DCS Cluster集群的场景,且两端集群实例能够网络连通,或者有一台中转服务器能够连通两端集群实例。 部署在其他云厂商Redis服务上的Cluster集群数据,由于SYNC、PSYNC命令被云厂商禁用,暂不支持在线迁移。 在DCS控制台创建Cluster集群实例。 注意集群的内存规格不能小于源端Cluster集群。
- 应用场景在线用户列表:Redis可以用于维护在线用户的列表。当用户进入视频直播页面时,可以将用户的信息存储在Redis的集合或有序集合中,并在用户离开时从列表中移除。这样可以快速获取当前在线用户的列表,方便进行用户统计、互动和管理。可参考最佳实践:实时计数器 礼物和打赏系统:视频直播类应用通常有礼物和打赏的功能,用户可以给主播发送虚拟礼物或打赏。Redis可以用作礼物和打赏的计数器和排行榜存储,通过Redis的计数器功能记录礼物和打赏的数量,并利用有序集合存储主播的排名和收入情况。
- 添加用户并绑定租户的角色本章节主要介绍翼MapReduce的添加用户并绑定租户的角色操作。 操作场景 创建好的租户不能直接登录集群访问资源,管理员需要通过FusionInsight Manager为已有租户创建新用户,通过绑定租户的角色继承其操作权限,以满足业务使用。 前提条件 管理员已明确业务需求,并已创建了租户。 操作步骤 登录FusionInsight Manager,选择“系统 > 权限 > 用户”。 若在系统中添加新的用户,请单击“添加用户”,打开添加用户的配置页面。
- 产品定义满足企业和团队在文档处理、云存储、共享协作、在线编辑、高效检索、权限管控、加密防护、信息收集等全场景的办公诉求,用文档服务与企业共建支撑业务运行的平台,助力企业数据和业务低成本快速上云,为企业在线信息化办公赋能。
- Agent状态异常应如何处理？在线:主机内的Agent运行正常。 可能的原因 网络故障。主机中的Agent和云端防护中心出现异常,如网卡故障、IP地址异变及带宽较低。 Agent进程异常。 安装Agent后,不会立即生效,需要等待3~5分钟左右控制台才会刷新。 处理方法 排查网络故障.待网络恢复正常后: 若Agent状态为“在线”,则故障清除。 若长时间Agent状态仍为“未安装”或者“离线”,可能是Agent进程异常,需要登录主机,重启Agent进程。
- 管理租户目录本章节主要介绍翼MapReduce的管理租户目录操作。 操作场景 管理员通过FusionInsight Manager管理指定租户使用的HDFS存储目录,能根据业务需求对租户添加目录、修改目录文件数量配额、修改存储空间配额和删除目录。 前提条件 已添加具有HDFS存储资源的租户。 查看租户目录 在FusionInsight Manager,单击“租户资源”。 在左侧租户列表,单击目标的租户。 单击“资源”页签。 查看“HDFS存储”表格。
- 配置SNMP北向参数本章节主要介绍翼MapReduce的配置SNMP北向参数。 操作场景 该任务指导用户采用SNMP协议把MRS Manager的告警、监控数据集成到网管平台。 前提条件 对接服务器对应的弹性云服务器需要和MRS集群的Master节点在相同的VPC,且Master节点可以访问对接服务器的IP地址和指定端口。 操作步骤 在MRS Manager,单击“系统设置”。 在“配置”区域“监控和告警配置”下,单击“SNMP配置”。 “SNMP服务”的开关默认为关闭,单击启用SNMP服务。
- 修改集群组件鉴权配置开关本章主要介绍翼MapReduce的修改集群组件鉴权配置开关功能。 操作场景 集群部署为安全模式或者普通模式时,HDFS和ZooKeeper默认会对访问服务的用户进行鉴权,没有权限的用户无法访问HDFS和ZooKeeper中的资源。集群部署为普通模式时,HBase和Yarn默认不会对访问用户进行鉴权,所有用户可以访问HBase和Yarn中的资源。 管理员可以根据业务实际需要,在普通模式集群中配置开启HBase和Yarn鉴权,或关闭HDFS和ZooKeeper鉴权。
- 配置SNMP北向参数本章节主要介绍翼MapReduce的配置SNMP北向参数操作。 操作场景 如果用户需要在统一的运维网管平台查看集群的告警、监控数据,管理员可以在FusionInsight Manager使用SNMP服务将相关数据上报到网管平台。 操作步骤 登录FusionInsight Manager。 选择“系统 > 对接 > SNMP”。 单击“SNMP服务”右侧的开关。 “SNMP服务”默认为不启用,开关显示为表示启用。 根据下表所示的说明填写对接参数。
- 消费组问题如果消息组中没有在线的消费者(如empty状态),是否14天后会自动被删除? 消息组中没有在线的消费者(如empty状态),14天后是否会自动被删除与offsets.retention.minutes参数有关: 2020年6月16日前创建的实例,offsets.retention.minutes默认为2147483646分钟,约1491308天,消费组14天后不会被删除。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
