活动
天翼云最新优惠活动，涵盖免费试用，产品折扣等，助您降本增效！
热门活动
- 818算力跃迁·礼遇盛夏 NEW 爆款云主机2核2G限时秒杀，28.8元/年起！
- 免费体验DeepSeek，上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens，限时两周
- 云上钜惠 HOT 爆款云主机全场特惠，更有万元锦鲤券等你来领！
- 算力套餐 HOT 让算力触手可及
- 天翼云脑AOne NEW 连接、保护、办公，All-in-One！
- 中小企业服务商合作专区 国家云助力中小企业腾飞，高额上云补贴重磅上线
- 出海产品促销专区 NEW 爆款云主机低至2折，高性价比，不限新老速来抢购！
- 天翼云电脑专场 HOT 移动办公新选择，爆款4核8G畅享1年3.5折起，快来抢购！
- 天翼云奖励推广计划 加入成为云推官，推荐新用户注册下单得现金奖励
AI服务
教育应用
合作伙伴
天翼云携手合作伙伴，共创云上生态，合作共赢
开发者
开发者相关功能入口汇聚
天翼云云hbase数据库_相关内容
- ALM-19016 在ZooKeeper上的数量配额使用率严重超过阈值告警解释 系统每120秒周期性检测HBase服务的znode使用情况,当检测到HBase服务的znode数量使用率超出紧急告警的阈值(默认90%)时产生该告警。 当znode的数量使用率小于严重告警的阈值时,告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示服务名=HBase-1,处理步骤中的操作对象也应由HBase调整为HBase-1。
- ALM-19014 在ZooKeeper上的容量配额使用率严重超过阈值告警解释 系统每120秒周期性检测HBase服务的znode使用情况,当检测到HBase服务的znode容量使用率超出紧急告警的阈值(默认90%)时产生该告警。 当znode的容量使用率小于严重告警的阈值时,告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示“服务名=HBase-1”,处理步骤中的操作对象也应由HBase调整为HBase-1。
- ALM-19017 在ZooKeeper上的容量配额使用率超过阈值告警解释 系统每120秒周期性检测HBase服务的znode使用情况,当检测到HBase服务的znode容量使用率超出告警的阈值(默认75%)时产生该告警。 当znode的容量使用率小于告警的阈值时,告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示服务名=HBase-1,处理步骤中的操作对象也应由HBase调整为HBase-1。
- ALM-19015 在ZooKeeper上的数量配额使用率超过阈值告警解释 系统每120秒周期性检测HBase服务的znode使用情况,当检测到HBase服务的znode数量使用率超出告警的阈值(默认75%)时产生该告警。 当znode的数量使用率小于告警的阈值时,告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如“定位信息”中显示服务名=HBase-1,处理步骤中的操作对象也应由HBase调整为HBase-1。
- 高危操作一览表修改HBase实例的启动参数GC_OPTS、HBASE_HEAPSIZE 导致服务启动异常。 ★★ 修改相关配置项时请严格按照提示描述,确保修改后的值有效,且GC_OPTS与HBASE_HEAPSIZE参数值无冲突。 观察服务能否正常启动。 使用OfflineMetaRepair工具 导致服务启动异常。 ★★★★ 必须在HBase下线的情况下才可以使用该命令,而且不能在数据迁移的场景中使用该命令。 观察HBase服务是否可以正常启动。
- ALM-19013 region处在RIT状态的时长超过阈值告警解释 系统按300秒周期性检测HBase上的region处在RIT状态的数量。当检测到处在RIT状态的region时长超过阈值时长(连续两次超过阈值),上报该告警。当处在超时状态的region都恢复后,告警恢复。 说明 若集群启用了多实例功能且安装了多个HBase服务,请根据“定位信息”的“服务名”值来确定具体产生告警的HBase服务。例如HBase1服务不可用,则“定位信息”中显示服务名=HBase1,处理步骤中的操作对象也应由HBase调整为HBase1。
- 修改集群组件鉴权配置开关本章主要介绍翼MapReduce的修改集群组件鉴权配置开关功能。 操作场景 集群部署为安全模式或者普通模式时,HDFS和ZooKeeper默认会对访问服务的用户进行鉴权,没有权限的用户无法访问HDFS和ZooKeeper中的资源。集群部署为普通模式时,HBase和Yarn默认不会对访问用户进行鉴权,所有用户可以访问HBase和Yarn中的资源。 管理员可以根据业务实际需要,在普通模式集群中配置开启HBase和Yarn鉴权,或关闭HDFS和ZooKeeper鉴权。
- 备份恢复简介执行数据备份任务会对集群的最大IO性能产生影响,建议备份任务运行时间与集群业务高峰错开。
- 服务管理概述如启用多实例功能,则已安装的所有HBase服务实例处于“亚健康”状态。HBase已安装且状态不正常时,Hive、Spark和Loader处于“亚健康”状态。启用多实例功能后,任意一个HBase服务实例已安装且不正常时,Loader处于“亚健康”状态。启用多实例功能后,某一个HBase服务实例已安装且不正常时,对应的Hive和Spark服务实例处于“亚健康”状态,即HBase2已安装且不正常时,Hive2和Spark2为“亚健康”状态。
- 高危操作一览表存储可靠性下降,磁盘故障时,会发生数据丢失 2. NameNode重启失败,HDFS服务不可用 ★★★★ 修改相关配置项时,请仔细查看参数说明。
- 手动修改配置建议书hbase-env.sh:export HBASE_REGIONSERVER_OPTS:"-Xmsg -Xmxg " 说明 regionserver需要较多内存,一般配置内存配额的一半或更多。 HDFS:HDFS所在节点配置升级后,可以根据hadoop-env.sh 参数配置进行,通过调整服务的内存大小调整服务的性能,如-Xmx20g -Xms20g -Xmn4g,然后重启服务。NameNode 建议文件、目录、数据块之和1亿,配置50G。
- 配置升级-服务配置修改建议hbase-env.sh:export HBASE_REGIONSERVER_OPTS:"-Xmsg -Xmxg " 说明 :regionserver需要较多内存,一般配置内存配额的一半或更多。 HDFS:HDFS所在节点配置升级后,可以根据hadoop-env.sh 参数配置进行,通过调整服务的内存大小调整服务的性能,如-Xmx20g -Xms20g -Xmn4g,然后重启服务。NameNode 建议文件、目录、数据块之和1亿,配置50G。
- 关于日志说明 启用多实例功能后,如果系统管理员添加了多个HBase、Hive和Spark服务的实例,新增加服务实例的日志描述、日志级别和日志格式,与原服务日志相同。服务实例的日志将独立保存在名为“/var/log/Bigdata/servicenameN”的目录中,HBase和Hive服务实例的审计日志保存在名为“/var/log/Bigdata/audit/servicenameN”的目录中。
- ALM-24005 Flume传输数据异常对系统的影响 Flume Channel的磁盘空间使用量有继续增长的趋势,将会使数据导入到指定目的地的时间增长,当Flume Channel...导致Flume Agent进程暂停工作。 可能原因 Flume Sink故障,导致数据无法发送。 网络故障,导致数据无法发送。
- 租户与资源概述翼MR Manager提供的租户与资源主要包含:LDAP租户管理、Kerberos安全凭证、YARN队列管理、HBase数据库管理。 前置操作 使用租户与管理功能,需要进入Manager页面,操作步骤如下: 登录翼MR管理控制台。 单击“我的集群”,单击指定的集群名称,进入集群信息页面。 单击“翼MR Manager”tab,单击“前往翼MR Manager”。
- 静态服务资源例如以下业务场景,对于一个银行客户: 在白天HBase查询服务的业务多。 在晚上查询服务的业务少而Hive分析服务业务多。 如果只给每个服务设置固定的资源可能会导致: 白天查询服务的资源不够用,分析服务的资源空闲。 晚上分析服务的资源不够用,查询服务的资源空闲。 集群资源利用率不高,而且服务能力也打了折扣。因此: 白天多配置HBase服务资源。 晚上多配置Hive服务资源。 这种基于时间的动态调度机制可以更高效的利用资源,运行任务。
- ZooKeeper扩容HBase1、修改配置1)前往Manager页面,集群服务-> HBase集群-> 配置管理-> default配置组-> 配置文件hbase-site.xml -> 配置项hbase.zookeeper.quorum。2)将新的ZK节点,添加到配置项hbase.zookeeper.quorum中。3)相同操作:同时修改client配置组的配置项。2、配置同步1)点击配置同步,推送配置。3、重启服务1)需要重启HBase所有服务,包含HMaster和HRegionServer,推荐滚动重启。
- 创建角色详见下表:HBase权限描述 支持权限管理的资源 权限设置说明 “SUPER_USER_GROUP” 选中时表示授予HBase管理员权限。 “Global” HBase的一种资源类型,表示HBase整体组件。 “Namespace” HBase的一种资源类型,表示命名空间,用来保存HBase表。具体权限:“Admin”:表示管理此命名空间的权限。“Create”:表示在此命名空间创建HBase表的权限。“Read”:表示访问此命名空间的权限。
- 版本概述翼MR-2.15.2发布时间:2024年9月数据湖、数据服务、实时数据流场景新增组件JeekeFS(1.1.1)Doris组件版本升级至2....功能新增磁盘扩容功能新增集群服务管理功能新增自动续费功能新增IPv6访问资源能力新增反亲和性配置能力组件版本Doris2.1.2Elasticsearch7.10.2HBase2.4.12HDFS3.3.3Hive3.1.2Kafka2.8.1Kerberos1.18.2Kibana7.10.2Kyuubi1.6.0OpenLDAP2.4.50Ranger2.2.0Spark3.3.3Trino406YARN3.3.3ZooKeeper3.7.1Flink1.16.2Knox1.6.1Logstash7.10.2Iceberg1.4.3Hudi0.12.2JeekeFS1.1.1
- 创建角色详见下表:HBase权限描述 支持权限管理的资源 权限设置说明 “SUPER_USER_GROUP” 选中时表示授予HBase管理员权限。 “Global” HBase的一种资源类型,表示HBase整体组件。 “Namespace” HBase的一种资源类型,表示命名空间,用来保存HBase表。具体权限:“Admin”:表示管理此命名空间的权限。“Create”:表示在此命名空间创建HBase表的权限。“Read”:表示访问此命名空间的权限。
- 滚动重启集群说明 “数据节点滚动重启并发数”、“批次时间间隔”、“批次容错阈值”等高级参数需要根据实际情况合理设置,否则可能导致服务业务中断或者严重影响性能,请谨慎调整。例如:“数据节点滚动重启并发数”过大,同时重启多个实例导致服务业务中断或者由于剩余工作实例较少严重影响性能。“批次容错阈值”过大,某一批次实例失败后继续重启下一批次实例,导致服务业务中断。 单击“确定”,等待滚动重启完成。
- 关于日志审计日志 DDL(数据定义)语句 创建表 删除表 修改表 增加列族 修改列族 删除列族 启用表 禁用表 用户信息修改 修改密码 用户登录 ...HBase审计日志 DML(数据操作)语句 put数据(针对hbase:meta表、_ctmeta_表和hbase:acl表) 删除数据(针对hbase:meta表、_ctmeta_表和hbase:acl表) 检查并put数据(针对hbase:meta表、_ctmeta_表和hbase:acl表) 检查并删除数据(针对hbase:meta表、_ctmeta_
- 支持滚动重启例如:在滚动重启HBase服务时候,如果原生界面上每个RegionServer上每秒的请求数超过1W,需要增大handle数来预防重启过程中负载过大导致的RegionServer重启失败。 重启前需要观察当前hbase的负载请求数(原生界面上每个rs的请求数如果超过1W,需要增大handle数来预防到时候负载不过来) 在集群Core节点个数小于6个的情况下,可能会出现业务短时间受影响的情况。 请优先使用滚动重启操作来重启实例或服务,并勾选“仅重启配置过期的实例”。
- 新建表/文件迁移作业仅当HBase或Hive作为目的数据源时该参数才显示。 3 分片重试次数 每个分片执行失败时的重试次数,为0表示不重试。 0 是否写入脏数据 选择是否记录脏数据,默认不记录脏数据。CDM中脏数据指的是数据格式非法的数据。当源数据中存在脏数据时,建议您打开此配置。否则可能导致迁移作业失败。 是 脏数据写入连接 当“是否写入脏数据”为“是”才显示该参数。脏数据要写入的连接,目前只支持写入到OBS连接。
- 开启Kerberos认证集群中的默认用户清单hbase Hbase@123 HBase系统管理员,用户权限:集群管理权限:表的Enable、Disable操作,触发MajorCompact,ACL操作授权或回收权限,集群关闭等操作相关的权限表管理权限:建表、修改表、删除表等操作权限数据管理权限:表级别、列族级别以及列级别的数据读写权限访问HBase WebUI的权限。
天翼云最新活动
售前咨询热线
400-810-9889转1
关注天翼云
©2025
天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
公司地址：北京市东城区青龙胡同甲1号、3号2幢2层205-32室
