活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      文档中心

      分布式消息服务Kafka

      分布式消息服务Kafka

        • 产品动态
        • 产品简介
        • 产品定义
        • 产品优势
        • 应用场景
        • 产品规格
        • 与RabbitMQ、RocketMQ的差异
        • 与开源Kafka的差异
        • 约束与限制
        • 与其他云服务的关系
        • Kafka相关概念
        • 权限管理
        • 计费说明
        • 计费项
        • 计费模式
        • 产品价格
        • 快速入门
        • 入门指引
        • 步骤一:准备环境
        • 步骤二:创建Kafka实例
        • (可选)步骤三:创建Topic
        • 步骤四:连接实例生产消费消息
        • 不使用SASL证书连接
        • 使用SASL证书连接
        • 步骤五:配置必须的监控告警
        • 用户指南
        • 权限管理
        • 创建用户并授权使用DMS for Kafka
        • DMS for Kafka自定义策略
        • DMS for Kafka资源
        • DMS for Kafka请求条件
        • 准备实例依赖资源
        • 购买实例
        • 连接Kafka实例
        • 配置Kafka实例的公网访问
        • 连接未开启SASL的Kafka实例
        • 连接已开启SASL的Kafka实例
        • 连接和查看Kafka Manager
        • 使用DNAT访问Kafka实例
        • 制作并替换证书
        • 实例管理
        • 变更实例规格
        • 查看实例
        • 重启实例
        • 删除实例
        • 修改实例信息
        • 设置实例公网访问
        • 按需转包周期
        • 重置Kafka密码
        • 重置Kafka Manager密码
        • 重启Kafka Manager
        • 管理实例标签
        • 查看实例后台任务
        • 查看磁盘使用量
        • Topic管理
        • 创建Topic
        • 删除Topic
        • 修改Topic老化时间
        • 修改Topic分区数
        • 修改同步复制和同步落盘
        • 修改分区平衡
        • 查看示例代码
        • 导出Topic
        • 设置Topic权限
        • 查看Topic日志
        • 消息管理
        • 查询消息
        • 删除消息
        • SASL_SSL用户管理
        • 创建SASL_SSL用户
        • 重置SASL_SSL密码
        • 删除SASL_SSL用户
        • 消费组管理
        • 创建消费组
        • 查询消费组信息
        • 删除消费组
        • 重置消费进度
        • 查看消费者连接地址
        • 流控管理
        • 创建流控
        • 编辑流控
        • 删除流控
        • 查看流控监控
        • 修改配置参数
        • 调整资源配额
        • 监控
        • 查看监控数据
        • 支持的监控指标
        • 必须配置的监控告警
        • Kafka数据迁移
        • Kafka数据迁移概述
        • 使用Smart Connect迁移Kafka数据
        • 开启Smart Connect
        • 配置Kafka之间的数据复制
        • 配置Kafka数据转储至OBS
        • 管理Smart Connect任务
        • 关闭Smart Connect
        • 云审计服务支持的关键操作
        • 云审计服务支持的DMS for Kafka操作列表
        • 查看云审计日志
        • 最佳实践
        • DMS for Kafka 消费者poll的优化
        • 如何提高消息处理效率
        • Kafka业务迁移
        • 使用MirrorMaker跨集群数据同步
        • 日志收集系统Flume接入Kafka
        • Kafka客户端使用规范
        • 流数据实时处理框架Flink接入Kafka
        • 日志处理工具Logstash接入Kafka
        • 如何设置消息堆积数超过阈值时,发送告警短信/邮件
        • Kafka Connect接入Kafka
        • Kafka客户端参数配置建议
        • 网络带宽利用率监控告警配置指导
        • 常见问题
        • 实例问题
        • 实例规格变更问题
        • 连接问题
        • Topic和分区问题
        • 消费组问题
        • 消息类问题
        • Kafka Manager问题
        • 监控告警问题
        • 视频专区
        • 文档下载
        • 相关协议
        • 分布式消息服务Kafka服务等级协议(新)
        • 分布式消息服务Kafka服务协议
          无相关产品

          本页目录

          帮助中心分布式消息服务Kafka常见问题实例问题
          实例问题
          更新时间 2024-09-24 23:10:11
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          最近更新时间: 2024-09-24 23:10:11
          分享文章
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          本文主要介绍实例问题。

          为什么可用区不能选择2个?

          如果您需要提高Kafka实例的可靠性,在创建实例时,建议选择3个或以上的可用区,不支持选择2个可用区。原因如下:

          每个Kafka实例包含3个Zookeeper节点,Zookeeper集群用来管理Kafka实例的配置,如果Zookeeper集群出现问题,Kafka实例将无法正常运行。至少2个Zookeeper节点正常运行,才能保证Zookeeper集群正常运行。

          假设选择2个可用区,可用区1有1个Zookeeper节点,可用区2有2个Zookeeper节点。如果可用区1故障,则Kafka实例能正常使用;如果可用区2故障,则不能正常使用。Kafka实例可用的场景只有50%,所以不支持选择2个可用区。

          创建实例时为什么无法查看子网和安全组等信息?

          创建实例时,如果无法查看虚拟私有云、子网、安全组、弹性IP,可能原因是该用户的用户组无Server Administrator和VPC Administrator权限。增加用户组权限的详细步骤,请参考《统一身份认证服务 用户指南》的“用户指南 > 用户组及授权 > 查看或修改用户组”章节。

          如何选择Kafka实例的存储空间?

          存储空间主要是指用于存储消息(包括副本中的消息)、日志和元数据所需要的空间。选择存储空间时,需要选择磁盘类型和磁盘大小。更多磁盘信息,请参考《云硬盘用户指南》的“简介 > 磁盘类型及性能介绍”章节

          假设业务存储数据保留天数内磁盘大小为100GB,则磁盘容量最少为 100GB*副本数 + 预留磁盘大小100GB 。Kafka集群中,每个Kafka节点会使用33GB的磁盘作为日志和Zookeeper数据的存储,因而实际可用存储会小于购买存储。

          其中,副本数在创建Topic时可以选择,默认为3副本存储。如果开启了Kafka自动创建Topic功能,自动创建的Topic默认为3副本,副本数可以通过“配置参数”页签中的“default.replication.factor”修改。

          Kafka实例的超高IO和高IO如何选择?

          • 高IO:平均时延1-3ms,最大带宽150MB/s(读+写)。
          • 超高IO:平均时延1ms,最大带宽350MB/s(读+写)。

          建议选择超高IO,云硬盘服务端压力大场景,都不能达到最大带宽,但是超高IO可达到的带宽比高IO高很多。

          • 如何选择Kafka实例存储容量阈值策略?

          支持以下两种策略:

          • 生产受限策略

          该策略场景下一旦磁盘使用达到容量阈值95%,会导致后续生产失败,但保留了当前磁盘中的数据,直至数据自然老化(Kafka原有的老化机制,数据默认保留3天)。该场景适用于对数据不能丢的业务场景,但是会导致生产业务失败。

          • 自动删除策略

          该策略场景下磁盘使用到达容量阈值95%后,依旧可以正常生产和消费消息,但是会删除最早的10%的消息,以保证磁盘容量充足。该场景优先保障业务不中断,数据可能会丢失。

          以上两种策略的需要基于业务对数据和业务的可靠性来进行选择,只能作为极端场景下的一个种处理方式。 建议业务购买时保证有充足的磁盘容量,避免磁盘的使用达到容量阈值 。

          Kafka服务端支持版本是多少?

          Kafka 1.1.0、2.3.0和2.7版本。

          如果您想要创建Kafka实例,具体步骤请参考购买Kafka实例。

          Kafka实例的ZK地址是什么?

          Kafka实例依赖ZK进行管理,开放ZK可能引发误操作导致业务受损,ZK仅Kafka内部使用,不对外提供服务。

          您可使用Kafka开源客户端连接Kafka实例,调用源生API生产与消费消息。

          创建的Kafka实例是集群模式么?

          一个Kafka实例即为一个集群实例,Kafka实例由3个及以上代理组成。

          Kafka实例是否支持修改访问端口?

          Kafka实例的访问端口固定,不支持修改。

          1.如果是访问未开启SASL的Kafka实例

          支持的访问方式如下:同一VPC内访问、公网访问、跨VPC访问和DNAT访问。

          • 同一VPC内使用IPv4地址访问,访问端口为 9092 。
          • 同一VPC内使用IPv6地址访问,访问端口为 9192 。
          • 公网访问,访问端口为 9094 。
          • 使用VPCEP跨VPC访问,访问端口为 9011 。
          • 使用对等连接跨VPC访问,访问端口为 9092 。
          • DNAT访问,访问端口为 9011 。

          2.如果是访问开启SASL的Kafka实例

          支持的访问方式如下:同一VPC内访问、公网访问、跨VPC访问和DNAT访问。

          • 同一VPC内使用IPv4地址访问,访问端口为 9093 。
          • 同一VPC内使用IPv6地址访问,访问端口为 9193 。
          • 公网访问,访问端口为 9095 。
          • 使用VPCEP跨VPC访问,访问端口为 9011 。
          • 使用对等连接跨VPC访问,访问端口为 9093 。
          • DNAT访问,访问端口为 9011 。

          在访问Kafka实例之前,需要确保安全组是否配置正确,配置要求,请参考选择和配置安全组。

          Kafka实例的SSL证书有效期多长?

          Kafka实例开启SASL时,需进行单向认证,证书有效期足够长(超过15年),客户端不需要关注证书过期风险。

          如何将Kafka实例中的数据同步到另一个Kafka实例中?

          Kafka实例之间没有好的实时同步方案,如果需要做实例迁移,可以同时向两个实例生产消息,源实例中的消息可继续消费,待源实例的消息数据全部被消费完或老化后,业务可迁移到新的Kafka实例。

          Kafka实例的SASL_SSL开关如何修改?

          Kafka SASL_SSL开关不支持购买实例后修改,在购买时,请慎重选择,如果购买后需要修改,需要重新购买实例。

          开启IPv6的实例不支持动态修改SASL_SSL开关。

          SASL认证机制如何修改?

          实例创建后,不支持修改SASL认证机制。如果需要修改,请重新购买实例。

          修改企业项目,是否会导致Kafka重启?

          修改企业项目不会导致Kafka重启。

          Kafka服务和ZK是部署在相同的虚拟机中,还是分开部署?

          Kafka服务和ZK部署在相同的虚拟机中。

          Kafka包周期实例不支持删除吗?

          可以删除。登录Kafka控制台,在包周期实例所在行,单击“更多 > 退订”,完成实例的删除。

          Kafka支持哪些加密套件?

          由于安全问题,支持的加密套件为TLS_ECDHE_ECDSA_WITH_AES_128_CBC_SHA256,TLS_ECDHE_RSA_WITH_AES_128_CBC_SHA256和TLS_ECDHE_RSA_WITH_AES_128_GCM_SHA256。

          购买实例时选择的单AZ,怎样可以扩展为多AZ?

          已购买的实例无法扩展AZ,请重新购买多AZ的实例。

          Kafka是否支持跨AZ容灾?已经购买的实例在哪里查看是否为跨AZ?

          Kafka实例支持跨AZ容灾,在购买实例时,选择多个可用区即可实现跨AZ容灾。

          已购买的实例,在实例详情页“基本信息”页面的“网络”区域,查看可用区数量。多于一个可用区时,表示已实现跨AZ容灾。

          图实例基本信息

          图片12.png

          Kafka支持磁盘加密吗?

          Kafka实例不支持磁盘加密。

          Kafka实例创建后,能修改VPC和子网吗?

          不能修改VPC和子网。

          有没有Kafka Stream的案例?

          Kafka Stream的案例请参见Kafka Stream的官网。

          Kafka实例版本可以升级吗?

          Kafka实例创建成功后,实例版本不支持升级。您可以重新创建Kafka实例,实现升级Kafka实例的版本。

          实例版本在控制台和Kafka Manager上显示不一致?

          Kafka实例的版本以控制台为准。Kafka Manager使用了开源Kafka 2.2.0的公共信息配置,所以显示的版本是2.2.0,和购买的Kafka实例版本没有关系。

          怎样重新绑定公网IP?

          首先在分布式消息服务Kafka控制台,单击Kafka实例名称,进入实例详情页。在“基本信息”页面的“连接信息”区域,关闭“公网访问”,然后重新打开“公网访问”,并选择需要绑定的公网IP地址。

          文档反馈

          建议您登录后反馈,可在建议与反馈里查看问题处理进度

          鼠标选中文档,精准反馈问题

          选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

          知道了

          上一篇 :  常见问题
          下一篇 :  实例规格变更问题
          搜索 关闭
          ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
          公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
          备案 京公网安备11010802043424号 京ICP备 2021034386号
          ©2025天翼云科技有限公司版权所有
          京ICP备 2021034386号
          备案 京公网安备11010802043424号
          增值电信业务经营许可证A2.B1.B2-20090001
          用户协议 隐私政策 法律声明