活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心
      文档中心

      分布式消息服务Kafka

      分布式消息服务Kafka

        • 产品动态
        • 产品简介
        • 产品定义
        • 产品优势
        • 应用场景
        • 产品规格
        • 与RabbitMQ、RocketMQ的差异
        • 与开源Kafka的差异
        • 约束与限制
        • 与其他云服务的关系
        • Kafka相关概念
        • 权限管理
        • 计费说明
        • 计费项
        • 计费模式
        • 产品价格
        • 快速入门
        • 入门指引
        • 步骤一:准备环境
        • 步骤二:创建Kafka实例
        • (可选)步骤三:创建Topic
        • 步骤四:连接实例生产消费消息
        • 不使用SASL证书连接
        • 使用SASL证书连接
        • 步骤五:配置必须的监控告警
        • 用户指南
        • 权限管理
        • 创建用户并授权使用DMS for Kafka
        • DMS for Kafka自定义策略
        • DMS for Kafka资源
        • DMS for Kafka请求条件
        • 准备实例依赖资源
        • 购买实例
        • 连接Kafka实例
        • 配置Kafka实例的公网访问
        • 连接未开启SASL的Kafka实例
        • 连接已开启SASL的Kafka实例
        • 连接和查看Kafka Manager
        • 使用DNAT访问Kafka实例
        • 制作并替换证书
        • 实例管理
        • 变更实例规格
        • 查看实例
        • 重启实例
        • 删除实例
        • 修改实例信息
        • 设置实例公网访问
        • 按需转包周期
        • 重置Kafka密码
        • 重置Kafka Manager密码
        • 重启Kafka Manager
        • 管理实例标签
        • 查看实例后台任务
        • 查看磁盘使用量
        • Topic管理
        • 创建Topic
        • 删除Topic
        • 修改Topic老化时间
        • 修改Topic分区数
        • 修改同步复制和同步落盘
        • 修改分区平衡
        • 查看示例代码
        • 导出Topic
        • 设置Topic权限
        • 查看Topic日志
        • 消息管理
        • 查询消息
        • 删除消息
        • SASL_SSL用户管理
        • 创建SASL_SSL用户
        • 重置SASL_SSL密码
        • 删除SASL_SSL用户
        • 消费组管理
        • 创建消费组
        • 查询消费组信息
        • 删除消费组
        • 重置消费进度
        • 查看消费者连接地址
        • 流控管理
        • 创建流控
        • 编辑流控
        • 删除流控
        • 查看流控监控
        • 修改配置参数
        • 调整资源配额
        • 监控
        • 查看监控数据
        • 支持的监控指标
        • 必须配置的监控告警
        • Kafka数据迁移
        • Kafka数据迁移概述
        • 使用Smart Connect迁移Kafka数据
        • 开启Smart Connect
        • 配置Kafka之间的数据复制
        • 配置Kafka数据转储至OBS
        • 管理Smart Connect任务
        • 关闭Smart Connect
        • 云审计服务支持的关键操作
        • 云审计服务支持的DMS for Kafka操作列表
        • 查看云审计日志
        • 最佳实践
        • DMS for Kafka 消费者poll的优化
        • 如何提高消息处理效率
        • Kafka业务迁移
        • 使用MirrorMaker跨集群数据同步
        • 日志收集系统Flume接入Kafka
        • Kafka客户端使用规范
        • 流数据实时处理框架Flink接入Kafka
        • 日志处理工具Logstash接入Kafka
        • 如何设置消息堆积数超过阈值时,发送告警短信/邮件
        • Kafka Connect接入Kafka
        • Kafka客户端参数配置建议
        • 网络带宽利用率监控告警配置指导
        • 常见问题
        • 实例问题
        • 实例规格变更问题
        • 连接问题
        • Topic和分区问题
        • 消费组问题
        • 消息类问题
        • Kafka Manager问题
        • 监控告警问题
        • 视频专区
        • 文档下载
        • 相关协议
        • 分布式消息服务Kafka服务等级协议(新)
        • 分布式消息服务Kafka服务协议
          无相关产品

          本页目录

          帮助中心分布式消息服务Kafka用户指南购买实例
          购买实例
          更新时间 2024-09-24 17:34:40
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          最近更新时间: 2024-09-24 17:34:40
          分享文章
          • 新浪微博
          • 微信
            扫码分享
          • 复制链接
          本文主要介绍购买实例。

          操作场景

          Kafka实例采用物理隔离的方式部署,租户独占Kafka实例。支持用户自定义规格和自定义特性,您可以根据业务需要定制相应计算能力和存储空间的Kafka实例。

          购买前须知

          • Kafka实例运行于虚拟私有云,购买实例前,需保证有可用的虚拟私有云,并且已配置好安全组与子网。
          • (可选)如果需要通过公网访问Kafka实例,请提前准备弹性IP地址。

          操作步骤

          步骤 1 登录管理控制台。

          步骤 2 在管理控制台右上角单击test_image146.jpg,选择区域。

          说明

          此处请选择与您的应用服务相同的区域。

          步骤 3 在管理控制台左上角单击图片3.png,选择“企业中间件”-“分布式消息服务”-“Kafka专享版”,进入分布式消息服务Kafka专享版页面。

          步骤 4 单击页面右上方的“购买Kafka实例”。

          每个项目默认最多可以创建100个Kafka实例,如果您想创建更多实例,请联系客服申请增加配额。

          步骤 5 选择“计费模式”、“区域”、“项目”和“可用区”。

          步骤 6 设置“实例名称”和“企业项目”。

          步骤 7 设置实例信息。

          1. 版本:Kafka的版本号,支持1.1.0、2.3.0和2.7,根据实际情况选择,推荐使用2.7。 Kafka实例创建后,版本号不支持修改 。
          2. CPU架构:支持“x86计算”,保持默认值即可。
          3. 在“代理规格”中,请根据业务需求选择相应的代理规格。在“代理数量”中,选择代理个数。

          单个代理最大分区数*代理个数=实例分区数上限。当所有Topic的总分区数大于实例分区数上限时,创建Topic失败。

          1. 在“存储空间”区域,您根据实际需要选择存储Kafka数据的磁盘类型和总磁盘大小。 Kafka实例创建后,磁盘类型不支持修改 。

          存储空间包含所有副本存储空间总和,建议根据业务消息体积以及副本数量选择存储空间大小。假设业务存储数据保留天数内磁盘大小为100GB,则磁盘容量最少为100GB*副本数 + 预留磁盘大小100GB。

          创建实例时会进行磁盘格式化,磁盘格式化会导致实际可用磁盘为总磁盘的93%~95%。

          1. 在“容量阈值策略”区域,设置磁盘使用达到容量阈值后的消息处理策略,容量阈值为95%。
          • 自动删除:可以正常生产和消费消息,但是会删除最早的10%的消息,以保证磁盘容量充足。该场景优先保障业务不中断,数据存在丢失的风险。
          • 生产受限:无法继续生产消息,但可以继续消费消息。该场景适用于对数据不能丢的业务场景,但是会导致生产业务失败。

          图 创建Kafka实例

          图片4.png

          步骤 8 设置实例网络环境信息。

          • 在“虚拟私有云”下拉列表,选择已经创建好的虚拟私有云和子网。

          虚拟私有云可以为您的Kafka实例构建隔离的、能自主配置和管理的虚拟网络环境。

          说明

          虚拟私有云和子网在Kafka实例创建完成后,不支持修改。

          子网开启IPv6后,Kafka实例支持IPv6功能。

          • IPv6:子网开启IPv6后,支持设置此参数。开启IPv6后,客户端可以使用IPv6地址连接实例。
          说明
          • 开启IPv6的实例不支持动态开启和关闭SASL_SSL功能。

          • 实例创建成功后,不支持修改IPv6开关。

          • 在“安全组”下拉列表,可以选择已经创建好的安全组。

          安全组是一组对Kafka实例的访问规则的集合。您可以单击右侧的“管理安全组”,跳转到网络控制台的“安全组”页面,查看或创建安全组。

          步骤 9 设置登录Kafka Manager的用户名和密码。创建实例后,Kafka Manager用户名无法修改。

          Kafka Manager是开源的Kafka集群管理工具,实例创建成功后,实例详情页面会展示Kafka Manager登录地址,您可登录Kafka Manager页面,查看Kafka集群的监控、代理等信息。

          步骤 10 设置实例购买时长。

          当选择了“包年/包月”付费模式时,页面才显示“购买时长”参数,您需要根据业务需要选择。

          步骤 11 单击“更多配置”,设置更多相关信息。

          1. 设置“公网访问”。

          “公网访问”默认为关闭状态,您可以选择是否开启。

          开启公网访问后,还需要为每个代理设置对应的IPv4弹性IP地址。

          说明

          如果开启了IPv6功能,支持设置此参数。

          1. 设置“Kafka SASL_SSL”。

          客户端连接Kafka实例时,是否开启SSL认证。开启Kafka SASL_SSL,则数据加密传输,安全性更高。

          “Kafka SASL_SSL”默认为关闭状态,您可以选择是否开启。 Kafka实例创建后,Kafka SASL_SSL开关不支持修改 ,请慎重选择。如果创建后需要修改,需要重新创建实例。

          开启Kafka SASL_SSL后,您可以选择是否开启“SASL PLAIN 机制”。未开启“SASL PLAIN 机制”时,使用SCRAM-SHA-512机制传输数据,开启“SASL PLAIN 机制”后,同时支持SCRAM-SHA-512机制和PLAIN机制,根据实际情况选择其中任意一种配置连接。Kafka实例创建后,SASL PLAIN机制开关不支持修改。

          什么是SCRAM-SHA-512机制和PLAIN机制?

          • SCRAM-SHA-512机制:采用哈希算法对用户名与密码生成凭证,进行身份校验的安全认证机制,比PLAIN机制安全性更高。
          • PLAIN机制:一种简单的用户名密码校验机制。

          开启Kafka SASL_SSL后,您需要设置连接Kafka实例的用户名和密码。

          1. 设置“Kafka自动创建Topic”。

          “Kafka自动创建Topic”默认为关闭状态,您可以选择是否开启。

          开启“Kafka自动创建Topic”表示生产或消费一个未创建的Topic时,系统会自动创建此Topic,此Topic的默认参数值如下:分区数为3,副本数为3,老化时间为72小时,不开启同步复制和同步落盘。

          如果在“配置参数”中修改“log.retention.hours”、“default.replication.factor”或“num.partitions”的参数值,此后自动创建的Topic参数值为修改后的参数值。例如:“num.partitions”修改为“5”,自动创建的Topic参数值如下:分区数为5,副本数为3,老化时间为72小时,不开启同步复制和同步落盘。

          1. 设置“标签”。

          标签用于标识云资源,当您拥有相同类型的许多云资源时,可以使用标签按各种维度(例如用途、所有者或环境)对云资源进行分类。

          • 如果您已经预定义了标签,在“标签键”和“标签值”中选择已经定义的标签键值对。另外,您可以单击“查看预定义标签”,跳转到标签管理服务页面,查看已经预定义的标签,或者创建新的标签。
          • 您也可以直接在“标签键”和“标签值”中设置标签。

          当前每个Kafka实例最多支持设置20个不同标签,标签的命名规格,请参考管理实例标签章节。

          1. 设置实例的描述信息。

          步骤 12 填写完上述信息后,单击“立即购买”,进入规格确认页面。

          步骤 13 确认实例信息无误后,单击“提交”。

          步骤 14 在实例列表页面,查看Kafka实例是否创建成功。

          创建实例大约需要3到15分钟,此时实例的“状态”为“创建中”。

          • 当实例的“状态”变为“运行中”时,说明实例创建成功。
          • 如果创建实例失败,在信息栏的“创建失败任务”中查看创建失败的实例。请参考删除实例,删除创建失败的实例,然后重新创建。如果重新创建仍然失败,请联系客服。
          说明

          创建失败的实例,不会占用其他资源。

          文档反馈

          建议您登录后反馈,可在建议与反馈里查看问题处理进度

          鼠标选中文档,精准反馈问题

          选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

          知道了

          上一篇 :  准备实例依赖资源
          下一篇 :  连接Kafka实例
          搜索 关闭
          ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
          公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
          备案 京公网安备11010802043424号 京ICP备 2021034386号
          ©2025天翼云科技有限公司版权所有
          京ICP备 2021034386号
          备案 京公网安备11010802043424号
          增值电信业务经营许可证A2.B1.B2-20090001
          用户协议 隐私政策 法律声明