全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

创建Kafka集群

最近更新时间:2025-09-28 17:16:13

创建集群

  1. 进入Kafka集群开通页面

    • 登录金山云托管Hadoop控制台,进入集群管理页面。

    • 点击 新建集群 进入集群开通页面。

  1. 基础信息配置

配置项

说明

业务场景

选择消息中间件。

集群类型

选择Kafka。

产品版本

Kafka目前提供2.8.1和2.2.2两种版本进行选择。

计费方式

选择符合需求的计费方式,详情请参见计费方式

集群名称

通过设置集群名称,来区分不同的Kafka集群。

集群名称长度限制为1-25个字符,仅支持大小写字母、数字、减号和下划线。

必选组件

默认选择zookeeper最新版本和选择的Kafka产品版本。

所属项目组

您可以将集群加入项目,保持EBS、EIP、SLB、主机、KMR集群、项目一致,详情请参见项目管理

登录方式

有密码,密匙和创建后设置三种。默认选择创建后设置。

  • 若通过密码访问集群,可设置管理员账户密码。

  • 若通过密匙访问集群,点击绑定密钥,详细请参阅SSH密钥管理

  1. 节点组配置

配置项

说明

数据中心

选择希望部署 Kafka 服务的地理区域。不同数据中心间数据隔离,建议选择离您业务/用户位置相近的区域,降低网络延迟。

部署方式和可用区

单可用区:所有服务组件均部署在您选择的同一个可用区内。成本较低,但该可用区故障可能导致整个集群不可用。

三可用区:服务组件会尽可能分布部署在您选择的三个不同可用区内。提供高可用性,单个可用区故障不会导致整个集群不可用,增强服务容灾能力。

Common节点组

部署独立分布式协调器组件ZooKeeper。保证集群高稳定性,部署节点个数必须是单数,最少3个。建议开启Common节点。

Broker节点组

消息处理核心引擎,负责消息存储、生产消费和分区复制。建议保持默认开启状态,关闭后将导致所有消息服务不可用。

  • 节点配置详情

配置项

说明

节点规格

计算资源配置,定义单个节点的CPU和内存资源。

系统盘配置

节点的操作系统盘,用于安装系统和Kafka程序。

  • 类型

  • 大小

系统盘类型有SSD云盘、高效云盘、本地系统盘和极速云盘ESSD,其中云盘的具体性能情况参考云硬盘EBS-产品分类

请根据需求选择合适的系统盘类型和大小。

数据盘配置

消息数据存储盘,用于实际存储Kafka日志数据。

  • 类型

  • 大小

  • 数量

数据盘类型有云数据盘、本地数据盘、直连盘和极速云盘ESSD,其中云数据盘和极速云盘ESSD的具体性能情况参考云硬盘EBS-产品分类

请根据需求选择合适的数据盘类型、大小和数量,数据盘数量范围在1~8块之间。

可用区

同上述选择对应数据中心的部署方式和可用区。

  • 节点类型

  • 节点数量

节点类型指虚拟机机型系列标识,节点数量指的是当前可用区部署节点的数量。

  1. 网络及其他配置

配置项

说明

EIP绑定

EIP是绑定在集群Master节点上的公网IP地址,主要用于集群的远程管理和作业提交。如您有其他需求,或创建完成集群之后要绑定公网EIP,您可去EIP控制台操作。

VPC网络和VPC子网

可以使用同一数据中心内任一VPC来创建集群,若该地域无可用VPC,单击创建VPC前往新建,同时创建该VPC下EndPoint子网及与集群同一可用区内VPC子网。

所属安全组和KMR安全组

可新建一个安全组,如果已有KMR安全组,则可以直接选择使用。

KEC镜像和镜像列表

可以选择默认镜像和自定义镜像,操作系统类别只支持CentOS。

标签

通过创建合适的标签来进行资源分类与元数据标识。

  1. 填写完上述信息后,进入“确认配置”页面。

  1. 点击"购买",提交订单并付款,即完成Kafka集群开通。

查看创建的集群

  1. 返回控制台,在集群管理页面查看Kafka集群是否创建成功。

    集群创建时,状态为“创建中”;当集群状态变为“运行中”说明集群创建成功。

  2. 点击目标集群名称,进入集群信息页。

    该页面包含以下核心信息模块:

    模块

    关键信息说明

    基本信息

    包含集群的核心标识(如集群名称,状态和ID)、空间配置(如数据中心和可用区分布)、业务属性(如所属项目、计费方式等)、生命周期和管理属性等信息。

    组件信息

    包含服务名称与版本。

    网络信息

    VPC网络配置(名称、CIDR);各可用区子网关联信息;WebUI访问安全策略(如公网访问)。

    节点配置

    按可用区展示不同节点的分布与规格详情,包括机型规格与资源配置。

文档导读
纯净模式常规模式

纯净模式

点击可全屏预览文档内容
文档反馈