• 热门
  • 基础
  • 数据库
  • 安全
  • 大数据
  • 人工智能
  • 混合云
  • 开发与运维
  • 企业应用

应用服务

行业引擎

全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

创建集群

最近更新时间:2024-08-20 10:14:58

本文介绍如何在KMR控制台,快速创建一个Hadoop集群。

前提条件

注册金山云账号,并完成实名认证,开通相关权限,具体操作请参见准备工作

操作步骤

1.登录金山云托管Hadoop控制台

2.点击左侧导航栏集群管理,点击新建集群进入购买页面。


3. 基础信息配置

配置项

说明

计费方式

选择符合需求的计费方式,详情请参见计费方式

数据中心和可用区

数据中心是物理的数据中心的地理区域,可用区是指金山云在同一地域内电力和网络互相独立的物理数据中心。不同地域的云产品之间内网不互通。一旦创建不能修改。

集群名称

通过设置集群名称,来区分不同的KMR集群。

产品版本和组件

KMR推荐了一些常用的 Hadoop 软件搭配,您也可以根据自身需求组合各软件。默认为最新版本。

所属项目组

您可以将集群加入项目,保持EBS、EIP、SLB、主机、KMR集群、项目一致,详情请参见项目管理

SSH密钥

如果需要通过SSH访问集群,点击绑定密钥,详细请参阅SSH密钥管理

Kerberos身份验证

开启后,集群中的软件以Kerberos安全模式启动,详细请参阅Kerberos简介

  1. 选择并配置节点组

配置项

说明

Master节点组

默认开启。Master节点主要用于集群管理,部署Hadoop集群中的控制进程,如NameNode、ResourceManager、JobHistory等。此外,它还会跟踪每个计算作业的执行状态,监控实例的运行状况,为您提供集群访问的入口。Master节点组支持多种资源,包括云物理主机和虚拟机。1个KMR集群默认有2个互备的主节点。

Core节点组

默认开启。Core节点主要用于执行各项集群计算作业,创建集群完成后也支持按需进行扩容。Core节点是分布式文件系统(HDFS)的数据存储节点,对应于Hadoop集群中的slave节点。Core节点组支持云物理主机和虚拟机。一个KMR集群默认有3个核心节点,可按需追加。

Common节点组

默认开启。部署独立分布式协调器组件ZooKeeper。保证集群高稳定性,部署节点个数必须是单数,最少3个

Common节点,建议开启。

Task节点组

默认关闭。可选择开启Task节点组。Task节点主要用于计算,并不存储数据,不运行DataNode。Task节点组仅支持虚拟机,不支持云物理主机。

GateWay节点组

默认关闭。可选择开启GateWay节点组。Gateway节点会自动部署集群服务所需的客户端运行环境,可进行作业提交和自动化调度等工作,同时用户也可以为Gateway节点绑定EIP,作为集群的数据传输入口。Gateway节点组仅支持虚拟机,不支持云物理主机。

  1. 配置网络及其他

配置项

说明

EIP绑定

EIP是绑定在集群Master节点上的公网IP地址,主要用于集群的远程管理和作业提交。如您有其他需求,或创建完成集群之后要绑定公网EIP,您可去EIP控制台操作。

VPC网络

您可以使用同一数据中心内任一VPC来创建集群,若该地域无可用VPC,单击创建VPC前往新建,同时创建该VPC下EndPoint子网及与集群同一可用区内VPC子网。

所属安全组

您可直接新建一个安全组,如果已有KMR安全组,则可以直接选择使用。

VPC子网

您可以使用该VPC下与集群同一可用区内任一VPC子网来创建集群。

元数据高可用

您可以通过该选项配置常驻集群的高可用元数据库,使用RDS实例元数据库能够提升元数据的可靠性和读写性能。

若使用RDS实例作为元数据的数据库,需要DBA账号有管理员账号权限,您可使用管理员账号进行相关操作或对子账号授权。

  1. 确认配置

该页面会显示您所创建集群的配置清单,以及集群费用。根据不同的资源及计费信息,展示不同的价格信息。当所有信息确认正确有效之后,点击购买即可创建集群。

纯净模式常规模式

纯净模式

点击可全屏预览文档内容

鼠标选中内容,快速反馈问题

如果在文档使用中出现问题,可选中有问题的部分进行快速反馈,我们将跟进处理。
不再提示
好的,我知道了

聆听反馈