创建集群
本小节主要介绍如何通过管理控制台快速创建 QingMR 集群。
前提条件
-
已获取管理控制台登录账号和密码,且账号已实名认证。
-
已获取 QingMR 集群操作权限。
-
在创建 QingMR 集群前,建议先创建好网络资源:
先创建一个 VPC 网络,再创建一个受管私有网络并加入 VPC 中,并开启 DHCP 服务(默认开启)。
说明 为了保障数据安全,QingMR 集群需要运行在受管私有网络中。
操作步骤
-
登录管理控制台。
-
选择产品与服务 > 大数据服务 > 大数据引擎 QingMR,进入 QingMR 集群管理页面。
-
点击立即部署或创建,进入应用部署页面。
-
选择区域。
根据就近原则,选择实例所在区域。 -
配置实例基本属性、应用版本、网络信息、环境参数等信息。
-
(可选)节点设置,包括 HDFS 主节点设置、主节点设置、从节点设置、Client 节点设置。
-
确认配置和费用信息无误后,点击提交,创建集群。
集群创建成功后,可在集群管理页面,查看和管理 QingMR 集群。
基本设置
集群名称、网络、版本、计费方式等基本信息配置。
参数 | 参数说明 |
---|---|
UUID |
系统默认分配的全局唯一标识码,不可修改。 |
名称 |
输入当前集群的名称。默认为 |
描述 |
(可选)对集群的简要描述。 |
版本 |
选择集群版本。 |
资源配置类型 |
选择集群节点云服务器规格。
|
计费方式 |
选择集群计费方式,可选择小时或包年包月。
|
可用区 |
选择使用区域。 |
HDFS 主节点设置(可选)
集群 HDFS 主节点的资源配置,包括云服务器规格、磁盘大小等。
参数 | 参数说明 |
---|---|
CPU |
选择集群节点云服务器 CPU 规格。 |
内存 |
选择集群节点云服务器内存大小。 |
节点类型 |
选择集群节点云服务器类型。
|
节点容量 |
配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。 |
主节点设置(可选)
集群主节点的资源配置,包括云服务器规格、磁盘大小等。
参数 | 参数说明 |
---|---|
CPU |
选择集群节点云服务器 CPU 规格。 |
内存 |
选择集群节点云服务器内存大小。 |
节点类型 |
选择集群节点云服务器类型。
|
数据盘类型 |
选择集群节点磁盘类型。
|
节点容量 |
配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。 |
从节点设置(可选)
集群从节点的资源配置,包括云服务器规格、磁盘大小等。
参数 | 参数说明 |
---|---|
CPU |
选择集群节点云服务器 CPU 规格。 |
内存 |
选择集群节点云服务器内存大小。 |
节点数量 |
选择集群节点数量个数。 默认3个从节点。 |
节点类型 |
选择集群节点云服务器类型。
|
数据盘类型 |
选择集群节点磁盘类型。
|
节点容量 |
配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。 |
Client 节点设置(可选)
Client 节点为用户可访问的节点,可以用它来访问 HDFS ,和集群交互如提交 job 等。
集群客户端的资源配置,包括云服务器规格、磁盘大小等。建议选配 Client 节点,否则某些功能无法使用(除非手动下载相关软件包并配置好)。
说明 |
---|
节点用户名为 ubuntu ,初始密码为 p12cHANgepwD。 |
参数 | 参数说明 |
---|---|
CPU |
选择集群节点云服务器 CPU 规格。 |
内存 |
选择集群节点云服务器内存大小。 |
节点数量 |
选择集群节点数量个数。 Client 节点为可选,如不需要可设置 |
节点类型 |
选择集群节点云服务器类型。
|
数据盘类型 |
选择集群节点磁盘类型。
|
节点容量 |
配置集群数据和日志存储磁盘大小。磁盘大小决定了数据库最大容量以及 IOPS 能力,请根据业务量,可滑动设置或输入数字配置集群磁盘大小。 |
网络设置
通过为集群设置独享私有网络,便于网络过滤控制,且不影响其它私有网络的设置,可确保数据库的对不同业务进行网络隔离。数据库集群仅可加入已连接路由器的私有网络,且需确保私有网络的 DHCP 处于打开状态。
参数 | 参数说明 |
---|---|
VPC网络 |
选择 VPC 网络。
|
私有网络 |
选择私有网络。
|
节点 IP |
配置节点 IP 地址。
|
依赖服务设置
选择依赖服务(External Service)后,可以将依赖服务所有节点加入 QingMR 所有节点的 hosts 文件中。 HBase、Hadoop 或者 Spark 集成的场景经常会有这种需求,选定依赖 HBase 集群即可自动添加 hosts ,无需手动添加。
选择已创建的应用服务。
服务环境参数设置
集群环境参数配置,可修改集群默认配置。或集群创建成功后,在集群详情页面配置参数页签修改参数。
用户协议
阅读云平台 AppCenter 用户协议,并勾选用户协议。