您可以通過Gateway集群實現負載均衡和安全隔離,也可以通過Gateway集群向E-MapReduce集群提交作業。本文為您介紹如何在E-MapReduce中創建Gateway集群。
前提條件
已經在E-MapReduce中創建了Hadoop集群或Kafka集群,詳情請參見創建集群。
如果您在2022年12月19日17點(UTC+8)以后第一次創建EMR集群,則不能選擇Hadoop、Kafka集群類型。
使用限制
本文檔僅適用于Hadoop集群和Kafka集群。DataLake、OLAP和DataFlow集群的Gateway環境部署信息,請參見使用EMR-CLI自定義部署Gateway環境。
操作步驟
登錄EMR on ECS。
在EMR on ECS頁面,單擊目標集群的集群名稱。
在基礎信息頁面,選擇右上角的全部操作>創建Gateway。
在創建Gateway頁面,配置各參數。
模塊
參數
描述
關聯設置
地域
Gateway集群所在的物理位置。
資源組
選擇Gateway集群所屬的資源組。
如果需要創建新的資源組,單擊創建資源組,詳細信息請參見創建資源組。
關聯集群
根據所選地域篩選出Gateway集群可以關聯的計算集群。待關聯的集群有以下要求:
集群狀態須為運行中。
僅支持關聯Hadoop或Kafka類型的集群。
說明當選擇關聯集群之后,Gateway集群的VPC默認與關聯集群一致。新舊版控制臺的集群均可關聯。
基礎設置
付費類型
包年包月:一種預付費模式,即先付費再使用。
按量付費:一種后付費模式,即先使用再付費。按量付費是根據實際使用的小時數來支付費用,每小時計費一次,適合短期的測試任務或是靈活的動態任務。
可用區
關聯集群所在的可用區(Zone)。
交換機
選擇在對應的VPC下對應可用區的交換機。
默認安全組
關聯集群所屬的安全組。
掛載公網
Gateway是否掛載彈性公網IP地址。
節點組
實例類型:該地域內可選擇的ECS實例規格,詳細說明請參見實例規格族。
系統盤:Gateway節點使用的系統盤類型。系統盤有高效云盤、ESSD云盤和SSD云盤三種,根據不同機型和不同的Region,系統盤顯示類型會有不同。系統盤默認隨著集群的釋放而釋放。
系統盤大小請根據需要調整。取值范圍為60 ~ 500 GiB。
數據盤:Gateway節點使用的數據盤類型。數據盤有高效云盤、ESSD云盤和SSD云盤三種,根據不同機型和不同的Region,數據盤顯示類型會有不同。數據盤默認隨著集群的釋放而釋放。
數據盤大小請根據需要調整。取值范圍為40 ~ 32768 GiB。
實例數量:默認1臺,您可以根據需要調整。
集群名稱
Gateway集群的名稱,長度限制為1~64個字符,只允許包含中文、字母、數字、短劃線(-)、下劃線(_)。
身份憑證
登錄Gateway集群所有節點的用戶憑證。
密碼:在文本框中輸入登錄Gateway的密碼。長度限制為8~30個字符,且必須同時包含大寫字母、小寫字母、數字和特殊字符。
支持輸入以下字符:
!@#$%^&*
密鑰對:在列表中選擇登錄Gateway的密鑰對名稱。如果還未創建過密鑰對,則您可以單擊后面的新建密鑰對,進入ECS管理控制臺進行創建。
請妥善保管好密鑰對所對應的私鑰文件(.pem文件)。Gateway創建成功后,該密鑰對的公鑰部分會自動綁定到Gateway所在的云服務器ECS上,當通過SSH登錄Gateway時,您需要輸入私鑰文件中的私鑰。
高級設置
ECS應用角色
通過RAM角色為在集群上運行的應用程序提供調用其他阿里云服務所需的必要權限,無需調整,使用默認即可。默認值為AliyunECSInstanceForEMRRole。
引導操作
標簽
可選配置,您可以在創建集群時綁定標簽,也可以在集群創建完成后,詳情請參見設置標簽。
數據盤加密
可選配置。僅支持在創建集群時開啟該功能,詳情請參見開啟數據盤加密。
完成上述參數配置后,選中服務協議,單擊創建。
創建成功后,集群的狀態變為空閑。