使用 Universal 安装工具在 AWS 上的 DC/OS

使用 Universal 安装工具在 AWS 上的 DC/OS 指南

要使用 Mesosphere Universal 安装工具配合 Amazon Web Services，必须安装 AWS 命令行界面 (AWS CLI) 并配置为您将用于资源的 AWS 帐户的安全凭据。以下操作说明将引导您完成必要的帐户创建和凭据，以便成功配置 AWS CLI 并安装 DC/OS。

先决条件

  • Linux、macOS 或 Windows
  • 命令行 shell 终端，例如 Bash 或 PowerShell
  • 已验证的 Amazon Web Services (AWS) 帐户和具有权限的 AWS IAM 用户配置文件
  • Amazon aws-cli，需要 Python 2 版本 2.6.5+ 或 Python 3 版本 3.3+

安装 Terraform

访问 Terraform 下载页，获得适用于 Linux、macOS 和 Windows 的捆绑安装和支持。

如果您在安装了 Homebrew 的 Mac 环境中，只需运行以下命令：

  1. brew install terraform

已安装 Chocolatey 的 Windows 用户，请运行：

  1. choco install terraform -y

安装和配置 Amazon CLI

  1. 如果您还没有 Amazon Web Services 帐户，请建立一个帐户。确保至少在 AWS IAM 中设置至少一个用户角色，以获取必要的访问密钥。

  2. 如果您还没有 AWS 命令行界面 (AWS CLI)，请建立一个界面。使用 pip 的 Python 用户可以使用以下命令安装最新版本的 AWS CLI：

    1. pip install awscli --upgrade --user

    有关其他安装方法，请参阅 安装 AWS CLI。

  3. 在您拥有 AWS CLI 后，需要将其连接到您想要使用的帐户。如果您已经安装 CLI，则您可能已经设置了凭据。要设置您的凭据，或根据需要随时更新凭据，请运行：

    1. aws configure --profile=<your-profile-name>

    AWS CLI 将请求四个信息。粘贴或输入 Amazon 提供给您的访问密钥 ID 和秘密访问密钥，如果您设置了上述区域，则已经为您填写：

    1. AWS Access Key ID [None]: <accesskey>
    2. AWS Secret Access Key [None]: <secretkey>
    3. Default region name [None]: <choose-a-region>
    4. Default output format [None]: <if-blank-default-is-json>

    如果您以前添加了任何值，都会作为 [先前的值] 在方括号内列出。保持输入空白将会保留该值不变，在此添加或更改某个值将会更新该值。

    参阅 配置 AWS CLI，了解有关设置凭据和用户配置文件的更多信息。

  4. 设置 AWS_PROFILE。Terraform 需要将您的凭据传达给 AWS。这应该是与在上面配置 AWS CLI 时输入的访问密钥相关联的同一配置文件。

    1. export AWS_PROFILE="<your-AWS-profile>"

    确保已设置：

    1. echo $AWS_PROFILE
    2. <your-AWS-profile>

为群集设置 SSH 凭据

TerraForm 需要发送 SSH 密钥才能安全地连接到其创建的节点。如果您已经有了一个密钥对，并已添加到您的 SSH 代理，则可以跳过此部分。

  1. 不确定是否有您想要使用的密钥对？ 列出 SSH 目录的内容。

    1. ls ~/.ssh

  2. 如果没有您喜欢的内容，请按照提示启动 SSH-Keygen 程序创建新密钥对。

    1. ssh-keygen -t rsa

  3. 如果尚未运行代理并加载密钥，请启动代理将密钥添加到 SSH 代理：

    1. eval "$(ssh-agent -s)"
    1. ssh-add ~/.ssh/<your-key-name>

创建 DC/OS 群集

  1. 首先，我们来创建一个本地文件夹并用 cd 命令进入该文件夹。此文件夹将用作下载所有必需的 Terraform 模块并保存您即将创建的群集的配置的预备区域。

    1. mkdir dcos-aws-demo && cd dcos-aws-demo

  2. 在该文件夹中创建一个名为 main.tf 的文件，这是每次创建计划时 Mesosphere Universal 安装工具都会调用的配置文件。该文件的名称应始终是 main.tf。

    1. touch main.tf

  3. 在您选择的代码编辑器中打开该文件，然后粘贴以下内容。注意代码块右上角的复制图标，可将代码复制到剪贴板：

    1. provider "aws" {
    2.   # Change your default region here
    3.   region = "us-east-1"
    4. }
    6. module "dcos" {
    7.   source  = "dcos-terraform/dcos/aws"
    8.   version = "~> 0.1"
    10.   cluster_name        = "my-dcos-demo"
    11.   ssh_public_key_file = "<path-to-public-key-file>"
    12.   admin_ips           = ["${data.http.whatismyip.body}/32"]
    14.   num_masters        = "1"
    15.   num_private_agents = "2"
    16.   num_public_agents  = "1"
    18.   dcos_version = "1.12.0"
    20.   dcos_instance_os    = "centos_7.5"
    21.   bootstrap_instance_type = "t2.medium"
    22.   masters_instance_type  = "t2.medium"
    23.   private_agents_instance_type = "t2.medium"
    24.   public_agents_instance_type = "t2.medium"
    26.   providers = {
    27.     aws = "aws"
    28.   }
    30.   # dcos_variant              = "ee"
    31.   # dcos_license_key_contents = "${file("./license.txt")}"
    32.   dcos_variant = "open"
    34.   dcos_install_mode = "${var.dcos_install_mode}"
    35. }
    37. variable "dcos_install_mode" {
    38.   description = "specifies which type of command to execute. Options: install or upgrade"
    39.   default     = "install"
    40. }
    42. # Used to determine your public IP for forwarding rules
    43. data "http" "whatismyip" {
    44.   url = "http://whatismyip.akamai.com/"
    45. }
    47. output "masters-ips" {
    48.   value = "${module.dcos.masters-ips}"
    49. }
    51. output "cluster-address" {
    52.   value = "${module.dcos.masters-loadbalancer}"
    53. }
    55. output "public-agents-loadbalancer" {
    56.   value = "${module.dcos.public-agents-loadbalancer}"
    57. }

  4. 有一个主要变量，必须设置该变量才能完成 main.tf：

    • ssh_public_key_file = "<path-to-public-key-file>"：您群集的公钥的路径，按照我们的示例，该路径为：

      1. "~/.ssh/aws-key.pub"

  5. region 是设定 AWS 区域的一项设置，此 DC/OS 群集将在该区域上启动。虽然此项设置目前设为 “us-east-1”，但也可以更改为任何其他区域（例如 “us-west-1”、“us-west-2”、“us-east-2” 等）。如需完整列表，请参阅 [配置参考。

  6. 企业用户可以对该区段取消注释/添加注释，实现类似于以下注释，将该位置插入到许可证密钥。Enterprise

    1. dcos_variant              = "ee"
    2. dcos_license_key_contents = "${file("./license.txt")}"
    3. # dcos_variant = "open"

  7. 此示例配置文件将使您开始安装具有以下节点的开源 DC/OS 1.12.0 群集：

    • 1 个管理节点
    • 2 个专用代理
    • 1 个公共代理

    如果您想更改群集名称或改变管理/代理节点数量，也可以调整这些值。群集名称必须唯一，包含字母数字字符、’-’、’_’ 或 ‘.’，开头和结尾均为字母数字字符，且不超过 24 个字符。您可以在此查阅其他 [输入变量及其描述。

    模块下方还列出一些简单的助手工具，可找到您的公共 IP，并指定在群集创建完成后应打印以下输出：

    • master-ips 您的 DC/OS 管理节点列表
    • cluster-address 在设置群集后用来访问 DC/OS UI 的 URL。
    • public-agent-loadbalancer 您的公共可路由服务的 URL。

  8. 检查您是否已将云提供商和公钥路径插入到 main.tf，按需要更改或添加任何其他变量，然后保存并关闭您的文件。

  9. 现在，开始实际创建群集和安装 DC/OS 的操作。首先，初始化项目的本地设置和数据。确保您仍在您创建 dcos-aws-demo 文件的 main.tf 文件夹中工作，然后运行初始化。

    1. terraform init
    1. Terraform has been successfully initialized!
    3. You may now begin working with Terraform. Try running "terraform plan" to see
    4. any changes that are required for your infrastructure. All Terraform commands
    5. should now work.
    7. If you ever set or change modules or backend configuration for Terraform,
    8. rerun this command to reinitialize your environment. If you forget, other
    9. commands will detect it and remind you to do so if necessary.

    注意：如果 terraform 无法连接到您的提供程序，确保您已登录并导出凭据。请参阅 AWS 提供程序说明，了解更多信息。

  10. 在初始化 Terraform 之后，下一步是运行执行计划器并将计划保存到静态文件 - 在本例中，即 plan.out。

    1. terraform plan -out=plan.out

    将执行计划写入文件可以让我们将执行计划传递给以下 apply 命令，并帮助我们保证计划的准确性。请注意，此文件只能由 Terraform 读取。

    此后，我们应该看到类似下面的消息，确认我们已成功保存到 plan.out 文件。此文件应显示在您的 dcos-aws-demo 文件夹中的 main.tf 旁边。

    AWS - 图1

    您每次运行 terraform plan 时，输出总是详细列出您的计划将要添加、更改或销毁的资源。由于我们是首次创建 DC/OS 群集，因此输出告诉我们，我们的计划将导致添加 38 件基础设施/资源。

  11. 下一步是让 Terraform 构建/部署我们的计划。运行以下命令。

    1. terraform apply plan.out

    坐下来放松一下，等一等吧！您的 DC/OS 群集的基础架构正在您的注视下创建。这可能需要几分钟。

    在 Terraform 完成应用计划后，您应该看到类似于下面的输出：

    AWS - 图2

    祝贺您，成功启动并运行！

登录 DC/OS

要登录并开始浏览您的群集，请导航到 CLI 的输出中列出的 cluster-address。您可以从这里选择您的提供程序，创建超级用户帐户 Open Source，或使用您的特定企业凭据登录 Enterprise。

AWS - 图3

AWS - 图4

扩展群集

在创建初始群集后，TerraForm 很容易扩展您的群集以添加更多代理（公共或专用）。只需按以下说明操作。

  1. 在 main.tf 文件中，增加您的 num_private_agents 和/或 num_public_agents 的值。在本示例中，我们要将群集从 2 个专用代理扩展到 3 个，只更改该行，并保存文件。

    1. num_masters        = "1"
    2. num_private_agents = "3"
    3. num_public_agents  = "1"

  2. 既然我们已经更改 main.tf，我们需要重新运行新的执行计划。

    1. terraform plan -out=plan.out

    这样做有助于我们确保状态稳定，并确认我们只会创建必要的资源，将我们的专用代理扩展到所需的数量。

    AWS - 图5

    您应该看到类似以上内容的消息。扩展集群的专用代理的结果是，将会添加 3 个资源（1 个实例资源和 2 个空资源，在幕后处理 DC/OS 安装和先决条件）。

  3. 现在，我们的计划已设置，就像前面一样，我们来让 Terraform 构建/部署该计划。

    1. terraform apply plan.out

    AWS - 图6

    当您看到类似于以上消息的输出后，检查您的 DC/OS 群集，确保已添加其他代理。

    您现在应该看到总共 4 个通过 DC/OS UI 连接的节点，如下所示。

    AWS - 图7

升级群集

Terraform 还可以轻松地将我们的群集升级到更新版本的 DC/OS。如果您有兴趣了解有关 Terraform 执行的升级程序的更多信息，请参阅官方 [DC/OS 升级文档。

  1. 为了执行升级，我们需要返回到我们的 main.tf 并将当前 DC/OS 版本 (dcos_version) 修改为较新版本，如本示例的 1.12.1，同时还需指定另一个参数 (dcos_install_mode)。默认情况下，此参数设置为 install，这就是我们在创建初始 DC/OS 群集和扩展群集时能够不设置该参数的原因 .

    重要信息：在执行升级时，不要更改任何管理节点、代理或公共节点的数量。

    1. dcos_version = "1.12.1"

  2. 重新运行该执行计划，通过设置在额外变量中读取的标记，暂时覆盖默认安装模式。

    1. terraform plan -out=plan.out -var dcos_install_mode=upgrade

    您应该看到如下的输出，main.tf 现在设置为在新版本的 DC/OS 上正常操作。

    AWS - 图8

  3. 应用该计划。

    1. terraform apply plan.out

    应用完成后，您可以验证群集是否已通过 DC/OS UI 升级。

    AWS - 图9

删除群集

如果想要销毁您的群集，则使用以下命令并等待其完成。

  1. terraform destroy

重要信息：运行此命令将导致整个群集及其所有关联的资源被销毁。只有当您绝对确定不再需要访问您的群集时，才运行此命令。

您需要输入 yes 进行验证。

AWS - 图10

配置参考 - AWS

使用 Universal 安装工具在 AWS 上配置您的 DC/OS 安装…