TerraformとAnsibleを使ってVPSを構築する

bmf-san インフラストラクチャ
#Ansible#VPS#OpenStack#Terraform

概要

この記事はMakuake Advent Calendar 2020の20日目の記事です。

TerraformとAnsibleを組み合わせてVPS上でサーバー構築をしてみたのでその手順をまとめておこうと思います。

動機

趣味で開発しているアプリケーションのインフラ環境をIaCで整備したかったので、勉強を兼ねてTerraformを使ってみました。

環境

  • Terraform v0.14.0
  • Ansible 2.9.10
  • ConoHa VPS
  • macOS Catalina 10.15.5

ローカルでTerraformを実行してConoHa VPSにサーバーを建てたり、壊したりします。

OpenStack

OpenStackはIaaS環境を構築するためのOSSです。

ConoHaのVPSはOpenStackを採用しており、OpenStack準拠のAPIが用意されています。

cf. www.slideshare.net - "ConoHa" VPS-KVM; OpenStack Grizzly based service

TerraformでOpenStackのproviderを利用することでConoHa VPSにサーバーを構築することができます。

cf. conoha.jp - API

今回はTerraformでOpenStackのproviderを使いますが、AnsibleにもOpenStack Ansibleモジュールというのがあるので、同様のことはAnsibleだけでも実現可能だとは思います。試してはいないですが・・

cf. docs.ansible.com - OpenStack Ansible モジュール

ソースコード

今回作成したソースコードは、github.com - bmf-san/terraform-ansible-openstack-boilerplateに置いてあります。

実装方針

Terraformでサーバー構築をして、Ansibleでサーバーの初期セットアップをします。

TerraformとAnsibleを両方使う場合は、TerraformからAnsibleを呼ぶのか、AnsibleからTerraformを呼び出すべきなのか迷う気がしますが、下記の記事ではどちらでも良い、正解不正解は特にないという見解でした。

cf. www.redhat.com - HASHICORP TERRAFORM AND RED HAT ANSIBLE AUTOMATION

Terraformはインフラリソースの設定管理、Ansibleはサーバー内の構成管理にそれぞれ強みがあるイメージなので、それぞれが得意な領域を担当できるようには意識しつつ、Terraform内でAnsibleを実行する構成にしてみました。

Terraform、Ansibleそれぞれの役割を意識した上で、コードをどう管理していきたいかという方針によっては逆のパターンが良いという場合もあるのではないかなと思います。

準備

  • Terraformのインストール
    • brewでtfenvをインストールして最新版を用意しました。
  • Ansibleのインストール
    • brewでインストールしました。
  • 公開鍵・秘密鍵のキーペアを2セット用意
    • rootユーザー用と作業ユーザー用です。
  • ConoHaの管理画面でAPIユーザーを作成
    • 手順はsupport.conoha.jp - APIユーザーを追加するを参照してください。
    • 以下の情報が必要となるので事前に確認しておきます。
      • API情報
        • テナントID
        • テナント名
      • APIユーザー
        • ユーザー名
        • パスワード

構築手順

大まかな流れは以下の通りです。

ConoHaのAPI利用のためのAPIトークン取得

↓

利用したいイメージ、VMプランを決める

↓

Terraformのコードを書く

↓

Ansibleのコードを書く

ConoHaのAPI利用のためのAPIトークン取得

まずはConoHaのAPIを利用するためのAPIトークンを取得します。 APIのエンドポイントはユーザーごとに異なるのでConoHaコントロールパネルのAPI情報にあるエンドポイントのリストを適宜参照してください。

cf. conoha.jp - トークン発行

利用したいイメージ、VMプランを決める

取得したAPIトークンを使ってそれぞれの情報を取得して、利用したいイメージとVMプランを決めます。

利用可能なイメージ一覧を取得

利用可能なイメージ一覧を取得します。

cf. conoha.jp - イメージ一覧取得

今回はvmi-ubuntu-20.04-amd64-30gbを使いました。

VMプラン一覧を取得

利用可能なVMプラン一覧を取得します。

cf. conoha.jp - VMプラン一覧を取得

今回はg-1gbを選択しました。

1gb以下のプランだとディスクサイズが足りずに構築エラーになるようです。（g-512mbで試しましたがダメでした。）

Terraform

必要な情報が揃ったのでコードを書いていきます。

今回は以下のようなディレクトリ構成にしました。

今回はやることが少ないのでtfファイルは特に細かく分割していません。

tfstateファイルの管理については、backendを使って外部ストレージで管理するのが良いかと思いますが、今回はローカルからの実行なので.gitignore対象に含めるだけになっています。（ローカルとはいえちゃんとやっておきたい部分ではありますが..）

後述しますが、playbooksにはterraformがtemplatesから生成するhostsファイルとsetupファイル（yml）が配置されます。

ゼロからインスタンスを構築するので、構築過程でIPアドレスの値を拾ってTerraformからAnsibleに値を渡してあげる必要があるため、hostsファイルについてはテンプレ化しておく意義があるかなと思うのですが、setupファイル（yml）についてはタスクと変数定義を分けて、変数定義をするファイルをテンプレ化したほうが良いかなと思います。今回は端折って分割していません。

Terraformに寄せすぎると後でAnsibleを切り出したいとなった時などに腰が重くなるような気がするので、この辺りは色んな事例を知りたいところです。

main.tf

main.tfの中身はこんな感じです。

provider

公式でopenstackのproviderがあるのでそれを使っています。

user_name、passwordはConoHaで作成したAPIユーザーの情報になります。 tenant_nameは文字通りテナント名です。 auth_urlはわかりづらいのですが、ここではConoHaのIdentity APIのエンドポイント（ex. https://identity.tyo2.conoha.io/v2.0）になります。

openstack_compute_keypair_v2

インスタンス構築時にrootユーザーが利用する公開鍵・秘密鍵のキーペアのセットアップです。

cf. registry.terraform.io - openstack_compute_keypair_v2

公開鍵を指定しない場合は公開鍵・秘密鍵のキーペアが自動で生成され仕組みになっています。

鍵情報はtfstateファイルに出力されるため、実環境で実行する場合はtfstateファイルを適切に管理する必要があります。

公開鍵認証が前提になっていますが、パスワード認証を可能にする方法も無いこともないみたいです。

cf. noaboutsnote.hatenablog.com - 【Openstack】インスタンスOSにパスワードログインできるようする

openstack_compute_instance_v2

インスタンスのイメージやVMプラン、ネットワーク構成などインスタンスを構築するためのセットアップです。

cf. registry.terraform.io - openstack_compute_instance_v2

instance_nameは任意の名前、image_nameは文字通りイメージ名です。 flavor_nameは初見だと察しが付きづらいですが、ここではVMプラン名になります。

instance_name_tagの部分は、ConoHaのコントロールパネルで表示されるネームタグになります。

今回は使用していませんが、user_dataを指定すればcloud-initを使うこともできます。

ex.

null_resource

null_resourceは他のresourceをトリガとしてプロビジョニングを行うresourceです。トリガはdepends_onで指定します。

構築したインスタンスにAnsibleでプロビジョニングを行いたいので、インスタンスの構築完了（Terraformの実行が完了というのが正確かもしれません。Terraformの実行が終了してもインスタンスの構築が完了しているわけではないので、後述しますがAnsibleでインスタンスの構築を待つ処理を用意しています。）をトリガとしています。

今回はローカルで実行するのでlocal-execを使っています。

ちょうど良い感じのresourceがないかと調べたところ、github.com - jonmorehouse/terraform-provisioner-ansibleというのがありましたが、現在はメンテナンスされていないようでした。

Ansible

今回はtemplates/playbooks配下にテンプレートを用意して、Terraform実行時にテンプレを元に実ファイルを生成、生成したファイルを使ってAnsibleを実行する形を取りました。

プロビジョニングの内容は、実行ユーザーの作成、ssh周りの設定調整くらいです。

インスタンスの疎通を待たずしてプロビジョニングしようとしてハマりました...（wait_for_connectionを使って対応しました。）

実行

terraformコマンドオンリーで完結です。

所感

初Terraformだったので良い勉強になりました。

TerraformはともかくOpenStackは面白い技術だなと思ったのでもう少し深堀りする機会を作りたいです。

参考