NetApp Kubernetes Service Part2 Kubernetes Backup/Restore with Heptio Ark

Heptio Ark を使ったバックアップ・リストア

NetApp Kubernetes Service (NKS)の使い所を見ながら、ポイントとなる機能をみていくシリーズです。

第2回目はHeptio Arkを使ったバックアップをやってみます。

Heptio が VMWareに買収発表されたのが記憶に新しいですが、Kubernetesのバックアップツールとしてはデファクトのツールです。

これから何回続くかは不明ですが現時点では以下のコンテンツも考えています。

Part1は実施した前提(NKSでk8sクラスタデプロイ済み)として、以下すすめます。

NKSの画面から Heptio Ark をクリックすると以下の画面になります。

Heptio ark 設定画面

「Enable Kubernetes State Backup」をクリックしてバックアップを有効にします。

バックアップ取得先を「AWS S3」として、リージョンを選択します。
その後、Frequencyでバックアップする頻度を選択します。

S3バケットは自動で作成するため登録しているクレデンシャルがS3バケットの作成権限を持っていれば問題ありません。

その後画面下の「Save」ボタンを押すと以下のメッセージがポップアップ表示されます。

画面左のイベントログから今行った実行ログが確認できます。

ark がインストールされる

Ark 設定後にAWS S3のコンソールからバケットの確認をします。

バケット名は ark+[クラスタの識別子] という形になっています。

更に中を見ていくと、初回起動のタイミングですでに１つバックアップが取得されています。

バケットの内容は以下の３ファイルです。

ここまでで構成情報がバックアップされていることが確認できました。
時間が立てば設定した単位でバックアップが取得されていきます。

現在のところリテンションポリシー的なものは設定できないのでどれくらい保管しておくかは別途確認になります。

現在クラスタにデプロイしているものは以下の通りです。

クラスタにインストールされているソリューションの状況(NKSからデプロイしたもの）

Jenkinsを削除してからリストを試します。

以下はJenkinsを削除したところ。

リストアすることでJenkinsがもとに戻ることを確認します。

Ark から「RESTORE]ボタンをクリック。

リストア時はリストアボタンをクリックするだけ

今までに取得されているバックアップ一覧が出てきます。
該当のバックアップを選択して、「RESTORE THIS BACKUP」をクリックして復元開始です。

Heptio Arkのアイコン横にあるインジケータが動き始めます。

復元中

上記Solutionリストには戻りませんでしたが、Deploymentとしては復元できました。ラベルにark-restoreが付与されます。

ただし、service.type: LoadBalancer で実施している場合は新たにロードバランサーが作成されていましたので、DNSでCNAMEをつけている場合は付け直しになります。

今回は復旧できるかというところを見たため手動で設定し直しましたが、運用を考えるとこのあたりも自動化を検討すべきポイントです。

UI自体がシンプルであるため、バックアップ取得したクラスタへしか復元ができませんでした。保管方法等をみてもHeptio Arkそのもののため、個別に ark クライアントを入れれば他のクラスタからもバックアップを参照し復元することができます。
当たり前ですが、PVCのreclaimPolicyは障害が起きたところまでを考えて設定すべき。たまたま上げていたJenkinsを題材にしていましたがHelmから展開したタイミングでデフォルトのStorageClass、reclaimPolicy となっており一旦停止した際にデータがすべて消えました。（なので今回はDeploymentoが戻っただけの確認とします。PVCが残っていれば問題なく動く話なので。PVC残した状態は別の機会に再度チャレンジ）
遠隔地で立ち上げるというタイミングがあるかわかりませんが結局データ転送しておき、PVC/PVとして認識させておく必要がある。現状どうやるか。

今回はNKSで提供しているHeptio ark 連携の具体的なオペレーション、バックアップ、リストア方法について記事にしました。

Heptio Arkそのものを知っている方からすると細かい使い方ができないという印象を持つかもしれませんが、個人的にはポチポチやってここまでできればいいかなと言う感覚です。
これ以上に細かい操作はCLIで実施となるでしょう。