Elasticsearch運用で気をつけていること～インデックス再構築編～

株式会社クイックでアプリケーションエンジニアをしているhamanokamiです。

弊社ではあるシステムの検索機能でElasticsearchを使用しています。

ただチームメンバ全員がElasticsearchの知識を持っているわけではないため、
Elasticsearchに詳しくなくても、ある程度運用できるように設計を行っています。

その1つとして、無停止でのインデックス再構築フローがあります。

Elasticsearchを運用していると、途中でマッピング構造やフィールド型を変更したいことがあります。

その場合、サービスでは既存マッピングで検索機能を使用しつつ、
裏でインデックスを再構築を行うことで、サービスの質を保ちたいものです。

その方法として一般的なのは、エイリアスを使用した再構築フローだと思います。

ただ前述のとおり、Elasticsearchの知識を持っていないメンバでも運用できるよう、
設定ファイルでインデックス再構築可能なように設計を行いました。

設定内容としては

の3つです。

図にするとこのようになります。

f:id:aimstogeek:20150928173502p:plain

※実際には設定ファイルは一つです

では再構築の手順を説明していきます。

1. 「画面で情報更新時に書き込みするインデックス」と
「ターミナルから情報更新時に書き込みするインデックス」に
任意の新しいインデックス名を追加する

2. 設定ファイルを本番環境に反映する

f:id:aimstogeek:20150928173504p:plain

3. ターミナルからインデックス構築バッチを実行する
⇒インデックス作成とデータ挿入

～～3実行完了までおとなしく待ちます～～

4. 「検索で参照するインデックス」に1で指定した新しいインデックス名を追加する

5. 「画面で情報更新時に書き込みするインデックス」から古いインデックス名を除外する

6. 設定ファイルを本番環境に反映する

～～インデックス再構築完了～～

f:id:aimstogeek:20150928173508p:plain

7. 古いインデックスを完全に削除する
⇒Elastic HQなどのモニタリングツール使用

本当はエイリアスを使用し再構築を行ったほうが、
無駄な手順を踏まずに運用できるのですが、
現状運用知識のあるメンバが少ないなどの場合は、
今回のような運用が適しているのでは思います。

ただ私もElasticsearchの知識のある、
または勉強したいというエンジニア仲間が職場に欲しいので、
もしご興味があれば株式会社クイックにぜひ応募してください。

クイックエンジニアリングブログ