モダンアプリケーションの監視には生のログ、メトリック、およびトレース以上のものが必要です。DockerやKubernetesなどの動的なクラウドネイティブのインフラストラクチャーの監視には、メタデータが重要な役割を果たします。その詳細についてご確認ください

このブログは元々、<a href="https://www.tfir.io/the-importance-of-metadata-in-your-kubernetes-observative-initiative/" rel="nofollow">tfir.io</a>に投稿されたものです。<a href="https://www.tfir.io/the-importance-of-metadata-in-your-kubernetes-observative-initiative/" rel="nofollow"></a>Kubernetesは、Cloud Native Computing Foundationプロジェクトの中心にある、人気のコンテナーオーケストレーションシステムです。コンテナー、コンテナー化されたアプリケーション、「ポッド」（1つまたは複数のコンテナーのグループ）のデプロイ、ライフサイクル、オペレーションを自動化します。このプラットフォーム自体が、その各ワークロードとともに、イベントデータを生成することがあります。それらのプロセスに関連する各種データがあります。ログは、「ここまで来た」と示すシンプルなデバッグメッセージから、トランザクション情報を提供する詳細なWebサーバーアクセスログまで、広範なものがあります。メトリック、または時系列データは、定期的な間隔で計測される数値です。たとえば、1秒あたりの瞬間的な操作の回数、キャッシュヒット率、サイトにアクセスした顧客数や、基本的なこととして過去5秒間でコンテナーが使用したCPUまたはメモリー量などです。 
オブザーバビリティは、これらのログとメトリックを取り出し、通常、相関するデータストアに検索可能な形で格納して、しばしばアプリケーショントレースデータとそれらをそれらを組み合わせます。このトレースデータ、または詳細なアプリケーションパフォーマンス監視（APM）情報は、アプリケーションまたはサービスで時間がかかっている場所、それらがやり取りしている方法と対象、および遭遇するあらゆるエラーをキャプチャします。ログとメトリックはアプリケーションのブラックボックスを見るようなものである一方、APM データはアプリケーションの内部で何が起きているかを示します。  
ログ、メトリック、アプリケーショントレースデータを組み合わせることで、エラーまたはインシデントの平均検出時間および平均解決時間の短縮化に役立ちます。ただし、アプリケーションデプロイモデル（およびKubernetesデプロイ）は進化するため、動的な環境のどこで実際に発生しているのかを理解することが非常に重要となります。そこで活用できるのがメタデータです。
<h2>メタデータとは一体何か？</h2><a href="https://www.merriam-webster.com/dictionary/metadata">Webster</a>の定義によると、メタデータとは「他のデータに関する情報を提供するデータ」です。 とても簡単です。メタデータは、多くの一般的な場所で見つかります。このブログ記事をホストしているページにもあります。それらはSEOタグ、さまざまなブラウザーがページを適切にフォーマットできるようにするためのヒント、ページを説明するキーワードなどです。同様に、モバイルデバイスの1つの写真には多くのメタデータが含まれています。下記はその一部です。
<pre class="prettyprint">ExifTool Version Number :11.11 
File Name :60398459048__A20828DD-FAA4-4133-BA1F-059DEC9E7332.jpeg 
Directory : .
File Size :2.8 MB 
File Modification Date/Time :2020:02:21 08:30:01-05:00 
File Access Date/Time :2020:02:21 08:30:23-05:00 
File Inode Change Date/Time :2020:02:21 08:30:22-05:00 
MIME Type : image/jpeg 
JFIF Version :1.01 
Acceleration Vector : -0.03239090369 -0.9104139204 -0.3862404525 
Exif Byte Order :Big-endian (Motorola, MM) 
Make :Apple 
Camera Model Name : iPhone XS 
Orientation :Rotate 90 CW 
X Resolution :72 
Y Resolution :72 
Exif Image Width :4032 
Exif Image Height :3024
</pre>「iPhoneの写真のMIMEタイプを知ることが、オブザーバビリティイニシアティブにどのように役立つのか？」と疑問に思われることでしょう。役に立ちません。画像のメタデータはそのためにあるわけではありません。これは、メタデータが何であるかということを示す例ためのです。iPhoneのメタデータにより、サイズ、向き、写真を撮ったときの手振れ具合（これは実際に私にとっての課題ですが）で絞り込むことが可能になります。では、オブザーバビリティデータの相関付けおよびナビゲーションに役立つものを見てみましょう。それらは環境のログ、メトリック、アプリケーショントレースデータです。  
<h2>ソフトウェアおよびハードウェアのデプロイのトレンド</h2>単一のデータセンター内に、単一目的のベアメタルサーバーでモノリシックなアプリケーションを実行する時代は終わりました。確かに、専用のワークロードの実行にそのような形態が今でも使用されているのを見ることがありますが、それには何の問題もありません。多くの大規模なアプリケーションや製品は、できるだけ多くのコンピューティングを必要とします。しかし全体として、ソフトウェアとハードウェアの両方のデプロイモデルに関する業界トレンドは、マイクロサービスおよびコンテナーへと移行し始めています。
<img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/bltc52394cf4cdaae5b/5f8db4954671ee30c689f85c/trends-increasingly-complex-systems.png" data-sys-asset-uid="bltc52394cf4cdaae5b" alt="trends-increasingly-complex-systems.png">
この「シフトライト」のトレンドは、ビッグバンというわけではありません。多くの企業では、複数のソフトウェアデプロイモデルに並行して取り組み、また複数のハードウェアパターンにも対応しています。仮想マシンまたはクラウドインスタンスがクライアント/サーバーまたはSOAアプリケーションを実行するとともに、コンテナーが、KubernetesまたはDockerでオーケストレーションされたマイクロサービスのイメージを実行します。多くの場合、あるデプロイメントモデル内のアプリケーションやサービスは、他のモデルのサービスを使用しています。最新のマイクロサービスでも、ベアメタルにホストされたデータベースを未だに使用している場合があるかもしれません。
このような異種混合システムの性質により、メタデータはさらにその重要性を増します。データセンターに入って行ってボックスを指し、「ここに私のアプリケーションがある」と示すようなことは、コンテナー、ポッド、および動的にスケジュールされたマイクロサービスへとシフトするにつれてさらに難しくなっています。 そこにあるかもしれませんが、あなたの後ろにある他の4つのサーバーにもあるかもしれません。 
そこで役立つのがロケーションメタデータです。これは緯度と経度のことを言っているのではなく（便利だとは思いますが）、アドレススキームのことを言っています。つまり、少なくともそれぞれのデータ（ログ、メトリック、またはアプリケーショントレースデータ）がどこから来ているかを論理的に確認できるものです。  
<h2>インフラストラクチャーの性質</h2><h3>ロケーション、ロケーション、ロケーション</h3>何が必要かはセットアップによって異なりますが、将来に向けて計画しておくべきです。キャプチャできる量は、ジョブがどこで実行されているかによります。ベアメタル上のモノリシックなアプリケーションの場合は、Kubernetesポッドの詳細をキャプチャできませんが、問題はありません。私たちはブレッドクラムを提供したいと考えています。どこで実行されているかが分かるからです。その理由について少し説明しましょう。
ロケーション情報があることで、メタデータの階層をアプリケーションレベルまで辿っていくことができます。つまり、物理的にジョブが実行されている場所です。  
<h4>データセンター</h4>データセンターのメタデータは、各データセンターの一意の識別子（都市名など）を含む必要があります。この情報は、クラウドプロバイダーについては少しあいまいになる可能性がありますが、同様の情報はあります。このシナリオでは、クラウドプロバイダーと、実行している地域を活用できます。たとえば、GCP、europe-west1、アベイラビリティゾーンBなどです。
データセンター内に専用ティアがある場合（特定のホストが本番またはテストプロジェクトに予約済み、またはプロジェクト全体に分割されている、など）は、それもメタデータに追加する必要があります。  これは、データセンター内の壁で囲まれた部分、またはデータセンター内のデータセンターのようなものです。
<h4>ホスト情報</h4>ベアメタル、仮想、またはクラウドインスタンス上など、どこで実行していても、利用できるホスト情報が通常はいくつかあります。各ホストには、ホスト名、IPアドレス、ハードウェアモデルまたはインスタンスタイプ、構成されたRAMおよびストレージ、さらにはオペレーティングシステム情報の属性があります。また、そのホストが存在する場所のさらに詳細な情報（データセンターのフロア番号、ラック、列、シェルフなど）を含めることもできます。ラック全体が低品質の電源や配線の影響を受けたのは初めてではないでしょう。
<h2>アプリケーションの詳細情報</h2>ここまでで、それぞれがどこで実行されているかについて特定できる十分な情報を得ることができますが、まだホストレベルまでです。各ホストは、多くのさまざまなサービスまたはアプリケーションを実行している可能性があります。アプリケーションとサービスについて知るためには、対応するレベルのメタデータを追加する必要があります。これについては、それぞれのケースについて実行内容が異なってくるため、ここでは概要に留めるとともに、Kubernetesによってオーケストレーションされたマイクロサービスについて、さらに複雑なシナリオを説明します。それをベアメタルアプリケーションおよび仮想化環境に適用することは非常に簡単です。
KubernetesおよびDockerのコンテナーでは、自動的に何らかのレベルのメタデータが利用できるため、これらは含めておくべきです。最低でもコンテナー名および/またはポッド名、コンテナーのベースとして使用するイメージおよびバージョン、および開始時間は含めておくべきです。また、ネットワーク名とIP情報、およびネットワーク、メモリー、またはストレージのクォータも含めておくことが理想的です。ホスト情報と同じ情報がもう1つあることに気付きましたか？コンテナーおよび仮想マシンは基本的に、別のホストで実行されるホストであるため、同じ情報を抽出することは理に適っています。
つまり、仮想化された環境で作業する場合は同様の情報を引き出すことができます。仮想ホストは、ホストとしての名前、IPアドレス、メモリーおよびストレージの上限など、同じ概要情報を持つことになります。
ここで小さなジレンマが生じます。重複したフィールド名があることです。覚えておくべきなのは、階層を維持することが重要であるということです。ホストのメタデータは、その階層の中でコンテナーまたは仮想マシンよりも上位に位置します。
<pre class="prettyprint">├── NYC DC 1 
│ ├── Host 1 
│ │ ├── vm 1 
│ │ ├── vm 2 
│ │ └── vm 3 
│ └── Host 2 
│ ├── vm 1 
│ └── vm 2 
└── NYC DC 2 
 └── Host 1 
 ├── vm 1 
 ├── vm 2 
 ├── vm 3 
 └── vm 4
</pre>ここで明らかなのは、名前が競合しないように、予測可能な異なる名前空間に値を設定する必要があるということです。そのための優れた方法は、キー/値のペアとして渡すことです。たとえば、NYC DC 1のHost 1のvm 2には以下を含めます。
<pre class="prettyprint">dc.name:"NYC DC 1" 
dc.floor:2 
<other dc fields> 
host.name: "Host 1" 
host.IP: … 
host.available_memory_mb:16384 
vm.name: "vm 1" 
vm.IP: …
</pre>階層については、コンテナーは少し異なります。1つのKubernetesクラスターが複数のホストにまたがる可能性があるからです。この場合は、任意のポッドまたはコンテナーのロケーション情報だけでなく、上述したとおり、対応するオーケストレーションメタデータにも注目する必要があります。ではここからは、アプリケーションに対するオブザーバビリティを得るためにメタデータが役立つことについて見ていきます。
<h2>アプリケーションのオブザーバビリティ</h2>ここまでで、システムで稼働しているものに対して完全に対応する方法について分かりました。そこで、実際のデータの収集について見ていきましょう（メタデータとは、他のデータを説明するものであるということを思い出してください）。「オブザーバビリティの3つの柱」はログ、メトリック、アプリケーショントレースデータ（APMデータとも呼ばれます）であり、アップタイムデータが4つめの「柱」として示されることもあります。 ログとメトリックを収集する際には、下図で示されているように、エコシステムの各レイヤーで収集します。それぞれの抽象化について、どのようなタイプのオブザーバビリティデータに関する情報を収集すべきかが示されています。
<img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/blt2fb40870eca245d9/5f8db406271ecf4a1a645d53/what-to-monitor.png" data-sys-asset-uid="blt2fb40870eca245d9" alt="what-to-monitor.png">
たとえば、各ホスト、またはデータセンターのネットワーク要素から、ログ、メトリック、可用性データを収集し、アプリケーションとサービスについてはAPMを加えます。
各ティアの対応するメタデータで上記のすべてを強化し、アプリケーション、インフラストラクチャー、エコシステム全体に対する可視性を高めます。これを達成するには多くの方法があります。各イベントまたはトレースで送信することで、迅速な検索およびフィルタリングが可能になります。または、エコシステムの静的な部分からメタデータを保存して、後から相互参照を行うこともできます。後者の方法ではスペースを節約できますが、特に動的なエコシステムでは、古くなる、または最新ではないというリスクが伴います。
<h2>各ピースを集約する</h2>メタデータで強化されたオブザーバビリティデータがあれば、自分たちが選択したファセットに基づいて、特定のAPMデータまたはログを見ることに限定されることなく、細かく確認できます。たとえば、現在のCPU使用率を各サービスのホストごとに見ることができます。
<img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/bltc1ad4f816c2358a4/5f8db5f7f9d3bf27fac3ce83/infra-viewer.png" data-sys-asset-uid="bltc1ad4f816c2358a4" alt="infra-viewer.png">
または、経時的に同じパラメーターを確認します。
<img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/bltb905c0fc98558ca7/5f8db601dcf0e74b7cbf7614/metrics-explorer.png" data-sys-asset-uid="bltb905c0fc98558ca7" alt="metrics-explorer.png"> 
これにより、調査したい詳細情報を拾い出したり、他の方法では回答を得られない以下のような質問の答えを得たりできます。
<ul>
	<li>EMEAのデータセンターと比較して、米国のデータセンターが過剰に使用されているか？</li>
	<li>エコシステム内で、他のラックと比較していずれかのラックに多くのエラーが発生しているか？</li>
	<li>開発用インフラストラクチャーの一部を本番用に再目的化できないか？</li>
	<li>Eコマースアプリを実行しているコンテナーおよびポッドはどの物理ホストにあるか？</li>
	<li>そして最後に、私のiPhoneの写真はなぜいつも手振れしているのか？</li>
</ul><h2>まとめ</h2>メタデータは分析に新たなディメンションを追加します。データの集約や細かい分析を行うための新たな方法をもたらし、ビジネスおよびオペレーションに関する質問への回答を得るのに役立ちます。オブザーバビリティイニシアティブに使用するソリューションが、組織の拡大に伴って拡張できるようになっていることを確認しましょう。また、予測どおりにメタデータが配置されるように、<a href="/guide/en/ecs/current/ecs-reference.html">Elastic Common Schema</a>など、検索可能でナビゲーション可能なメタデータのことを考慮に入れましょう。

blog-banner-release-observability.png

blog-thumb-release-observability.png

The importance of metadata in your Kubernetes observability initiatives

Kubernetesオブザーバビリティイニシアティブにおけるメタデータの重要性

APM（アプリケーションパフォーマンス監視）はアプリケーションで起きていることを把握できるようにし、アプリケーションスタック全体の可視性を高めます

screenshot-apm-ui.jpg

screenshot-apm-distributed-tracing.jpg

Monitoring Applications with Elasticsearch and Elastic APM

ElasticsearchとElastic APMでアプリを監視する

Learn how to create Elasticsearch clusters with Elastic Cloud, add users with X-Pack Security, create Kibana dashboards and ship system metrics with Metricbeat

Elastic Cloudは、Elasticsearch、Kibana、Beats、Logstashの開発者が提供する、ElasticsearchとKibanaのオフィシャルサービスです。詳しくは<a href="/blog/hosted-elasticsearch-services-roundup-elastic-cloud-and-amazon-elasticsearch-service">こちらの記事</a>をご覧ください。
Elastic Cloudは、14日間無料トライアルをご利用いただけます。登録に必要なのはEメールアドレスだけ。クレジットカードは必要ありません。
今回の記事では、以下の内容についてご説明します。
<ul>
	<li>Elastic CloudでElasticsearchクラスタを作成する方法</li>
	<li> X-Pack Securityで新規ユーザーを追加する方法</li>
	<li>Metricbeatでシステムのメトリクスを収集、Elastic Cloud内のElasticsearchクラスタにメトリクスを転送、Metricbeatより自動的に読み込まれるKibanaのダッシュボードで可視化する方法 </li>
</ul><h2>1. Elastic Cloudのアカウントを作る</h2>Elastic Cloudのウェブページを開き、<a href="/cloud/as-a-service/signup">Elastic Cloudの無料トライアル</a>を開始します。 
	注：既にElastic Cloudのアカウントをお持ちの場合は手順2に進んでください。
<img src="https://api.contentstack.io/v2/uploads/59e0cebf3ef8e08c0d90e8f7/download?uid=blt128d83d79abf632d" data-sys-asset-uid="blt128d83d79abf632d" alt="Try_Elastic_Cloud__Hosted_Elasticsearch__for_Free___Elastic.png">
Eメールアドレスを入力し、<code>トライアルを始める</code>をクリックします。確認メッセージが届きますので、<code>Verify Email and Accept TOS</code> (メールアドレスを確認して利用規約に同意する)をクリックして手続きを行います。
<img src="https://api.contentstack.io/v2/uploads/598db1c5b3ba08942fce2af8/download?uid=blt4c04a04b5859f0fe" data-sys-asset-uid="blt4c04a04b5859f0fe" alt="스크린샷 2017-08-11 21.07.57.png">&nbsp;
Elastic Cloudのアカウントのパスワードを設定します。
<img src="https://api.contentstack.io/v2/uploads/598db2358f6b4d840686a473/download?uid=blt04cb16dd162f6a19" data-sys-asset-uid="blt04cb16dd162f6a19" alt="스크린샷 2017-08-11 21.08.19.png">
 
<h2>2. ElasticsearchクラスタとKibanaインスタンスを開始する</h2>パスワードを作成すると、自動的にElastic CloudのUIが開きます。<a href="https://cloud.elastic.co/">https://cloud.elastic.co</a>からも開くことができます。
<code>Create Cluster</code> (クラスタを作成する)をクリックしてクラスタを新規作成します。
<img src="https://api.contentstack.io/v2/uploads/599b3e33cd425dbf181f5d02/download?uid=blt84a8b2b5bdc77d89" data-sys-asset-uid="blt84a8b2b5bdc77d89" alt="Monitor_your_system_with_Metricbeat_on_Elastic_Cloud_-_Google_Docs.png">
クラスタのサイズと地域を選択し、<code>Create</code> (作成)をクリックすると、Elasticsearchクラスタが作成、準備されます。
<img src="https://api.contentstack.io/v2/uploads/599b4376d9dcd8a66464d858/download?uid=bltd526aa6fcf9781be" data-sys-asset-uid="bltd526aa6fcf9781be" alt="Elastic_Cloud.png">
Elasticsearchクラスタの作成が終わったら、生成されたスーパーユーザー(<code>elastic</code>)のパスワードがポップアップで表示されます。一度閉じるとこのパスワードは再表示できませんので、安全な場所にコピーしておいてください。
<img src="https://api.contentstack.io/v2/uploads/598db3e4101718d222ac8ddf/download?uid=blt7ec579124c905376" data-sys-asset-uid="blt7ec579124c905376" alt="스크린샷 2017-08-11 21.10.25.png">&nbsp;&nbsp;
パスワードを紛失した場合は、Elastic CloudコンソールのSecurity (セキュリティ)メニューからリセットすることができます。
<img src="https://api.contentstack.io/v2/uploads/598db4c23e67ecd82fbed3b5/download?uid=bltaef407a50ebea531" data-sys-asset-uid="bltaef407a50ebea531" alt="스크린샷 2017-08-11 22.43.28.png">
<code>Overview</code> (概要)メニューを開きます。ElasticsearchとKibanaにアクセスするURLが表示されます。
<img src="https://api.contentstack.io/v2/uploads/598db5b26f0077f92223f88a/download?uid=blt88dcdba3be914b98" data-sys-asset-uid="blt88dcdba3be914b98" alt="스크린샷 2017-08-11 21.14.48.png">&nbsp;
 
<h2>3. スーパーユーザーを作成する</h2>KibanaのURLをクリックし、Kibanaのログイン画面を開きます。ユーザーには"elastic"と入力し、自動生成された(コピーしておいた)パスワードを入力してログインします。
<img src="https://api.contentstack.io/v2/uploads/598db6aed537f8dd07cf6059/download?uid=blt57538ef5661b152f" data-sys-asset-uid="blt57538ef5661b152f" alt="스크린샷 2017-08-11 21.17.16.png">&nbsp;
Elastic CloudにはSecurityやMonitoringといったX-Packの機能がいくつか含まれます。
覚えやすいユーザー名やパスワードを使いたい場合は、Role Based Access Control (役割別のアクセス権設定)の機能で新しいスーパーユーザーを作成してください。<code>Management</code> (管理)タブのSecurity (セキュリティ)から、<code>Users</code> (ユーザー)を選択します。
<img src="https://api.contentstack.io/v2/uploads/598db79919885a05091a7254/download?uid=blt3bf4acddee169cca" data-sys-asset-uid="blt3bf4acddee169cca" alt="스크린샷 2017-08-11 21.35.51.png">&nbsp;
<code>+ Create User</code> (ユーザーを作成する)をクリックします。
<img src="https://api.contentstack.io/v2/uploads/598db7dc8f6b4d840686a482/download?uid=blt526034270fba8392" data-sys-asset-uid="blt526034270fba8392" alt="스크린샷 2017-08-11 21.36.03.png">&nbsp;
ユーザー名、パスワード、フルネーム、Eメールアドレスを入力し、Role (役割)には<code>superuser</code>を選択して保存します。
<img src="https://api.contentstack.io/v2/uploads/5996768427ab71de2fb9039b/download?uid=blt4c0fbc3a6b8eaf4f" data-sys-asset-uid="blt4c0fbc3a6b8eaf4f" alt="new_user_reg.png"> 
これでお好きな名前の新しいスーパーユーザーのアカウントが作成されます。
<img src="https://api.contentstack.io/v2/uploads/599676b88f6b4d840686a697/download?uid=blt5c92f591326dce96" data-sys-asset-uid="blt5c92f591326dce96" alt="new_user_registered.png"> 
一度ログアウトして再度ログインし、新しいアカウントが問題なく使えるかを確認してください。
<img src="https://api.contentstack.io/v2/uploads/59967720b3ba08942fce2cba/download?uid=blt8ae76430e0e3afc9" data-sys-asset-uid="blt8ae76430e0e3afc9" alt="new_login.png"> 
<h2>4. Metricbeatの設定と実行</h2>ElasticsearchとKibanaの設定が終わったので、データを転送してみます。このチュートリアルでは<a href="/kr/products/beats/metricbeat">Metricbeat</a>を使います。
Metricbeatはシステムからあらゆるメトリクスを収集し、ElasticsearchやLogstashのインスタンスに転送してくれます。バイナリファイルとして実行されますので、お使いのオペレーションシステムに合ったファイルをダウンロードしていただく必要があります。<a href="/downloads/beats/metricbeat">Metricbeatのダウンロードページ</a>から、お使いのOSに合うファイルをダウンロードして展開してください。
<img src="https://api.contentstack.io/v2/uploads/598dba00a18cb15724cad625/download?uid=blt3c5b3fe938245ce7" data-sys-asset-uid="blt3c5b3fe938245ce7" alt="스크린샷 2017-08-11 21.43.16.png">&nbsp;
展開するとmetricbeatのディレクトリにいくつかのファイルが見つかるはずです。
<img src="https://api.contentstack.io/v2/uploads/598dba65fa53cbd82236f42d/download?uid=blt832815b26f9eda83" data-sys-asset-uid="blt832815b26f9eda83" alt="스크린샷 2017-08-11 23.08.18.png">&nbsp;
<code>metricbeat</code> (Windows OSの場合は<code>metricbeat.exe</code>)のファイルで、Metricbeatを実行します。デフォルトでは、<code>http://localhost:9200</code>で実行されているElasticsearchにデータが送信されるようになっていますので、Elastic Cloudクラスタに送信されるように設定を変更する必要があります。
<code>metricbeat.yml</code>をお好きなコードエディタで開きます。
<img src="https://api.contentstack.io/v2/uploads/599b3b875c3dbb4b7b322964/download?uid=blt60c5b918b5b3c29e" data-sys-asset-uid="blt60c5b918b5b3c29e" alt="Monitor_your_system_with_Metricbeat_on_Elastic_Cloud_-_Google_Docs.png">
<code>"localhost:9200"</code>を新しいElasticsearchクラスタのURLに変更します。
<pre style="font-size: 12.600000381469727px;">output.elasticsearch:
 #Array of hosts to connect to.
 hosts: ["localhost:9200"]
</pre>新しいユーザー名とパスワード(ユーザーを別途作成しなかった場合は、elasticと自動生成パスワード)を入力します。
<pre style="font-size: 12.600000381469727px;"> username: "&lt;user id&gt;" 
 password: "&lt;password&gt;"
</pre>yamlの文法に注意し、各行にはスペースを正しく入れてください。username: と password: は2スペース下げますが、その他はスペースは入れません。作成した<code>ユーザー名</code>と<code>パスワード</code>を入力します。ユーザーを作成しなかった場合は、elasticと自動生成のパスワードを使用します。
<code>metricbeat.yml</code>ファイルを保存します。その後デフォルトのメトリクスダッシュボードをKibanaに読み込むよう指示する<code>-setup</code>オプションを指定してmetricbeatを実行します。
<img src="https://api.contentstack.io/v2/uploads/599b3cc35c3dbb4b7b32296a/download?uid=blt42fb4eacf4bd58ae" data-sys-asset-uid="blt42fb4eacf4bd58ae" alt="metricbeat-5_5_2-darwin-x86_64_—_metricbeat_-c_metricbeat_yml_-setup_-e_—_109×20.png">
ヒント: Metricbeatの起動時に-eオプションを追加すると、実行中にログを確認することができます。
<h2>5. Metricbeatのダッシュボードを確認</h2>Metricbeatを実行するときに<code>-setup</code>オプションを追加したので、自動的にMetricbeatのDashboardとVisualizationがKibanaに読み込まれます。
<img src="https://api.contentstack.io/v2/uploads/598dbe948f6b4d840686a498/download?uid=bltd2f9f5fdec20c420" data-sys-asset-uid="bltd2f9f5fdec20c420" alt="스크린샷 2017-08-11 21.53.03.png">&nbsp;
Kibanaダッシュボードのメニューをクリックすると、新しいMetricbeatのダッシュボードが表示されます。システムのメトリクスがElasticsearchに転送されていることを確認してください。
<img src="https://api.contentstack.io/v2/uploads/598dbf0b27ab71de2fb901d7/download?uid=bltaedf02b5587aeefb" data-sys-asset-uid="bltaedf02b5587aeefb" alt="스크린샷 2017-08-11 21.53.20.png">&nbsp;&nbsp;
この方法で皆さんもMetricbeatをシステムにデプロイできるはずです。お試しください！

blog-metricbeat-fb.png

blog-metricbeat-thumb.jpg

Monitor Your System with Metricbeat and Elastic Cloud

MetricbeatとElastic Cloudでシステムをモニタリング

Step-by-step instructions walks you through setting up an Elastic Cloud account, creating and securing your hosted Elasticsearch 5.x cluster, and more

<table style="background: #FFFFD2;">
<tbody>
<tr>
	<td>
本稿では、Elastic Stackバージョン5.xを操作するための最新の説明が記載されています。 <a href="/blog/building-cloud-sandbox-with-sample-data-v2">古いバージョン</a>では、Elasticsearch 2.xおよびKibana 4.x用のサンプルデータセットが用意されていました。

	</td>
</tr>
</tbody>
</table>ホスティングされた<a href="/cloud/as-a-service">Elasticsearch</a>の環境を起ち上げて稼働させるのは極めて簡単です。Elastic Cloudを使用すれば、文字通り数分でクラスタを起動してデータの取り込みを開始することができます。その方法は<a href="https://www.youtube.com/watch?v=XR2PqCQvGE0">この3分間の動画で確認できます。</a>本記事では1つ1つの手順を段階的に説明しているので、Elastic Cloudアカウントのセットアップ、Elasticsearchクラスタの作成/セキュリティ設定、データのインポート、Kibana上のデータの可視化を習得できます。それでは始めましょう。<h2>Elastic Cloudにログインする </h2><ol>
 <li>
 <a href="/cloud/as-a-service"> https://www.elastic.co/cloud/as-a-serviceにアクセスして</a>無料トライアルに登録してください
 </li>
 <li>
 確認用Eメールが届きます。Eメールを開き、記載されている手順に従ってトライアルを開始してください
 </li>
 <li>
 Elastic Cloudアカウントにログインしてください
 </li>
</ol><h2>最初のホスティングされたElasticsearch
</h2><ol>
 <li>
 登録が完了したら、[クラスタ]タブに移動してクラスタを作成してください
 </li>
 <li>
 クラスタのサイズを選択してください。本例では、メモリが4GB、ストレージが96GBのクラスタを選択します。
 </li>
 <li>
 お客様のロケーションに近い地域を選択してください。本例では米国東部を選択します。
 </li>
 <li>
 レプリケーションを選択します。本例では1データセンター選択します。
 </li>
 <li>
 [作成]をクリックして、クラスタをプロビジョニングしてください。プロビジョニングが開始し、完了すると通知が届きます。
 </li>
 <li>
 ポップアップ表示されるelasticユーザー用のパスワードを保管してください。後で必要になります。
 </li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f8444b1b32f635892e1d9/download?uid=bltbc7b3d24c0936198" data-sys-asset-uid="bltbc7b3d24c0936198" alt="GIF-ClusterCreate.gif">
<ul>
</ul><h2>Kibanaを有効にする</h2>次に、クラスタへのアクセスやセキュリティを設定できるように、Kibanaを有効にしましょう。
<ol>
 <li>
 Kibanaを有効にするには、[設定]リンクをクリックして「Kibana」セクションが表示されるまでスクロールしてください。
 </li>
 <li>
 クラスタのプロビジョニングが完了するまで待つと、「Kibana」セクションに有効ボタンが表示されます。
 </li>
 <li>
 有効ボタンをクリックしてください
 </li>
 <li>
 リンクをクリックして、新規タブでKibanaを開いてください。Kibanaを有効にする手順では、「利用できません」という応答が表示されることがあり、この応答が表示されるまで少し時間がかかります。この場合、数秒待ってから再読み込みをお試しください。
 </li>
 <li>
 ユーザー名「elastic」と最初のプロビジョニング手順でコピーしたパスワードを使用してKibanaにログインしてください。
 </li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f84edea8224716048c811/download?uid=blt13d845be1dd9b389" data-sys-asset-uid="blt13d845be1dd9b389" alt="GIF-EnableKibana.gif">
<h2>クラスタをセキュアにする</h2>
	次に、Elastic Cloudアカウントに用意されているX-Packセキュリティモジュールを使用してクラスタのアクセスとセキュリティを設定しましょう。

<ol>
 <li>
 ユーザー名「elastic」と最初のプロビジョニング手順でコピーしたパスワードを使用してKibanaインターフェースにログインしてください。
 </li>
 <li>
	 追加ユーザーの作成および/または既存のユーザー名とパスワードの設定を行ってください。本例では新規ユーザー「<code>sa_admin</code>」を作成します。
 </li>
 <li>
	 新規ユーザーを追加した場合は各ユーザーにロールを設定してください。本例では<code>sa_admin</code>ユーザーに<code>スーパーユーザー</code>のロールを設定します。
 </li>
 <li>
 ユーザーのパスワードを指定してください。本例では、セキュリティの高いパスワードを使用しています。
 </li>
 <li>
 追加したユーザー名とパスワードを覚えておき、この認証情報を安全な場所に保管してください。あるいは付箋にメモしてください。 
 </li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f91acfd7fd32260cbd725/download?uid=bltcd356117ca7a7229" data-sys-asset-uid="bltcd356117ca7a7229" alt="Kibana.png">


同じ手順を使用すれば、パスワードを更新したりユーザーを追加したりできます。<a href="/guide/en/elasticsearch/reference/5.5/security-api.html">当社のドキュメントの手順を元に</a>、5.5に実装されている新しいセキュリティAPIを使用することもできます。 <h2>Elasticsearchエンドポイント</h2>Kibanaにログインすると、[ディスカバリー]タブが最初に表示されます。とはいえ、可視化できるデータはありません。次に、Elasticsearchにデータを取り込む操作を行います。うまくできるようにデータをいくつか準備しましょう！ 
<ol>
 <li>
 Elastic Cloudコンソールで[概要]リンクをクリックしてください。一覧表示されたエンドポイントは、クラスターへのAPIアクセスに使用します。
 </li>
 <li>
 httpsのリンクをクリックするとクラスターが表示されます。httpsのURLをコピーしてください。以下の手順で使用します。
 </li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f8a995f101d53580dbcff/download?uid=blt58f2d15e54da4488" data-sys-asset-uid="blt58f2d15e54da4488" alt="Elastic_Cloud.png">
<h2>データをインポートする
</h2>ここでは、Elasticsearchクラスタにデータを取り込んでElastic Stackの動作を確認しましょう。サンプルデータセットをお持ちでない場合は、<a href="https://github.com/elastic/examples">GitHub Examples Repo</a>にある各種データサンプルの1つを使用してください。本例では<a href="https://github.com/elastic/examples/tree/master/Common%20Data%20Formats/apache_logs">Apacheログのサンプル</a>と<a href="/downloads/logstash">Logstash</a>を使用します（お客様のシステムバージョンに合うものをダウンロードしてください。ホスティングされたElasticsearchクラスターにログを取り込むには、<a href="https://github.com/elastic/examples/blob/master/Common%20Data%20Formats/apache_logs/logstash/apache_logstash.conf">本例に記載されているLogstash config</a>のElasticsearch出力セクションを修正する必要があります。

	1. リポジトリをダウンロードして、<code>apache_logstash.conf</code>ファイルがあるディレクトリに移動してください。config内のホスト用エンドポイントを（前の手順でコピーした）ご自身のクラスタ用のエンドポイントに変更してください。

	2. 「Elasticsearchのセキュリティ設定」セクションに書き込み権限が設定されたユーザーアカウントのユーザー名とパスワードを修正してください。本例では、はじめに追加した<code>sa_admin</code>ユーザーを使用します。
<pre class="prettyprint">elasticsearch {
 hosts =&gt; "https://e66e6e11692c749cc8e09f25e1af4efa.us-west-1.aws.found.io:9243/"
 user =&gt; "sa_admin"
 password =&gt; "s00p3rS3cr3t"
 index =&gt; "apache_elastic_example"
 template =&gt; "./apache_template.json"
 template_name =&gt; "apache_elastic_example"
 template_overwrite =&gt; true 
}
</pre>3. 次のコマンドを実行して、Logstash経由でデータをElasticsearchでインデックス化します。
<pre class="prettyprint">cat ../apache_logs | &lt;Logstash_Install_Dir&gt;/bin/logstash -f apache_logstash.conf
</pre>4. ES_ENDPOINTの値を環境変数に保存すると便利です。以下は、私がいくつかのテストで行っているやり方です。
<pre class="prettyprint">export ES_ENDPOINT=https://somelongid.us-east-1.aws.found.io:9243
</pre>5. <code>ES_ENDPOINT/apache_elastic_example/_count</code>（<code>ES_ENDPOINT</code>はElasticsearchエンドポイントURL）で、データの有無を確認できます。この数は10000になっているはずです。上記の環境変数が設定されている場合は、次のcurlコマンドを使用して実行できます（httpsエンドポイントの基本認証用にユーザーパラメータを指定してください）。

<pre class="prettyprint">%&gt; curl --user sa_admin:s00p3rS3cr3t ${ES_ENDPOINT}/apache_elastic_example/_count
{"count":10000,"_shards":{"total":5,"successful":5,"failed":0}}
</pre>6. <code>ES_ENDPOINT/_cat/indices</code>にアクセスすれば、クラスタの健全性を確認できます。統計情報に基づいて一覧表示される<code>apache_elastic_example</code>インデックスを確認してください。
<pre class="prettyprint">%&gt; curl --user sa_admin:s00p3rS3cr3t ${ES_ENDPOINT}/_cat/indices
health status index pri rep docs.count docs.deleted store.size pri.store.size
yellow open .kibana 1 1 2 0 19.1kb 19.1kb
yellow open apache_elastic_example 1 1 10000 0 7.3mb 7.3mb
</pre><h2>データを可視化する</h2>ここでは、Kibanaインスタンスにアクセスして、引き続きデータの可視化に関する事例説明を行います。
<ol>
	<li>[管理]タブの「インデックスのパターン」オプションに移動し、<code>apache_elastic_example</code>インデックスをKibanaに追加して[作成]をクリックしてください。
</li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f930a285ae81b4789305b/download?uid=blt9500775124ee6afe" data-sys-asset-uid="blt9500775124ee6afe" alt="Kibana.png">
<ol>
	<li> [ディスカバリー]タブで<code>apache_elastic_example</code>インデックスを選択すると、データを確認できます。</li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f8d956b90dafb42826883/download?uid=blt3daf550e5200d493" data-sys-asset-uid="blt3daf550e5200d493" alt="Kibana.png">
<ol>
	<li><code>管理</code> &gt; <code>保存済みオブジェクト</code> &gt; <code>インポート</code>をクリックし、<a href="https://github.com/elastic/examples/blob/master/Common%20Data%20Formats/apache_logs/logstash/apache_kibana.json">apache_kibana.json</a>ファイルを選択して、サンプルのダッシュボードをインポートしてください。</li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f8e17bbf6891a58b1c33c/download?uid=blt0c1dd37c91caa5d5" data-sys-asset-uid="blt0c1dd37c91caa5d5" alt="Kibana.png">
<ol>
	<li>インポートした新しいダッシュボードを確認してください。 - 左側に[ダッシュボード]タブに移動して、<code>Apacheログ用ダッシュボードのサンプルを選択してください。</code>
</li>
</ol><img src="https://api.contentstack.io/v2/uploads/597f8f0e44e3d90f58bec901/download?uid=blt57da3cb08775f0af" data-sys-asset-uid="blt57da3cb08775f0af" alt="Sample_Dashboard_for_Apache_Logs_-_Kibana_and_Edit_Entry___Elastic_co_V5___Built_io_Contentstack_and_Elastic_Cloud.png">
<h2>まとめ</h2>
これで、クラスタのセットアップ、サンプルデータのインポート、最初に保存したダッシュボードの確認が完了しました！　サンプルのApacheログデータはElasticsearchに取り込まれており、お客様のログからインサイトや重要な価値を入手できるようになりました。引き続き、<a href="https://github.com/elastic/examples">Examples repo</a>や<a href="/guide/en/kibana/4.5/getting-started.html#tutorial-load-dataset">Kibana開始ガイド</a>からその他のサンプルデータセットを確認することができます。LogstashやBeatsを使用してデータ送信を開始することもできます。
その他の便利なリンクを以下に掲載します。クラウド上のElastic Stackを使用する手順で役立ちます。
<ul>
	<li>Cloud&nbsp;<a href="/guide/en/cloud/current/index.html" target="_blank">https://www.elastic.co/guide/en/cloud/current/index.html</a></li>
	<li>Kibana&nbsp;<a href="/guide/en/kibana/5.5/index.html" target="_blank">https://www.elastic.co/guide/en/kibana/5.5/index.html</a></li>
	<li>Elasticsearch&nbsp;<a href="/guide/en/elasticsearch/reference/5.5/index.html" target="_blank">https://www.elastic.co/guide/en/elasticsearch/reference/5.5/index.html</a></li>
	<li>Beats&nbsp;<a href="/guide/en/beats/libbeat/5.5/index.html" target="_blank">https://www.elastic.co/guide/en/beats/libbeat/5.5/index.html</a></li>
	<li>Logstash&nbsp;<a href="/guide/en/logstash/5.5/index.html" target="_blank">https://www.elastic.co/guide/en/logstash/5.5/index.html</a></li>
	<li>X-Pack&nbsp;<a href="/guide/en/x-pack/5.5/index.html" target="_blank">https://www.elastic.co/guide/en/x-pack/5.5/index.html</a></li>
	<li>The Definitive Guide <a href="/guide/en/elasticsearch/guide/current/index.html" target="_blank">https://www.elastic.co/guide/en/elasticsearch/guide/current/index.html</a></li>
</ul>その他、世界レベルの教育エンジニアによる、公式トレーニングを受講することもできます：&nbsp;<a href="/training" target="_blank">https://www.elastic.co/training</a>

Articles by Jamie Smith

Kubernetesオブザーバビリティイニシアティブにおけるメタデータの重要性

ElasticsearchとElastic APMでアプリを監視する

MetricbeatとElastic Cloudでシステムをモニタリング

チュートリアル：ホスティングされたElasticsearchとElastic Stack 5.x用のサンプルデータを使ってのElastic Cloudをはじめる

プロダクト

Elasticについて

情報