Logstash
ダウンロード
logstash

データの一元化、変換、保管

Logstashは、オープンソースのサーバーサイドデータ処理パイプラインで、膨大な数のソースから同時にデータを取り込み、変換して、指定された任意の「格納庫（スタッシュ）」（私たちの場合は当然、Elasticsearchです）に送信します。
logstash

徹底解説: Logstash入門。 ビデオをみる

New The persistent queue feature goes GA in Logstash 5.4, guaranteeing at-least-once delivery for your in-flight events. Trust in your pipeline. Read More

5.10.83.30 user-identifier frank

[10/Oct/2000:13:55:36 -0700]

"GET/apache_pb.gif HTTP/1.0" 200 2326

5.10.83.30 user-identifier frank

[10/Oct/2000:13:55:36 -0700]

"GET /apache_pb.gif HTTP/1.0" 200 2326

5.10.83.30 user-identifier frank

[10/Oct/2000:13:55:36 -0700]

"GET /apache_pb.gif HTTP/1.0" 200 2326

5.10.83.30 user-identifier frank

2000-10-10T13:55:36.000Z.

"GET /apache_pb.gif HTTP/1.0" 200 2326

拡張性

パイプラインの作成と設定も、お好み通りに。

Logstashには、200を超えるプラグインを持つフレームワークがあります。さまざまなinput、filter、outputを組み合わせて、スムーズに動くパイプラインを作ることができます。

カスタムアプリケーションからデータ投入するのに適切なプラグインが見つからない場合でも、Logstashプラグインは簡単に作成できます。 プラグイン作成のためのすばらしいAPIとプラグインジェネレータが用意されており、プラグインの作成と共有が可能です。

全てを可視化可能に

Logstashの洗練されたパイプラインは様々な用途に利用可能で、そのパフォーマンスや可用性、ボトルネックを理解することは非常に重要です。X-PackのMonitoring機能は、Logstashノードの観察や考察を助けます。

Logstash Monitoring Dashboard

端から端までパイプラインを保護する

Logstashインスタンスが10でも1000でも、パイプラインを一貫して保護します。Beatsからのデータはもちろん、他の入力も転送時に暗号化できます。また、セキュリティ保護されたElasticsearchクラスタとの完全統合も可能です。

Logstashで処理できるログの数はどれぐらい? ぜひお試しください。

依存性を調べたり、再起動を繰り返すためにcronジョブを書いたりする必要はありません。Logstashは最小限のステップで起動でき、イベントストリームと同期したパイプラインを展開します。

ダウンロード

自由に利用できるオープンソース。