Elasticsearch-Hadoop

リアルタイム分析を実現する最高の組合せ

膨大なデータストレージとHadoopのパワフルな処理能力を、リアルタイム検索・分析に優れたElasticsearchで接続しましょう。Elasticsearch - Hadoopコネクタの出番です。ビッグデータからすばやくインサイトを取得し、Hadoopエコシステムでの作業効率を高めます。

使ってみる

Elasticsearch-Hadoopドキュメント

Hadoopデータのインタラクティブ分析

Hadoopはバッチ処理に優れていますが、リアルタイムに解析結果を示すのは得意ではありません。ES-Hadoopなら、Hadoopデータでインタラクティブなデータディスカバリを実現できます。HadoopデータをElastic Stackにインデックスし、Elasticsearchエンジンで高速処理することにより、Kibanaの美しい可視化機能で最大に活用することが可能です。

ES-Hadoopを使うことで、Hadoopデータに役立つダイナミックな検索アプリケーションを手軽に構築したり、全文検索や、地理空間情報検索、アグリゲーション機能を使った深く遅延の少ない分析を実行したりすることができます。オススメ商品からゲノム配列決定まで、ES-Hadoopはあらゆるアプリケーションに新たな世界を切り拓きます。

ElasticsearchとHadoopの間でシームレスにデータを移動

リアルタイムの意思決定には、光の速さで変化するデータへの対応力が必要です。ES-Hadoopは、既存のHadoop APIに対する動的拡張により、HDFSを長期保存用レポジトリとして使用します。したがって、ElasticsearchとHadoop間の双方向でのデータのやり取りも簡単に行うことができます。パーティション認識、障害対応、型変換、コロケーションはすべて透過的に行われます。

Sparkと仲間たちを快適に使えるインターフェース

ES-HadoopはSpark、Spark Streaming、SparkSQLを全面的にサポートしています。さらにHive、Pig、Storm、Cascading、標準のMapReduceなど、あらゆるツールに対応しています。Elasticsearch向けのインデックスやクエリに最適なネイティブインターフェース機能を搭載しています。選ぶツール関わらず、Elasticsearchの強力なパワーを自在に活用することができます。

どこでもデータを安全に保つ

HTTP認証やSSL/TLSのサポートをはじめ、ES-HadoopにはHadoopとElasticsearchクラスター間でデータを安全に移動させるために必要なセキュリティ機能がすべて備わっています。また、Kerberos認証を使用するHadoopのデプロイもスムーズに動作します。

どんなHadoopもお任せ

ElasticはCloudera、MapR、Hortonworks、Databricksのオフィシャルパートナーです。Vanilla Hadoopをご使用の場合も、ほかのディストリビューションをお使いの場合も、心配いりません。ES-HadoopはCDH、MapR、およびHDPに認定されています。