Elasticsearch-Hadoop

Hadoopはバッチ処理に優れていますが、リアルタイムに解析結果を示すのは得意ではありません。ES-Hadoopなら、Hadoopデータでインタラクティブなデータディスカバリを実現できます。HadoopデータをElastic Stackにインデックスし、Elasticsearchエンジンで高速処理することにより、Kibanaの美しい可視化機能で最大に活用することが可能です。

ES-Hadoopを使うことで、Hadoopデータに役立つダイナミックな検索アプリケーションを手軽に構築したり、全文検索や、地理空間情報検索、アグリゲーション機能を使った深く遅延の少ない分析を実行したりすることができます。オススメ商品からゲノム配列決定まで、ES-Hadoopはあらゆるアプリケーションに新たな世界を切り拓きます。

リアルタイムの意思決定には、光の速さで変化するデータへの対応力が必要です。ES-Hadoopは、既存のHadoop APIに対する動的拡張により、HDFSを長期保存用レポジトリとして使用します。したがって、ElasticsearchとHadoop間の双方向でのデータのやり取りも簡単に行うことができます。パーティション認識、障害対応、型変換、コロケーションはすべて透過的に行われます。

ES-HadoopはSpark、Spark Streaming、SparkSQLを全面的にサポートしています。さらにHive、Pig、Storm、Cascading、標準のMapReduceなど、あらゆるツールに対応しています。Elasticsearch向けのインデックスやクエリに最適なネイティブインターフェース機能を搭載しています。選ぶツール関わらず、Elasticsearchの強力なパワーを自在に活用することができます。

HTTP認証やSSL/TLSのサポートをはじめ、ES-HadoopにはHadoopとElasticsearchクラスター間でデータを安全に移動させるために必要なセキュリティ機能がすべて備わっています。また、Kerberos認証を使用するHadoopのデプロイもスムーズに動作します。

ElasticはCloudera、MapR、Hortonworks、Databricksのオフィシャルパートナーです。Vanilla Hadoopをご使用の場合も、ほかのディストリビューションをお使いの場合も、心配いりません。ES-HadoopはCDH、MapR、およびHDPに認定されています。