アプリケーション スポットライト：Elasticsearch

Elasticsearch、このたび「Spark 認定」を取得

企業がデータから迅速に知見を得られるように支援することが、Elasticsearchのミッションの中核です。企業がデータを保存する場所を選ばずに利用できることは、そのミッションにとって明らかに重要です。そしてHadoopは、企業が大量のデータを大規模に保存する方法を提供する上でのリーダーの1つです。この1年間、私たちは当社のリアルタイム検索およびアナリティクスエンジンのパワーをHadoopエコシステムにもたらすため、懸命に取り組んできました。当社のHadoopコネクターであるElasticsearch for Apache Hadoopは、主要な3つのHadoopディストリビューション（Cloudera、Hortonworks、MapR）と互換性があり、本日、Spark認定という、もう1つの素晴らしいマイルストーンを達成しました。

Elasticsearch + Spark = 高度な検索と、即時に得られる知見

Sparkは、Hadoopのようなデータストアやその他のデータストアで利用できる、人気の処理・分析ツールとして急速に台頭しています。私たちは、多くの顧客の Hadoop ディストリビューションやその他の環境でこれが利用されているのを目の当たりにしてきました。また、Databricks およびそれぞれのオープンソース コミュニティと協力して、この 2 つのテクノロジー間の接続性を向上させるために取り組んでいます。ElasticsearchとSparkを組み合わせることで、Sparkの統合処理エンジンに本格的な検索エンジンの機能が追加されます。これにより、ライブの顧客向け環境、あるいは内部分析のバックエンドを問わず、データディスカバリーと探索が強化されます。Elasticsearch for Apache Hadoop の Map/Reduce サポートにより、Spark アプリケーションは HDFS リソースとまったく同じように Elasticsearch とやり取りでき、リアルタイムで透過的にデータのインデックス作成と分析を行うことができます。当社のデータ可視化ツールKibanaを使用すると、簡単に生成できる円グラフ、棒グラフ、散布図、ヒストグラムなどを使って、Elasticsearch内の膨大なデータを探索することもできます。

データに問いかけ、分析を繰り返し、実用的な知見を抽出する機能を提供することで、Hadoopデプロイのラストマイル達成を支援するElasticsearchは、ビジネスで導入する企業が増え続けています。その多くはヘルスケア、金融、テレコミュニケーションなどの業界に属し、マイニングが必要な、極めて大規模で機密性の高いデータを保有しています。Elasticsearch for Apache Hadoopを使用すると、logファイルなどのデータに数時間ではなく数分でアクセスできます。そのため、不正を検知し、サービスの問題を特定し、顧客の行動を分析することができ、より迅速な解決につながります。また、優秀な開発者が事業の収益に直接貢献するために必要なツールも提供します。

公式に「Certified on Spark」として認定されたことを、これ以上なく嬉しく思います。当社のHadoopコネクターは、この2つをよりネイティブに統合し、企業にさらに高度な検索およびアナリティクス機能をデータにもたらすためのロードマップにおける最初のステップです。

ぜひチェックしてみてください

Spark Summitにご参加予定の場合、DatabricksのHolden Karau氏が6月30日（月）午後3時からのこちらのセッションで、ElasticsearchとSparkを使用して検索インデックス作成を効率化する方法を解説します。

また、8月20日（水）には、HadoopとSparkのデプロイメントでElasticsearchを活用し、リアルタイムの知見を得る方法に関するウェビナーも開催します。登録はこちらから行えます。

最後になりましたが、さっそく始めたい方は、こちらからElasticsearch for Apache Hadoopをダウンロードして、ご意見をお聞かせください！