elasticsearch-hadoop

0熱度

1回答

ResouceManager得到stucked在接受國家

我試圖整合我的ES版本2.2.0使用Hadoop HDFS.In我envoirnment，我有1個主節點和數據節點。在我的主節點上安裝了我的Es。 但是，當它與HDFS集成時，我的資源管理器應用程序作業會停留在Accepted狀態。 不知何故，我發現鏈接改變我的紗線-site.xml中設置： <property> <name>yarn.nodemanager.resource.memor

hadoop elasticsearch elasticsearch-hadoop 2016-05-17

---

0熱度

1回答

如何將es.nodes參數設置爲Spark的多個Elasticsearch節點？

所以我想從多個Elasticsearch節點讀取數據到Spark中。我更喜歡使用「es.nodes」參數並將「es.nodes.discovery」設置爲false。配置參數描述爲here。我試圖找到一些關於如何將「es.nodes」設置爲值數組的例子，但是我不能。請幫助。

elasticsearch apache-spark elasticsearch-hadoop 2016-05-23

---

0熱度

1回答

從Hive自動插入到Elasticsearch

我目前試圖找到一種方法來自動將數據從Hadoop文本文件添加到elasticsearch。 我們正在運行HIVE v0.11，Hadoop v2.0.5，Elasticsearch 1.7.1和elasticsearch-hadoop v2.1.0 這些文件存儲在名爲year/month/day的路徑/ tmp/test-log/apache2log下的不同子文件夾中 此表中創建採集工作從Hado

hadoop elasticsearch hive elasticsearch-hadoop 2015-08-13

---

0熱度

1回答

sparkR 1.4.0：如何包括罐子

我想使用elasticsearch-hadoop-2.1.0.rc1.jar jar文件（找到here）將SparkR 1.4.0掛鉤到Elasticsearch。它需要一些黑客入侵，調用SparkR:::callJMethod函數。我需要爲幾個Java類獲得一個jobj R對象。對於一些類，這個工程： SparkR:::callJStatic('java.lang.Class',

elasticsearch apache-spark sparkr elasticsearch-hadoop 2015-06-25

---

2熱度

1回答

將條目插入ElasticSearch的最佳方式是什麼？

我是ElasticSearch的新手，我有180個字段和1200萬行的文件。我創建了一個索引並鍵入ElasticSearch和Java程序，但需要1.5小時。有沒有其他最好的方式來將數據加載到ElasticSearch並縮短時間。我嘗試過一個縮減地圖程序，但有時它會失敗並生成重複的條目，並且比我的順序程序花費更多的時間。 有人可以給出很好的建議嗎？

java elasticsearch elasticsearch-hadoop 2016-01-11

---

1熱度

1回答

如何使用hadoop map-reduce和es-hadoop將json索引到elasticsearch？

我有大量的數據存儲在HDFS中，我們想索引到Elasticsearch。微不足道的想法是使用Elasticsearch-hadoop庫。 我遵循this video的概念，這裏是我爲這項工作寫的代碼。 public class TestOneFileJob extends Configured implements Tool { public static class Tokenize

json hadoop elasticsearch mapreduce elasticsearch-hadoop 2015-11-23

---

1熱度

1回答

FAILED：SemanticException找不到類'org.elasticsearch.hadoop.hive.ESStorageHandler'

我在關注https://gist.github.com/costin/8025827示例不確定爲什麼會出現此錯誤。任何迴應都非常感謝。 hive> ADD JAR hdfs:///auxlib/elasticsearch-hadoop-2.2.0.jar ; converting to localhdfs:///auxlib/elasticsearch-hadoop-2.2.0.jar Add

elasticsearch hive hadoop2 elasticsearch-hadoop 2016-03-09

---

-2熱度

1回答

我必須安裝Hadoop才能使用Elasticsearch ES-Hadoop連接器

我有Elasticsaerch羣集，並且想要使用Apache Spark在其上運行計算。 The ES-Hadoop connector包含可在Elasticsearch上運行計算的Spark庫。我是否必須首先安裝Hadoop，或者我可以將elasticsearch-spark_2.10-2.2.0-rc1.jar放在Spark類路徑中，正如文檔中提到的那樣，以使其工作正常？

hadoop elasticsearch apache-spark elasticsearch-hadoop 2016-03-09

---

2熱度

2回答

Spark-Cassandra VS Spark-Elasticsearch

我一直在使用Elasticsearch已經有一段時間了，現在使用Cassandra的經驗並不多。 現在，我有一個項目，我們想使用spark來處理數據，但我需要決定是否應該使用Cassandra或Elasticsearch作爲數據存儲來加載我的數據。 就連接器而言，Cassandra和Elasticsearch現在都有一個很好的連接器來加載數據，所以不會成爲決定性因素。 決定勝利的因素將是我能夠在S

elasticsearch apache-spark cassandra-2.0 spark-cassandra-connector elasticsearch-hadoop 2015-08-28

---

2熱度

2回答

在ElasticSearch中是否可以使用任何ES Connector進行JOIN操作以用於presto或Hive（ElasticSearch-Hadoop）？

我們知道JOIN操作在索引之間的ElasticSearch中是不可能的，可以使用Presto或Hive來實現，也就是說，我們可以使用任何ElasticSearch Connector for Presto或Hive來執行JOIN操作嗎？ 我們可以使用ElasticSearch-Hadoop在ElasticSearch中加入 - https://github.com/elastic/elastics

join elasticsearch hive prestodb elasticsearch-hadoop 2015-05-31

---