hadoop-plugins

2熱度

2回答

我在使用hadoop的eclipse插件。我可以通過製作hadoop服務器來查看HDFS中的所有文件，但是當我嘗試從eclipse運行wordcount.java文件時，它會給我例外，而從終端運行它會很順利。以下例外。 2/11/14 04:09:06 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your

0熱度

1回答

Hadoop數據拆分和數據流控制

我有兩個問題作爲存儲系統的hadoop。我有3個數據節點的Hadoop集羣，我想直接一個巨大的文件的拆分說大小爲128MB（假設分割大小爲64MB），以我的選擇數據的節點。這就是如何控制在這種情況下哪個分割去哪個DataNode。我的意思是讓我們說我們有3個數據節點（即D1，D2，D3），我們希望特定的分裂（讓我們說'A'），我希望它移動到特定的數據節點讓它成爲D2。我們該怎麼做？ hado

1熱度

2回答

hadoop eclipse插件安裝目錄

我是hadoop和eclipse的新手。任何人都可以在嘗試添加新的hadoop服務器時告訴我hadoop eclipse插件的安裝目錄的格式。我用Google搜索，並試圖用沒有運氣小時越來越絕望...任何幫助，將不勝感激

2熱度

1回答

HBase按值排序

我正在使用SingleColumnValueFilter，scan，getScanner，並從hbase表中檢索值。正在生成的值在行Id-vise中排序。但是我希望將結果排序在價值中。實施例： Hbase Table: RowId | col1:amount | col1:balance 1 5000 1000 2 3000 1500 3 40

1熱度

1回答

Hadoop配置同時使用的MongoDB和MySQL

任何一個都可以從MongoDB中到RDBS給出的示例代碼...我已經試過，取出由MongoDB的輸出數據存儲在mongodb.For，我知道該怎麼做Hadoop配置在java中工作。，我想知道的三件事... 它的Hadoop版本同時支持的MongoDB和RDBS？是否有可能使用多個集合作爲輸入...？如果可能的話，我們該怎麼做？我試圖在Hadoop中的MongoDB查詢，它的工作fine.B

5熱度

1回答

的Datanode上單臺機器在Hadoop中失敗

我設置和ubuntu上配置須藤節點的Hadoop環境12.04 LTS使用下面的教程 http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/#formatting-the-hdfs-filesystem-via-the-namenode 打字的Hadoop /斌$ start-

0熱度

1回答

apache Hadoop-2.0.0 aplha版本安裝完全集羣使用fedration

我已經成功安裝了hadoop穩定版本。但在安裝hadoop -2.0.0版本時感到困惑。我想在兩臺機器上使用聯合，在兩個節點上安裝hadoop-2.0.0-alpha。 rsi-1，rsi-2是主機名。什麼應該是以下實現聯邦屬性的值。這兩臺機器也都用於datanode。 fs.defaulFS dfs.federation.nameservices dfs.namenode.name.dir

2熱度

3回答

如何從build.xml文件構建hadoop1.0.4 eclipse插件？

我必須在Eclipse中爲Hadoop1.0.4編寫MapReduce程序。此版本的Hadoop不包含用於eclipse的插件。但是，build.xml文件可以在$ HADOOP_HOME/src/contrib/eclipse-plugin中找到。如何從build.xml文件生成或構建eclipse的插件？

3熱度

2回答

部分聚合VS Combiner哪個更快？

有關如何級聯/燙傷優化如何的注意事項map-side evaluation 他們使用所謂的部分聚合。實際上Combiner更好嗎？在一些常見的hadoop任務上是否有任何性能比較（例如字數）？如果將來這樣的話，hadoop會支持它嗎？

1熱度

1回答

Eclipse MapReduce插件錯誤：服務器IPC版本7無法無法與客戶端版本3通信

當我嘗試連接到MapReduce位置，該位置是集羣中的一個名稱節點和數據節點（我的eclipse和mapreduce插件）錯誤：服務器IPC版本7不能無法與客戶端版本3通信。我嘗試在谷歌上找到一些信息，但找不到太多內容。這是因爲我的mapreduce eclipse插件使用舊版IPC和hadoop集羣有一個更新的插件。所以它只是我使用過時的插件？我如何找到我的eclipse插件使用哪個IPC版本？