distributed-cache

1熱度

1回答

Hadoop分佈式緩存錯誤消息解釋

我想在分佈式緩存中放置3個文件。 我把其中的一個程序，使用： DistributedCache.addLocalFiles(conf, "local/path/to/file"); 而且我也使用-files選項將其他2個文件。 在本地運行時，在獨立模式下，一切正常。 當試圖以僞分佈模式運行它時，出現這個錯誤，我不明白它的含義。我google了，但沒有成功。 Distributed cache

hadoop distributed-cache 2012-09-09

---

2熱度

1回答

Hadoop分佈式緩存：文件未發現異常

我想實現MapReduce的K-均值。 我已上載初始重心文件分佈式緩存 在驅動程序類 DistributedCache.addCacheFile(new URI("GlobalCentroidFile"),conf); 在我的映射類 Path[] localFiles = DistributedCache.getLocalCacheFiles(job); File file = new Fi

hadoop mapreduce distributed-cache 2013-04-02

---

1熱度

2回答

Distibuted Cache減少Hadoop

我想在Reducer2的內存中保存Reducer1和File B的內存中的文件A.這可能在hadoop中使用分佈式緩存技術？否則，有沒有其他辦法可以實現這個目標？ 謝謝

java hadoop mapreduce distributed-cache 2012-09-23

---

0熱度

1回答

在Gemfire Cache中寫入對象作爲關鍵字

我想將一個對象作爲Gemfire區域內的關鍵字。 TestClass keyObject = new TestClass(); region.put(keyObject, "value"); 它失敗，下面的錯誤 - com.gemstone.gemfire.cache.client.ServerOperationException： com.gemstone.gemfire.pdx.PdxS

java caching distributed-caching distributed-cache gemfire 2012-09-25

---

1熱度

1回答

閱讀從Hadoop的工作從DistributedCache

分片輸出（標題應該是分片，以反映Hadoops 碎片其在多個文件輸出） 我鏈接多個Hadoop作業在一起。其中一個早期的作業會產生比其他作品小几個數量級的輸出，因此我想將它放到DistributedCache中。這是一個很難的部分。這是我寫的代碼這樣做： FileSystem fs = FileSystem.get(conf); Path pathPattern = new Path(distC

java hadoop distributed-computing distributed-cache 2013-02-21

---

0熱度

1回答

配置（）的Hadoop集羣上運行，但可以在Eclipse調用時不被調用，DistributedCache FileNotFoundException異常

我的程序中使用DistributedCache來緩存文件 JobConf conf = new JobConf(new Configuration(), ItemMining.class); DistributedCache.addCacheFile(new URI("output1/FList.txt"), conf); DistributedCache.addCacheFile(new U

eclipse hadoop configure filenotfoundexception distributed-cache 2013-04-15

---

4熱度

1回答

文件沒有把正確到分佈式緩存

我使用下面的代碼將一個文件添加到分佈式緩存： Configuration conf2 = new Configuration(); job = new Job(conf2); job.setJobName("Join with Cache"); DistributedCache.addCacheFile(new URI("hdfs://server:port/FilePath/part-r

hadoop distributed-cache 2012-10-03

---

1熱度

1回答

從DistributedCache獲取文件時的Hadoop：FileNotFoundExcepion

我有2個節點羣集（v1.04），主從服務器。在主人的Tool.run()上，我們使用addCacheFile()將兩個文件添加到DistributedCache。文件確實存在於HDFS中。 在Mapper.setup（），我們想用 FSDataInputStream fs = FileSystem.get(context.getConfiguration()).open(path). 的問題從

hadoop distributed-cache 2012-11-22

---

4熱度

1回答

在Hadoop DistributedCache上存儲TreeSet

我試圖在DistributedCache上存儲TreeSet以供Hadoop map-reduce作業使用。到目前爲止，我已經在添加從HDFS文件到DistributedCache如下： Configuration conf = new Configuration(); DistributedCache.addCacheFile(new URI("/my/cache/path"), conf);

java serialization hadoop mapreduce distributed-cache 2013-04-21

---

1熱度

1回答

DistributedCache Hadoop - FileNotFound

我想放置在分佈式緩存中的文件。爲了做到這一點，我調用使用-files選項我的驅動程序類，是這樣的： hadoop jar job.jar my.driver.class -files MYFILE input output 的getCacheFiles()和getLocalCacheFiles()返回包含MYFILE的URI /路徑的陣列。 （如：HDFS：//localhost/tmp/ha

hadoop filenotfoundexception distributed-caching distributed-cache 2012-08-28

---