cascading

1熱度

1回答

我目前在學習Mesos，並想知道是否可以執行在Mesos池中使用Cascading定義的作業。由於Mesos支持Hadoop和Cascading流編譯爲Hadoop jar文件，我認爲這是可行的。但是我需要尊重特定的設置嗎？

0熱度

1回答

所以我有一個MVC的頂部的SQL數據庫，我創建一個添加到數據庫的形式。我有4代表所關心的：俱樂部（ID，姓名）運動（ID，姓名） SportsInClub（ClubID，SportID）事件（ID，姓名，CLUBID，SPORTID）//表格包含其他內容，但這是重要的。所以事情是，一旦一個Club按名稱選擇我需要根據ClubID過濾Sports。所以如果我選擇Club A，我只想要在A俱

2熱度

1回答

將parquet-avro支持添加到燙印

如何創建將處理avro和parquet之間的轉換的ScaldingSource。溶液應： 1. Read from parquet format and convert to avro memory representation 2. Write avro objects into a parquet file 注：我注意到層疊有利用節儉和實木複合地板的模塊。我覺得這將是一個開始尋找的好地

0熱度

1回答

hadoop寫入文件並放入分佈式緩存

我需要根據hadoop job.properties中的內容創建一個動態文件，然後將其放入分佈式緩存中。當我創建文件時，我發現它是用「/ tmp」的路徑創建的。我創建了一個符號名稱並在緩存中引用此文件。現在，當我嘗試讀取Dis中的文件時。緩存我無法訪問它。我得到th錯誤：java.io.FileNotFoundException：請求的文件/tmp/myfile6425152127496245

0熱度

1回答

如何從Java向遠程YARN集羣提交級聯作業？

我知道我可以通過將它打包到JAR中來提交級聯作業，詳見Cascading用戶指南。如果我使用hadoop jar CLI命令手動提交，那麼該作業將在羣集上運行。但是，在最初的Hadoop 1級聯版本中，可以通過在Hadoop JobConf上設置某些屬性來向集羣提交作業。設置fs.defaultFS和mapred.job.tracker導致本地Hadoop庫自動嘗試將作業提交到Hadoop1 J

1熱度

2回答

劍道UI層疊組合框裏面電網不工作

我是新來的劍道UI HTML v2013.1.226。我正在嘗試劍道內層疊組合框grid.In這個小提琴http://jsfiddle.net/moonolite3/abgy56ak/6/ HTML： <div id="myLayout" class="k-content" style="background-color:Gray; height:100%;"> <div id="content

0熱度

1回答

如何創建管道？

我正在編寫一個程序來管理文件，即將文件（如對象）從directory1移動到2.我在級聯中寫了一段代碼，我在考慮如何編寫「管道」來創建流。有人可以幫我嗎？謝謝。 // access path to the file input and output and archiving String inputPath = args[0]; //Directory in HDFS of the I

0熱度

1回答

Hadoop的級聯：部分目錄源挖掘

我的數據有結構是這樣的： +data |-2014080700_00.txt |-2014080700_01.txt |-2014080701_00.txt |- ... |-2014080723_00.txt |-2014080800_00.txt |- ... |-2014090800_00.txt 我知道我可以使用數據目錄中的所有文件與Tap象下面這樣： Tap inTa

0熱度

1回答

使用層疊SDK運行EMR失敗

我下面這個教程安裝級聯到EMR： http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/CreateCascading.html 但它失敗，因爲引導作用安裝級聯-SDK。相應的日誌在這裏：http://pastebin.com/jybHssTQ。從日誌中可以看出，由於未找到apt-get，因此失敗。真的嗎？我還檢查了s

0熱度

1回答

jasperreports級聯參數不起作用

我需要一個多選參數從數據庫中獲取值。我認爲級聯參數是正確的事情，讓這個工作？我做了一個簡單的報告，用jasperstudio 5.6.2測試級聯參數，但參數甚至是空的。沒有要選擇的數據。這裏是JRXML部分： <?xml version="1.0" encoding="UTF-8"?> <jasperReport xmlns="http://jasperreports.sourceforge