scala

    0熱度

    1回答

    以下方法定義沒有類型參數錯誤: def validClasses(dataType: DataType) = { examples .flatMap { v: Any => Try { val canon = toCanonicalType(v, dataType) canon.getClass }

    12熱度

    2回答

    我有一個火花任務,它接收來自hdfs的8條記錄的文件,做一個簡單的聚合並將其保存回Hadoop。我注意到當我這樣做時,有幾百個任務。 我也不確定爲什麼有這樣的多個工作?我覺得工作更像是什麼時候發生的事情。我可以推測爲什麼 - 但我的理解是,在這個代碼中,它應該是一項工作,它應該分解成多個階段,而不是多個工作。爲什麼它不把它分解成幾個階段,它怎麼分解成工作? 至於200個加任務,因爲數據量和節點的量

    2熱度

    1回答

    val ordersRDD = sc.textFile("/user/cloudera/sqoop_import/orders"); val ordersRDDStatus = ordersRDD.map(rec => (rec.split(",")(3), 1)); val countOrdersStatus = ordersRDDStatus.countByKey(); val outp

    3熱度

    1回答

    如果有方法可以限制Scala中未處理期貨的數量,我無法支付資金。 例如在下面的代碼: import ExecutionContext.Implicits.global for (i <- 1 to N) { val f = Future { //Some Work with bunch of object creation } } 如果N太大,它最終會拋出O

    1熱度

    2回答

    使用下面的代碼獲得: val clz = 10L.getClass val ClassTag(clz) 只能得到盒裝類型: java.lang.Long 有沒有更好的解決辦法?或者在Scala中不可能?

    5熱度

    3回答

    阿卡版(SSL)服務器: Akka 2.4.7 阿卡特點: HTTPS Server Support Typesafe's ssl-config 語言:斯卡拉 我使用阿卡2.4.7的HTTP服務器功能提供不同的端口數HTTPS服務連接。 在這個階段,需求是這個角色系統的這個組件在一個JVM中託管幾個HTTPS服務 - 它是連接和集成其他服務的後端。 問題: 我想用Typesafe's ssl-co

    4熱度

    1回答

    我有一個非常基本的阿卡-HTTP的應用程序,基本上不超過你好,世界格局更爲 - 我已經定義了一個終點,只是約束它爲「localhost」和端口「8080 「: object Main extends App with Routes { private implicit val system = ActorSystem() protected implicit val execu

    1熱度

    1回答

    我有一個項目,我必須爲一些專有硬件包括一個fat-jar - 不要問,我知道它最適合在Central或其他某個回購站上使用,但事實並非如此。 :(我必須把它放在lib目錄下,所以sbt會把它當作一個非託管的依賴項。 但是jar包含slf4j,它的一箇舊版本,當Play!運行時拋出一個錯誤,抱怨靜態功能缺失(這是在SLF4J的較新版本中添加的。 這是我都試過了。 我試圖添加使用libraryDepe

    2熱度

    1回答

    我希望能夠創建同一個父演員的多個實例,但與不同的子演員。我認爲這與Guice一定是可能的,但我還沒有找到解決方案。 這是我心目中〜 控制器: class Application @Inject()(@Named(ParentActor.parentActor1) parentActor1: ActorRef, @Named(ParentActor.parentActor2) p

    0熱度

    1回答

    我一直在努力的機器學習KNN(K近鄰)算法使用Python和Python的Scikit學習機器學習API。 我創建的示例代碼與玩具的數據集簡單地使用Python和Scikit學習,我的KNN工作正常。但正如我們所知,Scikit-learn API可以在單機上運行,​​因此一旦我將玩具數據替換爲數百萬個數據集,它會降低我的輸出性能。 ...我已經尋找許多選項,幫助和代碼示例,這將使用與火花Scik