sparklyr

    3熱度

    1回答

    我正在嘗試使用Rstudio將R與Spark的本地實例連接起來。但是,我收到顯示的錯誤消息。我錯過了什麼?我正在使用Windows 10.我正在關注rstudio上的教程。 library(sparklyr) spark_install(version = "1.6.1") library(sparklyr) library(dplyr) sc <- spa

    1熱度

    2回答

    我試圖用sparklyr和 spark_install 安裝火花,我得到以下錯誤安裝的火花。 C:\dsvm\tools\UnxUtils\usr\local\wbin\tar.exe: Cannot use compressed or remote archives C:\dsvm\tools\UnxUtils\usr\local\wbin\tar.exe: Error is not re

    44熱度

    7回答

    有人對SparkR vs Sparklyr的優缺點有一個概述嗎? Google不會產生令人滿意的結果,並且兩者看起來都很相似。嘗試兩種方法,SparkR看起來更加麻煩,而Sparklyr非常簡單(既可以安裝也可以使用,尤其是對於dplyr輸入)。 sparklyr可以僅用於並行運行dplyr函數還是用於「普通」R代碼? 最佳

    0熱度

    1回答

    我使用sparklyr它似乎運作良好。但是,我以前的一些代碼不會被執行。 如果是使用 complete.cases 我得到 Error: org.apache.spark.sql.AnalysisException: undefined function COMPLETE.CASES 我得到了quantile功能相同的結果 再者就是似乎在星火dataframes的is.na,不計算相同辦法。所

    5熱度

    1回答

    我想通過sparklyr將本地桌面RStudio會話連接到遠程spark會話。當您在RStudio的sparklyr ui選項卡中添加新連接並選擇羣集時說您必須在羣集上運行,或者與羣集具有高帶寬連接。 任何人都可以闡明如何創建這種連接?我不知道如何創建的這個重複的例子,但一般我會做的是: library(sparklyr) sc <- spark_connect(master = "spark:

    1熱度

    1回答

    無法將csv讀入Spark我試圖用sparklyr將csv文件讀入R.我可以使用read.csv()將.csv讀入R,但是當我嘗試使用spark_read_csv()時發生故障。 accidents <- spark_read_csv(sc, name = 'accidents', path = '/home/rstudio/R/Shiny/accident_all.csv') 然而,當我嘗試