2017-03-02 62 views
-3

爲什麼我不能讀取hadoop自述文件?爲什麼不讀取文件在SparkContext.textFile()

Spark REPL Image

+0

您似乎已經忘記了問一個問題的解決方案。 –

+0

@ cricket_007這個職位已更新,請對我發表評論 –

+0

你真的爲EC2付費學Spark嗎?這是浪費金錢...無論如何,你仍然沒有問題。是什麼讓你認爲第一行不是空白? –

回答

0

下面你可以找到星火2.1.0

val appName = "Read Text File Example" 
val master = "local[*]" 

val conf = new SparkConf().setAppName(appName).setMaster(master) 

val spark = SparkSession 
    .builder() 
    .config(conf) 
    .getOrCreate() 

val sp = spark.read.text("pathtofile/README.md") 

sp.collect().foreach(println) 
相關問題