0
選項是否DataFrameReadercsv（路徑：字符串）跳過空白行
org.apache.spark.sqlDataFrameReadercsv(path: String)
有跳過空白行的選項？特別是，最後一行是空行嗎？
A
回答
1
你可以嘗試設置mode到"DROPMALFORMED"爲：
val df = sqlContext.read.format("com.databricks.spark.csv").option("mode", "DROPMALFORMED")...
在Python：
df = sqlContext.read.format('com.databricks.spark.csv').options(mode = "DROPMALFORMED")...
其中根據documentation：
"...drops lines which have fewer or more tokens than expected."
相關問題
- 1. 通過閱讀字符跳過空白
- 2. 跳過Parsec的空白行
- 3. EXCEL VBA跳過空白行
- 4. 如何拆分字符串並跳過空白？
- 5. 跳到下一個非空白字符的字符串數組
- 6. 從字符串跳過空格
- 7. MySQL跳過空字符串查詢？
- 8. Rails路徑中的空白路徑
- 9. Android proguard問題：路徑不能爲空或空字符串。路徑= '空'
- 10. 用空白行分割字符串
- 11. Htaccess跳過空白行問題
- 12. 過濾掉以字符串開頭的路徑字符串
- 13. 填寫空白字符串
- 14. 在java java字符串中跳過行
- 15. Emacs - 跳過空白殺死
- 16. stringstream寫跳過空白
- 17. 如果字符串爲空，則跳過行
- 18. 如何跳過字符串？
- 19. 本地路徑字符串
- 20. 字符串/路徑比較
- 21. 查詢字符串路徑
- 22. 字符串路徑驗證
- 23. Redirect_to與字符串路徑
- 24. 跳過空白行，並在隨後的非空行
- 25. Java將字符串[]轉換爲字節[]確保跳過空字符串
- 26. 識別空白VS其它字符在字符串運行
- 27. 通過空白分割字符串，沒有空元素？
- 28. Java/Android：追加多個字符串，如果字符串爲空，則跳過
- 29. 空白字符
- 30. 由xml路徑串聯字符串
現在我得到這個錯誤： va lue選項不是org.apache.spark.sql.DataFrame的成員 –
我認爲上面使用了Python語法。對於Scala，請使用spark.read.option（「mode」，「DROPMALFORMED」）。csv（path） –