我使用Spark 1.6.1。每種格式的書寫或閱讀選項的參考在哪裏?
我們正在嘗試使用HiveContext和DataFrameWriter將ORC文件寫入HDFS。雖然我們可以用
df.write().orc(<path>)
我們寧願做這樣的事情
df.write().options(Map("format" -> "orc", "path" -> "/some_path")
這使我們可以靈活地改變取決於使用該助手庫的應用程序的格式或根路徑。我們可以在哪裏找到可以傳遞給DataFrameWriter的選項的引用?我什麼也沒有發現在這裏的文檔