您能否增加火花殼輸出字符限制

Question

在火花殼中運行代碼時，直接在shell中打印小的輸出/樣本通常比較方便，而不是將輸出放入文件中。

默認情況下，shell會在給定數量的字符（相當小）後截斷這樣的輸出。有沒有辦法可以增加這個字符限制？我跑星火1.2

感謝您閱讀

Answer 1

你說的「輸出」是什麼意思？

如果你想打印ň線的RDD使用take()的：

myRDD.take(n).foreach(println) 

根據Spark Programming Guide 1.2.0，這個功能「返回數組與數據集的第n個元素請注意，這是目前還沒有。並行執行，而驅動程序計算所有元素。「