Spark數據框：它是否會觸發sql或spark spark？

Question

Spark數據框的概念是否進入Spark SQL或Spark Streaming。傳統上，數據幀似乎屬於Spark SQL。但是，如果錯誤， 糾正我，數據幀似乎也能夠處理實時數據，所以我陷入了這個問題。

Answer 1

火花數據幀 s爲適合於火花批處理和火花流處理。 星火dataframes在本質上是分佈和不變，所以你不能改變它，但是從現有數據框中個新的。你可以有更多的信息在Spark SQL, DataFrames and Datasets Guide

而且，火花SQL是我們寫的查詢，像的MySQL傳統數據庫的概念。並且火花傳輸是一個概念，其中火花API被定義爲處理流數據。所以我的觀點是他們是不同的概念。你可以區分批處理和流處理在火花雖然。