1
從這個JIRA票Hide UserDefinedType in Spark 2.0 ,似乎火花隱藏2.0版的UDT API。Apache spark 2.2支持用戶定義類型(UDT)嗎?
是否存在替代函數或我們可以在2.2版本中使用的API,以便我們可以定義UserDefinedType?我希望在數據框或結構化流中使用自定義類型。
從這個JIRA票Hide UserDefinedType in Spark 2.0 ,似乎火花隱藏2.0版的UDT API。Apache spark 2.2支持用戶定義類型(UDT)嗎?
是否存在替代函數或我們可以在2.2版本中使用的API,以便我們可以定義UserDefinedType?我希望在數據框或結構化流中使用自定義類型。
沒有其他的API和UDT保持私密(https://issues.apache.org/jira/browse/SPARK-7768)。
通用Encoders
(org.apache.spark.sql.Encoders.kryo
和org.apache.spark.sql.Encoders.javaSerialization
)擔任類似的目的Dataset
,但目前還沒有直接替代: