13
火花的1.5.0似乎可以編寫自己的UDAF的對DataFrames定製的聚合： Spark 1.5 DataFrame API Highlights: Date/Time/String Handling, Time Intervals, and UDAFsPython API中提供了Spark SQL UDAF（用戶定義的聚合函數）嗎？
如果此功能是Python API所支持然而我不清楚？
A
回答
2
您無法在Spark 1.5.0-2.0.0中定義Python UDAF。有一個JIRA跟蹤此功能要求：
解決了與目標「後」，所以它可能不會很快出現。
您可以從PySpark使用Scala的UDAF - 它被描述Spark: How to map Python with Scala or Java User Defined Functions?
相關問題
- 1. 什麼時候合併發生在用戶定義的聚合函數中Spark中的UDAF
- 2. 在Python類中註冊Spark SQL用戶定義函數
- 3. Oracle用戶定義聚合函數VARCHAR
- 4. SQL有聚合函數嗎？
- 5. Python - Pandas數據框：聚合後的自定義聚合函數？
- 6. 用戶定義的使用plsql的自定義聚合函數
- 7. Virtuoso中用戶定義的SPARQL聚合函數
- 8. Spark GroupBy聚合函數
- 9. mysql中的聚合UDF（用戶定義函數）C
- 10. 在用戶定義的聚合函數中有序迭代？
- 11. SQL聚合函數
- 12. 在Vertica 7中安裝group_concat UDAF聚合函數
- 13. Spark SQL - 聚合集合？
- 14. Oracle PIVOT子句中的用戶定義聚合函數
- 15. SQL中的聚合函數
- 16. 包中的自定義聚合函數
- 17. SQL聚合函數
- 18. 用戶定義的聚合函數在SparkR
- 19. Oracle SQL開發人員中的用戶定義聚合函數開發人員
- 20. T-SQL中用戶定義的聚合函數而不是.net程序集？
- 21. Graph API提供了自定義頁面標籤的功能嗎？
- 22. 最有用的用戶自定義聚合函數
- 23. SQL聚合函數
- 24. SQL聚合函數
- 25. SQL嵌套聚合函數
- 26. 使用SQL聚合函數
- 27. MS SQL Server中的自定義聚合函數？
- 28. 自定義聚合函數或sql server中的等價物
- 29. 如何從pyspark中的spark sql查詢調用用戶定義的函數？
- 30. Microsoft SQL：無法找到列「dbo」或用戶定義的函數或聚合
不，它不支持。你可以打電話給斯卡拉UDAF，但它不漂亮。查看[我的答案]（http://stackoverflow.com/a/33257733/1560062）[Spark：如何將Python與Scala或Java用戶定義的函數進行映射？]（http://stackoverflow.com/q/33233737/ 1560062）爲一個完整的例子。 – zero323
@ zero323現在1.6 spark還是1.61？ – stackit
@stackit不是1.6.x也不是2.0。 – zero323