Pyspark數據框運算符「不在」

Question

我想重寫這從R到Pyspark，任何好看的建議？

array <- c(1,2,3) 
dataset <- filter(!(column %in% array)) 

Answer 1

在pyspark你可以做這樣的：

array = [1, 2, 3] 
dataframe.filter(dataframe.column.isin(*array) == False) 

Answer 2

df_result = df[df.column_name.isin([1, 2, 3]) == False] 

Answer 3

稍有不同的語法和 「日期」 數據集：

toGetDates={'2017-11-09', '2017-11-11', '2017-11-12'} 
df= df.filter(df['DATE'].isin(toGetDates) == False)