spark datasource IN subquery

Question

我爲spark2.0.3寫了一個數據源來加載其他數據源的數據。但是，當我在使用子查詢，過濾器爲null，如：

The in SQL is in this picture

但=子查詢的作品，如：

The = SQL is in this picture

Answer 1

簡短的回答是，我們目前不下推IN過濾器進入數據源。

主要問題是子查詢可能包含很多值，而將它們自動推下可能會變得非常昂貴（大型SQL，而源代碼可能無法使用這些值）。