Flume「假脫機目錄源」遞歸 - 查找子目錄內的文件

Question

我正在尋找Flume「假脫機目錄源」遞歸 - 查找子目錄內的文件。 這裏有一些參考https://issues.apache.org/jira/browse/FLUME-1899 但是自那時以來有多個版本出來，有沒有什麼辦法可以在後臺源文件的子目錄中查找子目錄中的遞歸目錄。

Answer 1

我想你可以直接使用補丁FLUME-1899-2.patch。 將「recursiveDirectorySearch」設置爲您的配置文件中的ture。

注意：配置文件的ignorePattern中的正則表達式也會影響recursiveDirectory文件夾名稱。因此如果您想忽略文件夾名稱，您可能需要修改org/apache/flume/client/avro/ReliableSpoolingFileEventReader.java中的代碼。