Java lucene標準分析器的默認分隔符？

Question

我正在尋找java lucene標準分析器標記輸入字符串的所有分隔符。

需要知道默認用於標記化的所有分隔符。

Answer 1

我知道（從Lucene的行動），其不屬於一個-ZA-Z或α-ZA-Z具有附加符號的variatons所有字符被用作分隔符，包括數字。
因此，您可能會將Mc'Donald分成「Mc」「Donald」，您可能會將「Web2.0」標記爲「Web」，依此類推。
最好的是做一個測試，並輸入各種字符，然後在這裏發佈你的結果。