將Drupal robots.txt禁止仍記錄在Apache日誌文件？

Question

我在Drupal網站的特定代理中爲robots.txt設置了一些規則。

我有一個問題。當這個代理試圖訪問網站時，這個訪問是否仍然會記錄在我的apache access_log文件中？

Answer 1

Disallow robots.txt在技術上不會阻止用戶代理訪問您的網站。每個用戶代理都會決定是否要遵守robots.txt。

默認情況下，Drupal對robots.txt文件的內容不做任何處理，而robots.txt內容根本不會影響服務器的日誌。