我可以在robots.txt中添加網站/默認/文件嗎？

我的網站上的客戶有時會上傳節點中存儲在網站/默認/文件中的文件。理想情況下，我希望文件隱藏在世界中。有一天我很震驚地發現Google在其搜索結果中列出了一個私人文件。我可以在robots.txt中添加網站/默認/文件嗎？

那麼我可以在robots.txt中添加這個目錄嗎？它會影響其他東西嗎？至少搜索引擎不會把這些文件帶給世界！

2011-04-29 AgA

如果您將上傳目錄添加到robots.txt，Google會跳過它。

這是你如何添加東西的robots.txt：

User-agent: * 
Disallow: /folder/ 
Disallow: /folder/file.htm

2011-04-29 07:50:25

我問的是網站/默認/ files目錄明確。沒有其他人。與其他節點相關的所有上傳圖像可能會用作存儲區域呢？ – AgA 2011-04-29 09:03:47

也許我不理解你的問題，但是如果你想阻止目錄被谷歌或任何其他機器人看到，你可以使用：User-agent：* Disallow：/ sites/default/files/ – 2011-04-29 11:08:16

我知道這一點，但除此之外，我想知道這對於Drupal站點有什麼副作用。一個直接的副作用是該目錄中的所有圖像/文件不會在正常/圖像搜索中列出。 – AgA 2011-04-29 12:32:26

回答