Java/1.6.0_24是一個殭屍程序，以及如何強制它們刷新它們的鏈接

Question

我們現在有很多網站都使用log4net基本錯誤日誌框架，並且我們收到來自任何地點的錯誤追加。我們注意到他們中的一些人因爲像谷歌，bing，雅虎等「機器人」而發生錯誤。但是有一些我們不確定如何解決。我有兩個關於它的問題：

1. 「Java/1.6.0_24」是一個Bot嗎？因爲我的問題＃2的用戶代理是關於這個的。
2. 「Java/1.6.0_24」仍然調用我們網站上不存在的子文件夾！就像，如果我們有一個名爲「Page1.aspx」的頁面，而不是調用「〜/ Page1.aspx」，他將其稱爲「〜/ minisite/Page1.aspx」。我怎麼能告訴他他錯了？有沒有辦法做到這一點？

感謝您

Answer 1

1. 這很可能是一個機器人，但它可能也有某種瀏覽器的基於Java發送用戶代理字符串 - 你不能相信它100％，但它可以給你一個關於連接實體是什麼的估計概念。根據機器人的種類，它可能只是忽略你的robots.txt，所以我只是在某處處理一些處理的東西。

2. 這些文件夾是否存在？如果是這樣，你可以使用HTTP's permanent redirect（代碼301）告訴他不再看那裏 - 但不能保證它會這樣做。