MSN bot將錯誤參數附加到URL

Question

在我的網站http://www.mustseeindia.com/places-around-bangalore「」是有效的URL。

爬行時，MSN bot正在追加一個字符串並導致抓取錯誤。

字符串由MSN機器人所附 - 「&佈局= button_count & show_faces =假&寬度= 80; &行動=像&字體&色彩方案=光&高度= 25」，由產生

錯誤的URL MSN bot - http://www.mustseeindia.com/places-around-bangalore&layout=button_count&show_faces=false&width=80;&action=like&font&colorscheme=light&height=25

這可以防止我的網站上的1000頁網頁被MSN抓取，我該如何處理？

Answer 1

這是基本的URL操作，我沒有在您的網站上看到任何棘手的問題（雖然markup is full of errors），所以我懷疑這不是一個真正的msnbot，但一些跛腳的spambot/harvester作爲msnbot隱身。