2013-06-24 48 views
1

查找建議,因爲涉及的robots.txt,我們不想去錯在不包括整個網站機器人排除網址與特殊字符

是下面的命令容易排除用反斜槓所有網址URL中

編碼
Disallow: /*\ 

它只會排除url在網站url路徑中具有反斜線或%22。有些頁面被反斜槓編入索引,並在Google網站管理員中重複使用。

請問上面的命令不會妨礙或阻止網站與反斜線搜索引擎在任何一個或任何一種方式,除了鏈接到它

回答

0

要更新,我們通過而將301解決它通過htaccess的重定向而不是阻止通過robots.txt