3
使用robot.txt可以限制(特定)查詢字符串(參數)值的機器人訪問嗎?限制(特定)查詢字符串(參數)值的機器人訪問?
即
http://www.url.com/default.aspx #allow
http://www.url.com/default.aspx?id=6 #allow
http://www.url.com/default.aspx?id=7 #disallow
使用robot.txt可以限制(特定)查詢字符串(參數)值的機器人訪問嗎?限制(特定)查詢字符串(參數)值的機器人訪問?
即
http://www.url.com/default.aspx #allow
http://www.url.com/default.aspx?id=6 #allow
http://www.url.com/default.aspx?id=7 #disallow
User-agent: *
Disallow: /default.aspx?id=7 # disallow
Disallow: /default.aspx?id=9 # disallow
Disallow: /default.aspx?id=33 # disallow
etc...
你只需要指定URL的那是不允許的。其他一切都是默認允許的。
只是查詢變量可以定義如
禁止:/default.aspx?id=*
或更好
不允許:?/ ID =
感謝我只是不確定這一點,這就是我的想法:D – inspite 2009-07-24 11:45:23