0
我應該使用#End Robots#還是不在robots.txt中?我應該使用#End Robots#還是不在robots.txt中?
我的意思是它有助於防止我得到空白或不是?
現在它看起來就像這樣:
User-agent: *
Disallow: /admin/
Disallow: /account/
Disallow: /access-denied/
#End Robots#
我應該使用#End Robots#還是不在robots.txt中?我應該使用#End Robots#還是不在robots.txt中?
我的意思是它有助於防止我得到空白或不是?
現在它看起來就像這樣:
User-agent: *
Disallow: /admin/
Disallow: /account/
Disallow: /access-denied/
#End Robots#
http://support.google.com/webmasters/bin/answer.py?hl=en&answer=156449似乎表明,它不需要。
就我個人而言,我從未將它添加到我部署的任何機器人文件中,而且我從未遇到任何問題。
以'#'開頭的行是註釋,因此被robots.txt解析器忽略。 – unor