我的網站使用上下文路徑(例如:www.example.com/abc)。 robots.txt位於www.example.com/abc/robots.txt,我已在網絡服務器中提供301重定向,以將www.example.com/robots.txt重定向至www.example.com/abc/robots.txt 。我可以保留robots.txt在上下文路徑並給301重定向?
我的問題是,搜索引擎能否讀取robots.txt文件,因爲它有301重定向?
我的網站使用上下文路徑(例如:www.example.com/abc)。 robots.txt位於www.example.com/abc/robots.txt,我已在網絡服務器中提供301重定向,以將www.example.com/robots.txt重定向至www.example.com/abc/robots.txt 。我可以保留robots.txt在上下文路徑並給301重定向?
我的問題是,搜索引擎能否讀取robots.txt文件,因爲它有301重定向?
robots.txt的應在根級別
https://example.com/robots.txt - Correct
https://blog.example.com/robots.txt - Correct
https://example.com/abc/robots.txt - Not Correct
https://blog.example.com/abc/robots.txt - Not Correct
如果是在子目錄/子文件夾,然後將返回404錯誤(因爲他們讓只在根目錄下調用),並Google will ignore your robots.txt completely if it is return 301 or 404 error.
發現搜索引擎正在兌現301重定向並從子文件夾讀取文件。