1
甚至禁止索引整個網站？如何禁止搜索引擎通過robot.txt對子目錄/ CRM進行索引？
A
回答
1
創建robots.txt文件，並添加適當的Disallow指令，如：
User-agent: *
Disallow: /CRM
相關問題
- 1. 搜索引擎的robot.txt
- 2. 阻止搜索引擎索引網頁
- 3. 搜索引擎在Django項目中進行全文搜索
- 4. JQGrid＆搜索引擎索引
- 5. 阻止搜索引擎
- 6. 改進搜索引擎
- 7. 搜索引擎的終止索引過程
- 8. 如何防止登臺在搜索引擎中編入索引
- 9. 搜索引擎
- 10. 搜索引擎優化 - 目錄索引重複內容
- 11. 使用AJAX搜索引擎在Chrome中搜索搜索引擎
- 12. 如何通過自引用子主題進行遞歸搜索？
- 13. 如何有被搜索引擎收錄
- 14. EJB - 如何通過非索引字段進行搜索？
- 15. 搜索引擎索引 - 任何替代PhantomJs快照的搜索引擎優化？
- 16. Apache：通過Options指令禁止的目錄索引
- 17. 如何應用索引進行搜索
- 18. Rails的nginx目錄索引被禁止
- 19. 如何通過索引來對矩陣進行子集
- 20. ASP.NET搜索引擎
- 21. php搜索引擎
- 22. mysql搜索引擎
- 23. Ember搜索引擎
- 24. php搜索引擎
- 25. PHP搜索引擎
- 26. 元搜索引擎
- 27. Filshts搜索引擎
- 28. Lucene.net搜索引擎
- 29. joomla搜索引擎
- 30. SQL搜索引擎
怎麼寫'Disallow' S' – user198729 2010-05-17 14:46:52
@ user198729：我已經更新了我的答案。 – 2010-05-17 14:47:45
所以我可以使用'不允許：/'來禁止索引整個網站，對吧？ – user198729 2010-05-17 14:49:39