我期待隱藏一個網站,以便它不會出現在任何搜索引擎中,只是想知道我會如何去做這件事?如何從搜索引擎隱藏網站?
回答
密碼保護整個網站。 – Chirag
根據該鏈接,「您不應該使用robots.txt作爲隱藏您的網頁與Google搜索結果的方式,這是因爲其他網頁可能指向您的網頁,並且您的網頁可能會以這種方式獲得索引,從而避免機器人.txt文件,如果您想阻止搜索結果中的頁面,請使用其他方法,如密碼保護或noindex標籤或指令。「請參閱https://developers.google.com/search/reference/robots_meta_tag –
除了密碼保護你的網站,你可以添加這些行robots.txt
:
User-agent: *
Disallow:/
這不隱藏網站,而是指示機器人不要蜘蛛的內容。
您使用robots.txt
文件。在網站的根目錄下的文件放在與此內容:
User-agent: *
Disallow:/
看一看nofollow
Wikipedia
可以莫名其妙降低你的網站正在使用robots.txt上市。請注意,這取決於搜尋器的「善意」,儘管(有些垃圾郵件會明確查看您禁止的位置)。
不幸的是,沒有列出網站的唯一安全可靠的方式就是不把它放在互聯網上。
只是不鏈接到您的網站將無法正常工作。爬蟲從很多來源獲取他們的信息,包括瀏覽器推薦人和域名註冊商。因此,爲了「不可見」,您不得不訪問您的站點並且不註冊域名(只能通過IP地址訪問它)。
然後,如果您運行基於IP地址的Web服務器,則仍然有所有垃圾郵件探測隨機地址。這將需要一段時間,但他們會找到你。
密碼保護您的網站應該工作,有效地使其無法訪問。儘管(並且這超出了我的理解,那是怎麼回事)例如,谷歌列出了數千個ACM論文,如果沒有賬戶和登錄,您就無法看到這些論文。但他們在那裏。
您需要閱讀關於robots.txt文件,您應該在您網站的webroot中複製 - http://www.robotstxt.org/robotstxt.html。
使用robots.txt,拒絕所有搜索引擎。 他們不都尊敬的robots.txt所以定期檢查你的服務器日誌,並從嫌疑機器人/爬蟲的範圍否認:
最合適的搜索引擎使用機器人或爬蟲網站和索引他們。你可以Robot File method
- 1. 如何從搜索引擎中完全隱藏網站?
- 2. 如何從搜索引擎中隱藏網站
- 3. 如何從搜索引擎中隱藏特定的網站頁面URL?
- 4. 從搜索引擎隱藏cname
- 5. .htaccess密碼保護網站隱藏搜索引擎?
- 6. ASP.NET網站搜索引擎
- 7. 網站搜索引擎
- 8. 網站搜索引擎
- 9. 網站搜索引擎
- 10. 搜索引擎如何抓取網站?
- 11. 阻止從搜索引擎網站 - DuckDuckGo
- 12. 搜索引擎索引Flash網站?
- 13. 如何從搜索引擎使用htaccess隱藏文件夾
- 14. wordpress如何隱藏所有帖子從搜索引擎或不
- 15. 如何使用元標記從搜索引擎隱藏頁面?
- 16. 如何使網站能夠搜索不同的搜索引擎
- 17. 搜索引擎如何識別網站上的搜索框?
- 18. 如何從sharepoint網站隱藏右上角高級搜索框
- 19. 搜索引擎優化和AJAX網站
- 20. 搜索引擎的多語言網站
- 21. 搜索引擎爲asp.net網站
- 22. 多語言網站和搜索引擎
- 23. 搜索引擎和XML網站地圖
- 24. 搜索引擎優化技術網站
- 25. 創建內部網站搜索引擎
- 26. 網站搜索引擎非mysql
- 27. 搜索引擎的網站地圖
- 28. 搜索引擎網站地圖Asp.Net
- 29. 搜索引擎如何通過互聯網找到網站
- 30. 如何在搜索引擎結果中隱藏Robots.txt?
這應該是「通過默默無聞的安全」,或者你在做什麼惡意? –