如何從搜索引擎中完全隱藏網站？

Question

什麼是最好的推薦方式喲隱藏我的登臺網站從搜索引擎，我谷歌搜索，並發現一些說，我應該把一個元標籤，有人說，我應該把一個文本文件內我的網站目錄，我想知道標準方式。

我目前的網站是在asp.net中，而我認爲它必須是任何網站的常用方式，無論它的編程語言如何。

Answer 1

使用robots.txt文件。

看到這裏http://www.robotstxt.org/robotstxt.html

Answer 2

http://www.robotstxt.org/robotstxt.html

Answer 3

你也可以使用你的服務器的robots.txt：

User-agent: * 
Disallow:/

谷歌的爬蟲居然尊重這些設置。

Answer 4

有搜索引擎/圖書標記服務不使用robots.txt的。如果你真的不希望它變成有史以來我建議使用capcha只是導航到該網站。

Answer 5

真的很容易回答;密碼保護它。如果它是一箇中轉站點，那麼它很可能不會公開面對（最有可能是私人聽衆）。試圖讓它遠離搜索引擎只是在真正的問題是你沒有適當地保護它時處理一個症狀。

Answer 6

請記住，您不能從隱藏公共無保護的網站從搜索引擎。您可以要求殭屍程序不會對它進行索引（通過我的優秀同事提出的robots.txt），並且編寫殭屍程序的人可能會選擇不基於此來索引您的網站，但必須至少有一個人那裏是誰索引所有的事情，人們要求他不要索引。至少有一個。

如果這是一個很大的要求，保留自動爬蟲，某種CAPCHA解決方案可能適合您。

Answer 7

最新最好的推薦方法喲隱藏來自搜索引擎

簡單我的分期網站：不讓它公開。如果這不起作用，那麼只能公開足夠長的時間來驗證它是否已準備好進行現場發佈，然後再將其記錄下來。

然而，所有這一切，一個更基本的問題是，「爲什麼關心？」。如果在推送活動之前，分段站點確實應該是活動站點的一個步驟，那麼它是否索引是無關緊要的。