如何阻止我的網站從所有的網絡

Question

我有一個網站，它不應該從沒有URL或任何搜索引擎的任何人訪問。

沒有搜索引擎應該知道我的網站，只有鏈接的人應該訪問它。有人可以提出最好的想法，因爲我將分享我的辦公室數據。

Answer 1

您可以阻止大多數搜索引擎使用robots.txt文件爲您的網站建立索引。更多細節在這裏：http://www.robotstxt.org/

但是，這不是很安全。一些機器人忽略robots.txt。限制訪問的最佳方式是要求用戶在進入站點之前登錄，或者使用防火牆來僅允許該用戶的IP地址。

Answer 2

您需要將robots.txt文件添加到您的網站的根文件夾中，指出搜索引擎蜘蛛不應對旅遊網站編制索引。

http://www.robotstxt.org/robotstxt.html

但它留下來的搜索引擎讀取文件。大多數流行的搜索引擎都會尊重該文件。另一種方法是在您的網站中沒有index.htm或default.htm即使存在，也可以刪除到內部頁面的任何鏈接。這樣蜘蛛永遠不會知道你網站的網站結構。

Answer 3

哇。 OK：

1）的robots.txt http://www.robotstxt.org/robotstxt.html

2）認證。如果您使用的是Apache，密碼保護網站

3）確保沒有人從任何地方鏈接到它。

4）考慮一個不同的選擇，如dropbox。 http://www.dropbox.com/