只有來自搜索引擎的2個域名中的1個域名

Question

我在同一個服務器上和同一目錄中託管兩個域。我想阻止搜索引擎的域名1，但不想阻止其他域名。

比方說，我有：

www.site1.com和www.site2.com

兩者都指向同一IP的服務器上，我只希望阻止site2.com而不是SITE1 .COM。

我該怎麼做？任何線索？

Answer 1

創建一個與此代碼調用robots2.txt文件：

User-agent: * 
Disallow:/

然後把這個規則在DOCUMENT_ROOT/.htaccess文件：

RewriteEngine On 

RewriteCond %{HTTP_HOST} ^(www\.)?site2\.com$ [NC] 
RewriteRule ^robots\.txt$ /robots2.txt [L,NC] 

1. 這將有助於/robots2.txt爲site2所有/robots.txt請求。
2. 常規/robots.txt將用於site1。
3. 只有site2將被搜索引擎阻止。