如何讓搜索引擎遠離我的域名上的某些頁面

我已經爲我的網站構建了一個管理控制面板。我不希望控制面板應用程序在搜索引擎中結束，因爲實際上並不需要它。我做了一些研究，我發現，通過使用下面的標籤，我大概可以達到我的目標如何讓搜索引擎遠離我的域名上的某些頁面

<meta name="robots" content="noindex,nofollow">

這是真的嗎？還有其他方法更可靠嗎？我問，因爲我很害怕如果我使用了錯誤的方法，我可能會搞砸了，而且我確實希望搜索引擎搜索我的網站，而不是控制面板... 謝謝

2014-03-04 Marco

這應該夠了。不要擔心太多，幾乎沒有人會在Google上找到沒有相關關鍵字或內容的網頁。 – 2014-03-04 21:42:37

什麼都不會強制網絡抓取工具遵守robots.txt中的說明，但Googlebot聲稱玩的公平:) https://support.google.com/webmasters/answer/93710?hl=zh-CN – crennie

除了阻止機器人之外，您還可以用一個描述你想要索引的路線的'sitemap.xml'文件來幫助他們。 [Google：關於站點地圖]（https://support.google.com/webmasters/answer/156184?hl=zh-CN） –

這是真實的，但在這樣做，安全性更高，在.htaccess文件的頂部，您應該將此：

Header set X-Robots-Tag "noindex, nofollow"

而且在你應該建立在你的域的根目錄的新文件，這個命名爲robots.txt內容：

User-agent: * 
Disallow:/

A nd你可以肯定，他們不會索引你的內容;）

2014-03-04 21:45:26 sidney

的確，但是我們尋求的是阻止他們的方法，而我所提供的是最可行的解決方案，以防止他們這樣做，我認爲。 – sidney

谷歌將通過從他們的索引（source）完全丟棄頁面兌現元標記，但其他爬蟲可能只是簡單地決定忽略它。

從這種特殊意義上說，meta標籤對Google更可靠，因爲只需使用robots.txt明確鏈接到管理頁面的任何其他外部源（無論出於何種原因）都會使您的頁面顯示在Google索引中（儘管沒有任何內容這可能會導致一些SERP水蛭）。

2014-03-04 21:46:34 brezanac

回答