2011-08-08 73 views
-2

我想阻止谷歌跟蹤我在JS中的鏈接。 我沒有找到如何做到這一點robots.txt 我看錯了地方?限制搜索引擎抓取的JS鏈接

一些更多的信息: 我看到谷歌正在抓取這些網頁,雖然鏈接只出現在JS。 我不想讓他爬的原因是,這些內容依賴於外部API的,我不想對谷歌爬蟲,只有每個用戶的需求

回答

0

從谷歌直接浪費我的限速與他們 - >

http://www.google.com/support/webmasters/bin/answer.py?answer=96569

+0

我讀過維基百科:「nofollow屬性值並不意味着阻止訪問內容,或阻止內容被搜索引擎編入索引。阻止搜索引擎蜘蛛訪問網站上的內容或爲了防止他們在他們的索引中包含頁面的內容,機器人排除標準(robots.txt)「。這就是爲什麼我認爲這對我來說不是合適的解決方案。你的想法? – Noam

+0

另外我明白它應該主要不會影響我鏈接到的頁面的排名,但不是爲了避免爬行它 – Noam

0

谷歌可能不會找你藏在JS有任何聯繫,但別人可以鏈接到同一個地方。

雖然不是重要的鏈接,但它是URL。只需指定您不希望搜索引擎在robots.txt中訪問的網址即可。你通常通過JS將它們公開給瀏覽器的事實是無關緊要的。

如果您確實想要限制對內容的訪問權限,那麼只是減少可發現性可能還不夠,並且應該設置身份驗證層(例如密碼保護)。

+0

我看到谷歌正在抓取這些網頁。另外,這不是我擔心的內容。這個內容取決於外部的API,我不想浪費我的速度限制,他們在谷歌抓取和只有每個用戶的需求 – Noam

+1

然後只使用robots.txt – Quentin

+0

我可以指定在robots.txt不遵循JS網址? – Noam

相關問題