機器人元標籤沒有索引刪除索引的URL的

Question

我們有一個約15000頁的應用程序。爲了更好的搜索引擎優化的原因，我們必須改變網址。 Google早些時候已經抓取了所有這些網頁，並且由於這一變化，我們在網站管理員處看到很多重複的標題/元描述。我們對谷歌的印象已經下降，我們相信這是原因。如果我的假設不正確，請糾正我。現在我們無法使用301重定向爲URL的更改編寫正則表達式，因爲更改是這樣的。唯一的辦法是編寫301個單獨URL的重定向，這對於10000個URL是不可行的。現在我們可以在NOINDEX上使用機器人meta標籤嗎？ 我的問題基本上是如果我寫一個NOINDEX元標記，谷歌將刪除已編入索引的URL？如果沒有其他方法可以從Google中刪除舊的索引網址？我可以做的另一件事是讓所有以前的頁面404錯誤，以避免重複，但這將是一個正確的事情？

Answer 1

現在我們無法使用301重定向編寫 URL的更改的正則表達式，因爲更改是這樣的。 這樣做的唯一方法是編寫301個單個URL的重定向，對於10000個URL而言，這是 不可行。

當然可以！我正在用mod_rewrite和RewriteMap重寫超過15000個URL！ 這只是一個腳本/回顯所有URL和掌握vim的問題，但您可以輕鬆地完成。如果您需要更多信息，只需詢問。

你可以做的是一個RewriteMap指令費爾這樣的：

/baskinrobbins/branch/branch1/ /baskinrobbins/branch/Florida/Jacksonville/branch1 

我犯了一個巨大的答案here，你可以很容易使其適應您的需求。

我可以在1-2小時內完成這項工作，但我很貴;)。

Answer 2

重建索引是緩慢

這將需要數週的谷歌反正不理舊網址。

使用.htaccess的301重定向

您可以在Apache服務器上添加一個文件，名爲.htaccess，即能列出所有的舊URL和新URL，並且讓用戶立即重定向到新的一頁。你能生成這樣的文本文件嗎？我相信你可以遍歷你的應用程序或其他任何部分，並生成一個URL列表。

使用以下語法。

Redirect 301 /oldpage.html http://www.yoursite.com/newpage.html 
Redirect 301 /oldpage2.html http://www.yoursite.com/folder/ 

這避免了404文件未找到錯誤，比元刷新更好或重定向標籤，因爲舊的頁面甚至沒有提供給客戶。

我爲一個經歷了最近升級的網站做了這個，而且由於谷歌一直指向舊文件，我們需要重定向客戶端來查看新內容。

.htaccess哪裏？

轉到您的網站的根文件夾，並創建/下載.htaccess文件到本地計算機並使用純文本編輯器（即記事本）進行編輯。如果您使用的是FTP客戶端軟件，並且在服務器上沒有看到任何.htaccess文件，請確保您正在查看不可見/系統文件。