我特指動態頁面,它依賴於GET變量。我的網站將大部分數據保存在數據庫中,根據GET變量,它會輸出不同的結果。我該如何做到這一點,以便Google可以查看數據庫中的所有結果併爲其編制索引?Google如何抓取動態網頁?
1
A
回答
1
Google如何抓取動態網頁?
同樣的方式與任何其他頁面
我具體是指依賴於GET變量動態頁面。
如果您有一個變量,那麼它可能不會導致任何問題。查詢字符串中包含大量參數可能會導致Google判定它可能不是抓取的有用頁面。
我該如何讓Google可以看到數據庫中的所有結果併爲它們編制索引?
鏈接到它們。
1
要讓Google索引您的所有結果,請創建所有鏈接的sitemap.xml並將其放置在您的網站的根目錄下。如果你有很多鏈接/頁面設置,也許在PHP中自動生成sitemap.xml的函數。有WordPress的插件可以做到這一點,也許下載一個,如果你需要一個例子,看看源代碼。
相關問題
- 1. 網頁抓取動態內容與Python
- 2. Python中動態網頁抓取
- 3. 使用動態頁面抓取網站
- 4. 使用htmlunit抓取動態網頁
- 5. 網頁抓取動態內容
- 6. 如何抓取網頁?
- 7. 使用Nutch如何抓取uisng ajax網頁的動態內容?
- 8. 如何獲取由Google抓取的私人網頁
- 9. 抓取網站和動態網址
- 10. 從R動態諮詢頁面的網頁抓取
- 11. 如何阻止Google抓取出現網頁
- 12. 如何讓Google抓取需要會話數據的網頁?
- 13. Beautifulsoup網頁抓取
- 14. BeautifulSoup網頁抓取
- 15. PHP網頁抓取
- 16. Spyder - 網頁抓取
- 17. 如何使用網頁抓取工具獲取動態生成的JavaScript數據
- 18. 網頁抓取/屏幕抓取
- 19. 網頁抓取/抓取的資源
- 20. 抓取網址\如何獲取node.js中的動態鏈接
- 21. 如何從網頁上抓取數據?
- 22. 如何抓取谷歌網頁圖片
- 23. 網頁抓取/抓取基於GWT的網頁
- 24. Scrapy抓取網站與動態路由
- 25. Web動態javascript內容抓取網站
- 26. Google何時重新抓取網站?
- 27. 自動記錄和網頁抓取
- 28. 網頁抓取:自動按鈕點擊
- 29. 使用clojure抓取動態內容的網頁
- 30. 動態抓取HTML
嗯,這是一個運行在我的框架上的網站,它只有幾頁,所有內容都存儲在數據庫中。因此,如果我有包含所有可能變量的所有網頁的鏈接列表,Google會將它們編入索引? – NoobDev4iPhone 2012-01-14 00:52:23
內容的存儲位置並不重要。客戶端向服務器請求資源。服務器提供客戶資源。客戶端無法知道,也不關心服務器如何決定將哪些數據作爲資源返回。 – Quentin 2012-01-14 00:57:08
我只能在抓取動態網頁時才能獲取CSS或js文件 – BasK 2014-12-03 06:08:28