我正在尋找關於如何創建JavaScript的文檔,該文檔將遵循頁面或網站上的所有鏈接,並創建它們的地圖或列表。或者,如果有更好的方法來做到這一點,那也會很棒。我只是試圖獲得一個包含3000多頁的網站上的所有頁面的完整列表。我也不知道在這個問題上貼什麼標籤,所以這方面的提示會很冷。如何使用javascript創建站點地圖
0
A
回答
1
什麼你正在尋找被稱爲:
- 網頁抓取
- 屏幕抓取
使用谷歌,你就能夠找到的技術解決方案,您喜歡。
我個人喜歡Python包scrapy
更新:例如,只搜索「JavaScript的屏幕抓取教程」爲您提供:pjScrape網絡刮框架用JavaScript編寫的
+0
或使用sphider。 – Panagiotis 2012-07-19 16:13:24
相關問題
- 1. 使用Codeigniter創建站點地圖
- 2. 如何爲CakePHP創建站點地圖?
- 3. 如何創建站點地圖/列表
- 4. 創建meteor.js站點地圖
- 5. 如何使用頁面關係創建站點地圖
- 6. 如何使用zend框架創建站點地圖?
- 7. 如何使用PHP和MySQL創建站點地圖
- 8. 如何爲drupal 7網站創建圖像站點地圖?
- 9. 用PHP創建XML站點地圖
- 10. 如何使用Node.js掃描網站並構建站點地圖
- 11. 如何使用PHP有效地建立站點地圖?
- 12. 如何使用Cython創建站點dll
- 13. 如何在wordpress站點創建圖片地圖?
- 14. 創建xml視頻站點地圖
- 15. 創建Sharepoint/MOSS站點地圖
- 16. 在shareopoint中創建站點地圖
- 17. 從routes.ini創建站點地圖?
- 18. 如何使用站點地圖XML
- 19. 使用http和https協議創建站點地圖
- 20. 使用php創建多個站點地圖
- 21. 使用自定義屬性創建有效的站點地圖
- 22. 如何使用xslt顯示站點的站點地圖/導航?
- 23. 如何從MySQL數據庫創建站點地圖?
- 24. 如何在asp.net中創建動態的google站點地圖?
- 25. 如何手動創建XML站點地圖?
- 26. 如何創建google xml站點地圖和robot.txt文件?
- 27. 如何創建動態的XML站點地圖
- 28. 如何爲靜態和動態頁面創建站點地圖
- 29. 如何使用Sitecore構建站點地圖
- 30. 如何使用robots.txt中的站點地圖創建URL的白名單?
它看起來對我來說,您正試圖實施某種履帶式 – 2012-07-19 16:02:19