如何使用cms系統如drupal等進行爬網？

Question

我想自己顯示數據，

使用cms只能抓取數據。

任何人都可以分享經驗，並給我一些線索的入口點？

Answer 1

我將重新解釋問題：「我如何使用Drupal創建和聚合內容，但通過HTML網頁以外的方式顯示它？」

答案是關注生成XML提要。在Drupal Core中，默認的rss feed位於/rss.xml。每個分類列表頁面還有一個與其關聯的RSS源。要進一步擴展這些選項，請使用視圖中的RSS源顯示，Views Datasource模塊添加更多種類的數據（例如JSON輸出），如果您想要處於最前沿，請使用RDF項目。

如果您不想將任何此內容顯示爲HTML，請在Drupal中生成的幾乎每個頁面上使用hook_menu_alter() - 運行每個節點並將其阻止。那時候，這個問題就變成了一種學術問題，因爲如果你對主題層不感興趣，任何CMS都是錯誤的工具。