PHP爬行方法

Question

任何人都可以告訴我，如果curl無法在PHP中抓取，那麼哪種方法將用於抓取？

Answer 1

如果您指的是創建一個蜘蛛來抓取整個遠程站點像wget這樣的工具的方式，我不相信cURL具有這種能力。 cURL將用於發出請求並下載每個頁面，但您必須在PHP腳本中創建邏輯來解析頁面內容，提取鏈接並創建要爬網的URL列表。 cURL不會爲你做那部分。

Answer 2

捲曲會：

1. 跟隨重定向（設置爲選項）
2. Store內容（ - > curl_exec（））

這都是你需要抓取。 中常用的方法，以實例從 http://ua2.php.net/manual/en/function.curl-exec.php