最好的網絡爬蟲 - 用於內容提取

Question

結構化的網絡爬蟲解決方案，以獲取像ebay這樣的特定網站的內容？

Answer 1

30位數據具有極好的Web Extractor從指定的網站部分提取非常具體的數據。它不是開源的，但它們根據你的尺寸和用途有不同的模型。

Answer 2

HtmlUnit非常好。它很好地支持JavaScript。