0
Q
蜘蛛不爬行網頁
A
回答
0
爲了打印日誌,你有你的蜘蛛使用logging與
self.logger.debug('%s', response.url)
但你的蜘蛛是錯誤的,因爲parse方法必須返回一個迭代,閱讀documentation更多幫助
相關問題
- 1. Scrapy蜘蛛不爬行
- 2. 爬行蜘蛛不進入下一頁
- 3. 如何喂蜘蛛蜘蛛爬行內的鏈接?
- 4. 我BeautifulSoup蜘蛛只爬行2頁不是所有的頁面
- 5. 使用vb.net的網絡爬蟲/蜘蛛
- 6. 爬蟲/蜘蛛檢測新網站
- 7. 製作網絡爬蟲/蜘蛛
- 8. 爬行蜘蛛不爬行規則問題
- 9. Scrapy,沒有錯誤,蜘蛛爬行
- 10. Scrapy爬行蜘蛛只觸摸start_urls
- 11. Scrapy爬行蜘蛛停止工作
- 12. 鏈接檢查器(蜘蛛爬行器)
- 13. 抓取基於鏈接的網頁爬蟲/蜘蛛鏈接
- 14. 防止scrapy蜘蛛爬行網站的一部分太長
- 15. Scrapy關閉蜘蛛如果沒有網址爬行
- 16. Scrapy蜘蛛:不要爬網在列表中
- 17. 蜘蛛不刮頁/寫
- 18. Scrapy - 更改規則蜘蛛開始爬
- 19. asp.net(網絡蜘蛛)
- 20. 如何將多個參數傳遞給Scrapy蜘蛛(不再支持多個蜘蛛運行'scrapy爬行'錯誤)?
- 21. Python的網絡爬蟲(NameError:名字「蜘蛛」沒有定義)
- 22. 如何在爬網後訪問蜘蛛屬性
- 23. 使用多線程來改進網絡爬蟲/蜘蛛
- 24. 在使用scrapy製作的網絡爬蟲中調用另一個蜘蛛的一個蜘蛛
- 25. 最佳網站蜘蛛?
- 26. Highchart蜘蛛網圖表
- 27. 阻止網絡蜘蛛
- 28. 減慢蜘蛛網址
- 29. 蜘蛛網圖Ruby on Rails
- 30. 如何繪製蜘蛛網
你需要解決這個問題。你在找什麼輸出?缺少那些不在當前輸出中的信息 –
已完成@Chris – Raza