0
在處理Web抓取項目時，爲了提取我需要的所有信息，我需要發出很多請求，但服務器發出大約50次請求後，它會用429狀態碼來表示錯誤「請求太多」，如何處理？Web Scraping和http太多的請求回答
A
回答
0
我的猜測是你要麼需要頻率減慢您的請求，或匿名。我們有一對夫婦對我們網站的文章會解釋你的選擇，如果你決定去匿名路線：
0
也許你應該嘗試使用HideMyIP例如，改變你的IP，每5分鐘或10分鐘
相關問題
- 1. 不回答HTTP請求
- 2. 如何阻止Apache回答http請求？
- 3. HTTP GET請求和XML答案
- 4. 避免Sails.js + AngularJS中的太多請求（緩存HTTP請求）
- 5. jmeter和多個http請求
- 6. 的請求或應答太大
- 7. 黑莓HTTP請求太慢
- 8. HTTP請求與HttpClient太慢？
- 9. ORA-29273：HTTP請求失敗，ORA-29270：太多的開放式HTTP請求
- 10. 爲什麼tomcat答覆HTTP 1.1使用HTTP 1.0請求回覆？
- 11. 簡單的HTTP請求和Web服務
- 12. 多個http請求
- 13. 同時cURL HTTP請求答案？
- 14. Web服務的錯誤：HTTP 413：請求實體太大
- 15. Python 3中的HTTP錯誤403 Web Scraping
- 16. 的Python：太多請求
- 17. 來自url的Python http請求，以xml格式回答
- 18. Web服務 - HTTP GET請求和響應
- 19. 什麼是HTTP請求和web服務
- 20. SOAP，HTTP Web服務請求和URL
- 21. 並行運行一系列函數來回答HTTP請求
- 22. Python的多線程和HTTP請求
- 23. http請求的HTTP請求
- 24. HTTP 414錯誤的請求URL太長
- 25. 一臺電腦要處理多少個xml http請求太多？
- 26. m.request問題太多請求
- 27. Twitter Ruby Gem太多請求
- 28. Ajax提出太多請求
- 29. 獲取用戶已回答的請求
- 30. 請求URI太大:: IBM HTTP服務器