我想在本地mac上運行一些網頁抓取例程,但默認的rails服務器很快就會消耗超過1G的內存(只有一個請求運行5個小時)。有沒有更適合這個的服務器?用於網頁抓取的本地Ruby/rails服務器
0
A
回答
4
這是一個web機器人。鐵軌太重了。
使用Nokigiri的腳本就足夠了。你可以設置cron來運行腳本。
如果你想要更高級別的東西,水豚可以做,甚至主要是爲了測試。
+0
腳本會寫什麼語言?當然,紅寶石, – 2013-05-14 07:55:41
+0
。 – 2013-05-14 07:56:52
+0
好吧,我明白了...... – 2013-05-14 07:57:33
相關問題
- 1. 用於網頁抓取服務的Perl,mod_perl2或CGI?
- 2. JQuery的.getJSON網頁抓取本地
- 3. 網頁抓取/抓取基於GWT的網頁
- 4. 本地JavaScript Lib +服務器端網頁?
- 5. 從網頁抓取文本
- 6. 用於網頁抓取的Customazible管理頁面(網頁界面)
- 7. 用於抓取網頁或調用API(特別是iTunes)的最快服務?
- 8. 用於生產服務器服務器的扭曲網頁
- 9. Reactor 3.x(Java):用於網頁抓取
- 10. 用於腳本的網頁服務器上的Photoshop
- 11. 使用MediaWiki API編輯本地服務器上的網頁
- 12. 用於網頁抓取或網頁挖掘的Java API
- 13. Windows上用於本地託管網站的域名服務器
- 14. EasyPHP - 用於本地網站的Devserver Vs Web服務器
- 15. 用於新服務器端腳本的Microsoft mvc3或ASP.NET網頁?
- 16. 網頁抓取/抓取的資源
- 17. 使用JSoup網頁抓取網頁
- 18. 本地服務器的codeingniter主頁中的服務器錯誤
- 19. 本地網絡上可用的本地數據庫服務器?
- 20. 使用vba抓取網頁
- 21. 用bs4抓取網頁
- 22. 用Java抓取網頁
- 23. Beautifulsoup網頁抓取
- 24. BeautifulSoup網頁抓取
- 25. PHP網頁抓取
- 26. Spyder - 網頁抓取
- 27. 檢測腳本的PHP版本的本地或基於服務器的抓取工具
- 28. 有什麼宏記錄器用於網頁抓取自動化?
- 29. 區別「視覺開發服務器」和「本地IIS網頁服務器」
- 30. 我的Kibana服務器的Web抓取
Sinatra是一個用於在Ruby中快速創建Web應用程序的DSL。所以它可能會消耗更少的內存。 – 2013-05-14 07:29:32
刮不一定需要服務器。在這種情況下,你使用rails是什麼? – romeroabelleira 2013-05-14 07:33:31
我正在使用海葵寶石 – 2013-05-14 07:34:40