2017-04-18 100 views
0

我有一個Rails 4應用程序部署在數字海洋使用Ubuntu 14.04.5 LTS。該應用似乎運行良好,但系統一直運行在95%的內存。我甚至升級了雙倍的RAM,它仍然在95%。Rails應用程序Sidekiq高內存使用率

這裏是我的top輸出:

top - 11:03:54 up 8:37, 1 user, load average: 0.00, 0.03, 0.05 
Tasks: 118 total, 1 running, 117 sleeping, 0 stopped, 0 zombie 
%Cpu(s): 0.2 us, 0.2 sy, 0.0 ni, 99.7 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st 
KiB Mem: 2049956 total, 1980616 used, 69340 free,  8708 buffers 
KiB Swap: 1048572 total, 1036928 used, 11644 free. 47864 cached Mem 

    PID USER  PR NI VIRT RES SHR S %CPU %MEM  TIME+ COMMAND                                        
7510 ubuntu 20 0 780436 274428 2540 S 0.0 13.4 0:27.66 ruby                                         
1313 root  20 0 1921472 250948 2700 S 0.0 12.2 1:42.70 bundle                                         
1315 root  20 0 1876992 246204 2664 S 0.0 12.0 1:44.10 bundle                                         
1359 root  20 0 1928636 236168 2692 S 0.0 11.5 1:42.58 bundle                                         
6408 ubuntu 20 0 781764 175368 2244 S 0.3 8.6 1:10.81 ruby                                         
8681 ubuntu 20 0 984140 156708 1884 S 0.3 7.6 1:37.95 ruby                                         
8810 ubuntu 20 0 646824 117356 2548 S 0.0 5.7 0:11.07 ruby                                         
8821 ubuntu 20 0 646920 112728 2532 S 0.0 5.5 0:11.48 ruby                                         
8797 ubuntu 20 0 646728 82372 2960 S 0.0 4.0 0:14.33 ruby                                         
1932 ubuntu 20 0 332292 56948 1552 S 0.0 2.8 0:04.88 ruby 

我知道有噸的博客文章等在軌應用程序的內存優化。 3捆過程令我困惑。我的應用程序(實際上是2個應用程序 - 一個生產和一個分段)使用Redis/Sidekiq,這是捆綁過程。所以我的問題是:

1)這是'正常'?

2)如果不是,有沒有辦法開始排除故障?

UPDATE

這裏是頂部輸出:

[email protected]:~$ ps aux --sort=-%mem 
USER  PID %CPU %MEM VSZ RSS TTY  STAT START TIME COMMAND 
root  1291 8.8 9.4 846856 194624 ?  Sl 18:04 0:23 sidekiq 4.2.10 production [0 of 3 busy]                     
root  1411 8.9 9.4 846824 194532 ?  Sl 18:04 0:24 sidekiq 4.2.10 production [0 of 3 busy]                     
root  1272 9.1 9.4 712752 193516 ?  Sl 18:04 0:24 sidekiq 4.2.10 staging [0 of 1 busy]                     
ubuntu 2254 0.6 9.3 645792 192648 ?  Sl 18:05 0:01 Passenger RubyApp: /home/ubuntu/production/current/public (production) 
ubuntu 1986 0.6 9.3 645048 192064 ?  Sl 18:05 0:01 Passenger RubyApp: /home/ubuntu/staging/current/public (staging) 
ubuntu 1762 9.8 9.2 375520 190264 ?  Sl 18:04 0:24 Passenger AppPreloader: /home/ubuntu/production/current 
ubuntu 1678 9.5 9.2 374872 189588 ?  Sl 18:04 0:25 Passenger AppPreloader: /home/ubuntu/staging/current  
ubuntu 2082 0.2 9.1 645144 187524 ?  Sl 18:05 0:00 Passenger RubyApp: /home/ubuntu/staging/current/public (staging) 
ubuntu 1839 2.9 3.9 197300 79976 ?  Sl 18:04 0:06 Passenger AppPreloader: /home/ubuntu/landing/current  
ubuntu 1962 0.1 3.8 332292 78720 ?  Sl 18:05 0:00 Passenger RubyApp: /home/ubuntu/landing/current/public (production) 
ubuntu 1969 0.0 3.7 332388 76044 ?  Sl 18:05 0:00 Passenger RubyApp: /home/ubuntu/landing/current/public (production) 

我忘了我有2名生產工人的服務器和1個分期上。我在5和2的併發性,但我然後降低到3和1.所有Sidekiq正在做的是一些低級別的上傳圖像處理和批量記錄創作,更新和刪除,我不希望用戶坐在等待一個頁面加載。

我現在看到它平平了80%。更好但仍然看起來很高。我認爲接下來會有很多代碼優化等。我確信我有很多東西可以在這裏找到。

+0

您可以發佈'PS AU --sort =輸出 - %mem'?這將顯示完整的命令,並確認這些'bundle'進程實際正在調用什麼。另外,你可以發佈你以前的液滴的「頂部」輸出嗎?這將有助於比較兩個輸出。 – Gaston

+0

我猜你的意思是'ps aux --sort = - %mem' –

回答

0

你的Ruby進程可能會吃掉太多內存,原因很多。任何寶石或應用程序代碼都可以分配任意數量的內存,所以一般來說,它不可能告訴你爲什麼。這裏是一個可能的原因:

https://github.com/rails/rails/issues/27002#issuecomment-260086170

+0

謝謝Mike - 我知道我有很多clean/refactoring等來做,我相信會有所幫助。 –

1

保持許多Sidekiq流程怎麼做你運行的眼睛,什麼是配置的併發性,投票,你也使用隊列的數量。大量的這些會導致高內存使用率。您可以在sidekiq.yml中調整這些值,並測試它們對環境的影響。

欲瞭解更多信息:https://github.com/mperham/sidekiq/wiki/Advanced-Options

+0

這是最好的答案 - 我的代碼會影響,但併發性是迄今爲止最大的一個。謝謝 –

+0

嗯...... WTH。它下降到80%,但現在緩慢爬回到95% –