Go http標準庫中的內存泄漏？

Question

一展身手的二進制實現的HTTP服務器：

package main 

import (
    "net/http" 
) 

func main() { 
    http.ListenAndServe(":8080", nil) 
} 

它將與〜850 KB左右的內存啓動。通過您的網絡瀏覽器發送一些請求。觀察它迅速上升到1 MB。如果你等待，你會發現它永遠不會下降。現在用Apache Bench（使用下面的腳本）錘擊它，並看到你的內存使用量不斷增加。經過一段時間後，它最終會穩定在8.2 MB左右。

編輯：它似乎沒有停止在8.2，而是顯着減緩。目前它處於9.2並仍在上漲。

總之，爲什麼會發生這種情況？我用這個shell腳本：

while [ true ] 
do 
    ab -n 1000 -c 100 http://127.0.0.1:8080/ 
    sleep 1 
end 

雖然試圖深入到底，我試圖調整設置。我試過關閉使用r.Close = true來阻止Keep-Alive。似乎沒有任何工作。

我最初在試圖確定我正在編寫的程序中是否存在內存泄漏時發現了這個問題。它有很多http處理程序和I/O調用。在檢查完我關閉了所有數據庫連接後，我一直看到它的內存使用率上升。我的程序高達433 MB。

這裏的Goenv的輸出：

GOARCH="amd64" 
GOBIN="" 
GOCHAR="6" 
GOEXE="" 
GOHOSTARCH="amd64" 
GOHOSTOS="darwin" 
GOOS="darwin" 
GOPATH="/Users/mark/Documents/Programming/Go" 
GORACE="" 
GOROOT="/usr/local/go" 
GOTOOLDIR="/usr/local/go/pkg/tool/darwin_amd64" 
TERM="dumb" 
CC="clang" 
GOGCCFLAGS="-g -O2 -fPIC -m64 -pthread -fno-caret-diagnostics -Qunused-arguments -fno-common" 
CXX="clang++" 
CGO_ENABLED="1" 

Answer 1

從pprof你的意見提供了堆，它看起來像你通過gorilla/sessions和gorilla/context（幾乎400MB）內存泄漏。

請參閱本ML主題：https://groups.google.com/forum/#!msg/gorilla-web/clJfCzenuWY/N_Xj9-5Lk6wJ這GH問題：https://github.com/gorilla/sessions/issues/15

這裏是泄漏非常快的一個版本：

package main 

import (
    "fmt" 
    // "github.com/gorilla/context" 
    "github.com/gorilla/sessions" 
    "net/http" 
) 

var (
    cookieStore = sessions.NewCookieStore([]byte("cookie-secret")) 
) 

func main() { 
    http.HandleFunc("/", defaultHandler) 
    http.ListenAndServe(":8080", nil) 
} 

func defaultHandler(w http.ResponseWriter, r *http.Request) { 
    cookieStore.Get(r, "leak-test") 
    fmt.Fprint(w, "Hi there") 
} 

這裏是一個清理，並具有相對靜態的RSS：

package main 

import (
    "fmt" 
    "github.com/gorilla/context" 
    "github.com/gorilla/sessions" 
    "net/http" 
) 

var (
    cookieStore = sessions.NewCookieStore([]byte("cookie-secret")) 
) 

func main() { 
    http.HandleFunc("/", defaultHandler) 
    http.ListenAndServe(":8080", context.ClearHandler(http.DefaultServeMux)) 
} 

func defaultHandler(w http.ResponseWriter, r *http.Request) { 
    cookieStore.Get(r, "leak-test") 
    fmt.Fprint(w, "Hi there") 
}