釋放未使用的內存？

Question

我正在使用以下功能下載小於20MB的文件。它將整個內容讀到內存中，因爲另一個函數在將字節寫入磁盤之前必須先處理字節。

func getURL(url string) ([]byte, error) { 
    resp, err := http.Get(url) 
     if err != nil { 
      return nil, fmt.Errorf("getURL: %s", err) 
    } 
    defer resp.Body.Close() 

    body, err := ioutil.ReadAll(resp.Body) 
    if err != nil { 
      return nil, fmt.Errorf("getURL: %s", err) 
    } 

    return body, nil 
} 

這工作正常，但所有內存都在系統上消耗。

是否有可能釋放body在被另一個函數處理後使用的內存，因此內存使用量不會大於當前正在處理的字節數？

Answer 1

首先，我建議閱讀下列問題/回答：

FreeOSMemory() in production

Golang - Cannot free memory once occupied by bytes.Buffer

你可能觸發GC來釋放未使用的對象與runtime.GC()，你可以督促你的Go運行時釋放內存回到操作系統debug.FreeOSMemory()，但所有這些只是消防。一個寫得好的Go應用程序不應該調用這些。

你應該做的是防止運行時分配大量的內存。

你會怎麼做到這一點？一些手段（你甚至可以結合這些解決方案）：

• 限制服務需要大量內存的要求，更多地瞭解它：Process Management for the Go Webserver;也Is this an idiomatic worker thread pool in Go?

• 使用內存/緩衝池，不分配大數組/片的時候，更多地瞭解它：How to implement Memory Pooling in Golang

• 創建/更改處理單元不是對字節切片但io.Reader s運行，所以你不需要讀取所有內容到內存中，你可以通過resp.Body。請注意，即使多個單元必須讀取/檢查主體，仍然只能讀取和處理一次，而不能將其保存在內存中。手段可能是io.Pipe(),io.TeeReader()或定製解決方案。