GolangNote

Golang笔记

Golang http.Post 用最小的内存发送大文件

Permalink

在网络编程中,经常用 http.Post 发送文件到远程服务器,可以通过自己构造 multipart/form-data; boundary 来实现。

一般是这么做:

Go: multipart
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
buf := new(bytes.Buffer)
writer := multipart.NewWriter(buf)
defer writer.Close()
part, err := writer.CreateFormFile("myFile", "foo.txt")
if err != nil {
    return err
}
file, err := os.Open(name)
if err != nil {
    return err
}
defer file.Close()
if _, err = io.Copy(part, file); err != nil {
    return err
}
http.Post(url, writer.FormDataContentType(), buf)

上面的代码是把整个文件读到 buf 里,当文件很大时,就会占用很多内存。在 golang 里可以使用io.Pipe 来优化内存占用:

Go: io.Pipe
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
r, w := io.Pipe()
m := multipart.NewWriter(w)
go func() {
    defer w.Close()
    defer m.Close()
    part, err := m.CreateFormFile("myFile", "foo.txt")
    if err != nil {
        return
    }
    file, err := os.Open(name)
    if err != nil {
        return
    }
    defer file.Close()
    if _, err = io.Copy(part, file); err != nil {
        return
    }
}()
http.Post(url, m.FormDataContentType(), r)

本文网址: https://golangnote.com/topic/246.html 转摘请注明来源

Related articles

Golang http IPv4/IPv6 服务

Golang 的网络服务,如果不指定IPv4 或 IPv6,如果VPS 同时支持 IPv4 和 IPv6,`net.Listen()` 只会监听 IPv6 地址。但这不影响客户端使用 IPv4 地址来访问。...

Golang phantomjs 动态代理实现

phantomjs 是个很优秀的软件,虽然现在被chrome headless 抢了风头,但在某些特定场合,使用phantomjs 还是很方便,这里是介绍使用Go 实现动态代理。...

Write a Comment to "Golang http.Post 用最小的内存发送大文件"

Submit Comment Login
Based on Golang + fastHTTP + sdb | go1.17 Processed in 1ms