golang 在Go（golang）中进行分段上传的示例，客户端创建http请求而不是html表单。

Posted 2021-05-24

package main

import (
	"bytes"
	"fmt"
	"io"
	"log"
	"mime/multipart"
	"net/http"
	"os"
	"path/filepath"
)

// Creates a new file upload http request with optional extra params
func newfileUploadRequest(uri string, params map[string]string, paramName, path string) (*http.Request, error) {
	file, err := os.Open(path)
	if err != nil {
		return nil, err
	}
	defer file.Close()

	body := &bytes.Buffer{}
	writer := multipart.NewWriter(body)
	part, err := writer.CreateFormFile(paramName, filepath.Base(path))
	if err != nil {
		return nil, err
	}
	_, err = io.Copy(part, file)

	for key, val := range params {
		_ = writer.WriteField(key, val)
	}
	err = writer.Close()
	if err != nil {
		return nil, err
	}

	req, err := http.NewRequest("POST", uri, body)
	req.Header.Set("Content-Type", writer.FormDataContentType())
	return req, err
}

func main() {
	path, _ := os.Getwd()
	path += "/test.pdf"
	extraParams := map[string]string{
		"title":       "My Document",
		"author":      "Matt Aimonetti",
		"description": "A document with all the Go programming language secrets",
	}
	request, err := newfileUploadRequest("https://google.com/upload", extraParams, "file", "/tmp/doc.pdf")
	if err != nil {
		log.Fatal(err)
	}
	client := &http.Client{}
	resp, err := client.Do(request)
	if err != nil {
		log.Fatal(err)
	} else {
		body := &bytes.Buffer{}
		_, err := body.ReadFrom(resp.Body)
		if err != nil {
			log.Fatal(err)
		}
                resp.Body.Close()
		fmt.Println(resp.StatusCode)
		fmt.Println(resp.Header)

		fmt.Println(body)
	}
}

golang在多个go routine中进行map或者slice操作应该注意的对象。

因为golang的map和列表切片都是引用类型，且非线程安全的，所以在多个go routine中进行读写操作的时候，会产生“map read and map write“的panic错误。

 

某一些类型的对象，会有这种类似的set方法来写数据，或者get方法来返回一个map:

func (this *object) Set(name, val) {
　　this.Lock()
　　defer this.Unlock()
　　
　　this.m[name] = val
}

func (this *object) Get() map[string]string {
　　this.Lock()
　　defer this.Unlock()

　　return this.m
}

　　

如果会在多个go routine中通过该对象的Get()方法获取到的map进行读操作，并且在其他go routine中用Set()方法来写操作，那么有可能会导致“map read and map write“的panic错误。

原因是Get方法获取的map和Set方法操作的map是同一个map，如果读写线程在同一时刻操作这2个map，就会产生错误。

所以Get方法最好用这种方式返回map：

func (this *object) Get() map[string]string {
    this.Lock()
    defer this.Unlock()

    newm := make(map[string]string)
    for k, v := range this.m {
        newm[k] = v
    }

    return newm
}

 

这样每次Get获取的map，其实是一个新的map，就可以不用考虑同时读写的问题了。