Golang 序列化和反序列化

Posted 2023-02-22

【中文标题】Golang 序列化和反序列化

【英文标题】：Golang serialize and deserialize back

【发布时间】：2015-03-17 04:32:45

【问题描述】：

在 Golang 中将结构序列化和反序列化为字符串以及反之亦然的最佳方式（完整性和性能）是什么？

例如，如果我有这个结构：

struct Session 
   Properties map[string]interface
   Permissions []int64

我想将它存储在Redis 上并取回它。我试过保存，int和string，没问题，但是struct对象怎么存呢？

conn := redisConnectors.Get()

// set example

_, err := conn.Do(`SETEX`, `uid_key`, EXPIRE_SEC, user_id)
_, err = conn.Do(`SETEX`, `email_key`, EXPIRE_SEC, login_email)

// get example

user_id, err := redis.Int64(conn.Do(`GET`, `uid_key`))
login_email, err := redis.String(conn.Do(`GET`, `email_key`))

【问题讨论】：

作为参考，boj/redistore 库使用 encoding/gob 或 encoding/json 将会话数据序列化到 Redis，并将原始 []byte 切片保存到 Redis：github.com/boj/redistore/blob/master/redistore.go#L313

【参考方案1】：

使用gob 和base64 可以解决问题，例如：

import (
    "encoding/base64"
    "encoding/gob"
    "bytes"
)

type SX map[string]interface

// go binary encoder
func ToGOB64(m SX) string 
    b := bytes.Buffer
    e := gob.NewEncoder(&b)
    err := e.Encode(m)
    if err != nil  fmt.Println(`failed gob Encode`, err) 
    return base64.StdEncoding.EncodeToString(b.Bytes())


// go binary decoder
func FromGOB64(str string) SX 
    m := SX
    by, err := base64.StdEncoding.DecodeString(str)
    if err != nil  fmt.Println(`failed base64 Decode`, err); 
    b := bytes.Buffer
    b.Write(by)
    d := gob.NewDecoder(&b)
    err = d.Decode(&m)
    if err != nil  fmt.Println(`failed gob Decode`, err); 
    return m

当您需要序列化自定义结构或类型（例如Session 结构）时，只需添加以下行：

func init() 
    gob.Register(SX)
    gob.Register(Session) 

如果你想使用other serialization format

【讨论】：

您甚至不需要对来自 gob 的结果进行 base64 编码 - 您只需将 []byte 保存到 Redis。也更快。 JSON 编码也比 encoding/gob 快一点，尽管在大多数应用程序中这不太可能有实质性/显着差异。

我之前尝试过JSON编码，这也是我问这个问题的原因，但是它无法转换map[int]..或正确解码，例如：map[string]bool当编码和解码回来时会变成@ 987654331@

对于map[int]...，您需要满足json.Marshaller 和json.Unmarshaller 接口，因为JSON 键是字符串。不过，您的 map[string]bool 应该可以正常工作。

【参考方案2】：

结构的序列化通常使用encoding 包。但是，这仅适用于公共领域。如果您还需要序列化私有字段，see this answer 作为替代方案。 您有多种编码选择（二进制、文本、json as in this example for a struct、xml 等）。例如，cupcake/rdb 项目使用encoding/binary 来实现Redis RDB file format（内存中存储的二进制表示）的解析和编码。 另一个例子是guregu/rediscache，一个用于在 Redis 中缓存数据的小型库。

【讨论】：

关于“仅限公共领域”的评论很重要。