如何控制Go編碼JSON數據時的行為

  • 2020 年 2 月 17 日
  • 筆記

今天來聊一下我在Go中對數據進行 JSON 編碼時遇到次數最多的三個問題以及解決方法,大家來看看是不是也為這些問題撓掉了不少頭髮。

自定義JSON鍵名

這個問題加到文章里我是有所猶豫的,因為基本上大家都會,不過屬於同類問題我還是放進來了,對新接觸 Go 的同學更友好些。

我們先從最常見的一個問題說,首先在Go 程序中要將數據編碼成JSON 格式時通常我們會先定義結構體類型,將數據存放到結構體變量中。

type Address struct {      Type    string      City    string      Country string  }    type CreditCard struct {      FirstName string      LastName  string      Addresses []*Address      Remark    string  }    home := &Address{"private", "Aartselaar", "Belgium"}  office := &Address{"work", "Boom", "Belgium"}  card := VCard{"Jan", "Kersschot", []*Address{home, office}, "none"}    js, err := json.Marshal(card)  fmt.Printf("JSON format: %s", js)

只有導出的結構體成員才會被編碼,這也就是我們為什麼選擇用大寫字母開頭的字段名稱。在編碼時,默認使用結構體字段的名字作為JSON對象中的 key,但是一般JSON 是給 HTTP接口返回數據使用的,在接口的規範里針對數據我們一般都要求返回 snakecase風格的字段名。解決這個問題的方法是在結構體聲明時在結構體字段標籤里可以自定義對應的 JSON key

所以我們把結構體聲明改為如下即可:

type Address struct {      Type    string  `json:"type"`      City    string  `json:"city"`      Country string  `json:"country"`  }

編碼JSON時忽略掉指定字段

並不是所有數據我們都期望編碼到 JSON中暴露給外部接口的,所以針對一些敏感的字段我們往往希望將其從編碼後的 JSON數據中忽略掉。那麼上面也說了只有導出的結構體成員才會被編碼,有的同學會問我直接用小寫的字段名不行嗎?可是為了未導出字段只能在包內訪問,像這種攜帶內部敏感數據的往往都是應用的基礎數據,由項目的公共包來提供的。那麼怎麼技能維持字段的導出性又能讓其在 JSON數據中被忽略掉呢? 還是使用結構體的標籤進行註解,比如下面定義的結構體,可以把身份證 IdCard字段在 JSON數據中去掉:

type User struct {      Name    string  `json:"name"`      Age     Int     `json:"int"`      IdCard  string  `json:"-"`  }

encoding/json的源碼中和文檔中都列舉了通過結構體字段標籤控制數據 JSON編碼行為的說明:

// 忽略字段  Field int `json:"-"`      // 自定義key  Field int `json:"myName"`      // 數據為空時忽略字段  Field int `json:"myName,omitempty"`

omitempty這個是字段的數據為空時,在 JSON中省略這個字段。為的是節省數據空間, Protobuf編譯器生成的結構體代碼中每個字段標籤中都有 omitempty。但是在 Api開發中這個不常用,因為字段不固定對前端很不友好。

Protobuf不了解的可以看我之前寫的文章《Protobuf語言指南》,另外子菜單的gRPC 欄目能找到更多相關文章。

結構體字段標籤的 json註解中都不加 omitempty後還遇到一種情況,就是數據類型為切片的字段在數據為空的時候會被 JSON編碼為 null而不是 []。這個前端經常會問我沒數據的時候能不能不要返回 null,沒回還要多寫一個判斷。我的說辭都是不能,其實規範點講是應該返回 []的知識我是我自己沒找到到解決方法。作為一個在寫代碼上有強迫症的人,這個問題還是想搞明白的,好在有一天在 StackOverflow上看到一個答案,才發現是編碼的疏忽導致的。

解決空切片在JSON里被編碼成null

因為切片的零值為 nil,無指向內存的地址,所以當以這種形式定義 varf[]int初始化 slice後,在JSON中將其編碼為 null,如果想在 JSON 中將空 slice 編碼為 []則需用make初始化 slice為其分配內存地址:

運行下面的例子可以看出兩點的區別:

package main    import (      "encoding/json"      "fmt"  )    type Person struct {      Friends []string  }    func main() {      var f1 []string      f2 := make([]string, 0)        json1, _ := json.Marshal(Person{f1})      json2, _ := json.Marshal(Person{f2})        fmt.Printf("%sn", json1)      fmt.Printf("%sn", json2)  }

輸出:

{"Friends":null}  {"Friends":[]}

其實導致這個問題的原因是Go的 append函數(甩鍋),我們都知道引用類型的變量定義後如果沒初始化他們的值是 nil,無指向內存的地址,是無法直接使用的。但是 append函數在給切片追加元素時會判斷切片是否已初始化,沒有的話會幫其初始化分配底層數組。我的習慣是先聲明切片,然後再在下面的循環代碼中向切片追加元素。但是如果循環沒有執行,比如你從數據庫沒查出數據,就會導致對應切片字段在無數據時返回的是 nil然後被 JSON編碼成了 null。所以這個算是一個經驗總結出來的 Tip吧在寫代碼時大家一定要注意了。

這就是我在開發時把數據編碼成 JSON格式時遇到的三個問題和相應的解決方法。。明天就要開始上班了,因為突發時間這個假期格外長多出了不少時間可以支配。為了不太頹這一周我的公眾號是日更,上班了重心就要回到工作上了,所以為了保證文章質量還是周更。