go語言JSON處理
https://github.com/astaxie/build-web-application-with-golang/blob/master/zh/07.2.md
JSON(Javascript Object Notation)是一種輕量級的資料交換語言,以文字為基礎,具有自我描述性且易於讓人閱讀。儘管JSON是Javascript的一個子集,但JSON是獨立於語言的文字格式,並且採用了類似於C語言家族的一些習慣。JSON與XML最大的不同在於XML是一個完整的標記語言,而JSON不是。JSON由於比XML更小、更快,更易解析,以及瀏覽器的內建快速解析支援,使得其更適用於網路資料傳輸領域。目前我們看到很多的開放平臺,基本上都是採用了JSON作為他們的資料互動的介面。既然JSON在Web開發中如此重要,那麼Go語言對JSON支援的怎麼樣呢?Go語言的標準庫已經非常好的支援了JSON,可以很容易的對JSON資料進行編、解碼的工作。
前一小節的運維的例子用json來表示,結果描述如下:
{"servers":[{"serverName":"Shanghai_VPN","serverIP":"127.0.0.1"},{"serverName":"Beijing_VPN","serverIP":"127.0.0.2"}]}
本小節餘下的內容將以此JSON資料為基礎,來介紹go語言的json包對JSON資料的編、解碼。
解析JSON
解析到結構體
假如有了上面的JSON串,那麼我們如何來解析這個JSON串呢?Go的JSON包中有如下函式
func Unmarshal(data []byte, v interface{}) error
通過這個函式我們就可以實現解析的目的,詳細的解析例子請看如下程式碼:
package main import ( "encoding/json" "fmt" ) type Server struct { ServerName string ServerIP string } type Serverslice struct { Servers []Server } func main() { var s Serverslice str := `{"servers":[{"serverName":"Shanghai_VPN","serverIP":"127.0.0.1"},{"serverName":"Beijing_VPN","serverIP":"127.0.0.2"}]}` json.Unmarshal([]byte(str), &s) fmt.Println(s) }
在上面的示例程式碼中,我們首先定義了與json資料對應的結構體,陣列對應slice,欄位名對應JSON裡面的KEY,在解析的時候,如何將json資料與struct欄位相匹配呢?例如JSON的key是Foo
,那麼怎麼找對應的欄位呢?
- 首先查詢tag含有
Foo
的可匯出的struct欄位(首字母大寫) - 其次查詢欄位名是
Foo
的匯出欄位 - 最後查詢類似
FOO
或者FoO
這樣的除了首字母之外其他大小寫不敏感的匯出欄位
聰明的你一定注意到了這一點:能夠被賦值的欄位必須是可匯出欄位(即首字母大寫)。同時JSON解析的時候只會解析能找得到的欄位,找不到的欄位會被忽略,這樣的一個好處是:當你接收到一個很大的JSON資料結構而你卻只想獲取其中的部分資料的時候,你只需將你想要的資料對應的欄位名大寫,即可輕鬆解決這個問題。
解析到interface
上面那種解析方式是在我們知曉被解析的JSON資料的結構的前提下采取的方案,如果我們不知道被解析的資料的格式,又應該如何來解析呢?
我們知道interface{}可以用來儲存任意資料型別的物件,這種資料結構正好用於儲存解析的未知結構的json資料的結果。JSON包中採用map[string]interface{}和[]interface{}結構來儲存任意的JSON物件和陣列。Go型別和JSON型別的對應關係如下:
- bool 代表 JSON booleans,
- float64 代表 JSON numbers,
- string 代表 JSON strings,
- nil 代表 JSON null.
現在我們假設有如下的JSON資料
b := []byte(`{"Name":"Wednesday","Age":6,"Parents":["Gomez","Morticia"]}`)
如果在我們不知道他的結構的情況下,我們把他解析到interface{}裡面
var f interface{} err := json.Unmarshal(b, &f)
這個時候f裡面儲存了一個map型別,他們的key是string,值儲存在空的interface{}裡
f = map[string]interface{}{ "Name": "Wednesday", "Age": 6, "Parents": []interface{}{ "Gomez", "Morticia", }, }
那麼如何來訪問這些資料呢?通過斷言的方式:
m := f.(map[string]interface{})
通過斷言之後,你就可以通過如下方式來訪問裡面的資料了
for k, v := range m { switch vv := v.(type) { case string: fmt.Println(k, "is string", vv) case int: fmt.Println(k, "is int", vv) case float64: fmt.Println(k,"is float64",vv) case []interface{}: fmt.Println(k, "is an array:") for i, u := range vv { fmt.Println(i, u) } default: fmt.Println(k, "is of a type I don't know how to handle") } }
通過上面的示例可以看到,通過interface{}與type assert的配合,我們就可以解析未知結構的JSON數了。
上面這個是官方提供的解決方案,其實很多時候我們通過型別斷言,操作起來不是很方便,目前bitly公司開源了一個叫做simplejson
的包,在處理未知結構體的JSON時相當方便,詳細例子如下所示:
js, err := NewJson([]byte(`{ "test": { "array": [1, "2", 3], "int": 10, "float": 5.150, "bignum": 9223372036854775807, "string": "simplejson", "bool": true } }`)) arr, _ := js.Get("test").Get("array").Array() i, _ := js.Get("test").Get("int").Int() ms := js.Get("test").Get("string").MustString()
生成JSON
我們開發很多應用的時候,最後都是要輸出JSON資料串,那麼如何來處理呢?JSON包裡面通過Marshal
函式來處理,函式定義如下:
func Marshal(v interface{}) ([]byte, error)
假設我們還是需要生成上面的伺服器列表資訊,那麼如何來處理呢?請看下面的例子:
package main import ( "encoding/json" "fmt" ) type Server struct { ServerName string ServerIP string } type Serverslice struct { Servers []Server } func main() { var s Serverslice s.Servers = append(s.Servers, Server{ServerName: "Shanghai_VPN", ServerIP: "127.0.0.1"}) s.Servers = append(s.Servers, Server{ServerName: "Beijing_VPN", ServerIP: "127.0.0.2"}) b, err := json.Marshal(s) if err != nil { fmt.Println("json err:", err) } fmt.Println(string(b)) }
輸出如下內容:
{"Servers":[{"ServerName":"Shanghai_VPN","ServerIP":"127.0.0.1"},{"ServerName":"Beijing_VPN","ServerIP":"127.0.0.2"}]}
我們看到上面的輸出欄位名的首字母都是大寫的,如果你想用小寫的首字母怎麼辦呢?把結構體的欄位名改成首字母小寫的?JSON輸出的時候必須注意,只有匯出的欄位才會被輸出,如果修改欄位名,那麼就會發現什麼都不會輸出,所以必須通過struct tag定義來實現:
type Server struct { ServerName string `json:"serverName"` ServerIP string `json:"serverIP"` } type Serverslice struct { Servers []Server `json:"servers"` }
通過修改上面的結構體定義,輸出的JSON串就和我們最開始定義的JSON串保持一致了。
針對JSON的輸出,我們在定義struct tag的時候需要注意的幾點是:
- 欄位的tag是
"-"
,那麼這個欄位不會輸出到JSON - tag中帶有自定義名稱,那麼這個自定義名稱會出現在JSON的欄位名中,例如上面例子中serverName
- tag中如果帶有
"omitempty"
選項,那麼如果該欄位值為空,就不會輸出到JSON串中 - 如果欄位型別是bool, string, int, int64等,而tag中帶有
",string"
選項,那麼這個欄位在輸出到JSON的時候會把該欄位對應的值轉換成JSON字串
舉例來說:
type Server struct { // ID 不會匯出到JSON中 ID int `json:"-"` // ServerName 的值會進行二次JSON編碼 ServerName string `json:"serverName"` ServerName2 string `json:"serverName2,string"` // 如果 ServerIP 為空,則不輸出到JSON串中 ServerIP string `json:"serverIP,omitempty"` } s := Server { ID: 3, ServerName: `Go "1.0" `, ServerName2: `Go "1.0" `, ServerIP: ``, } b, _ := json.Marshal(s) os.Stdout.Write(b)
會輸出以下內容:
{"serverName":"Go \"1.0\" ","serverName2":"\"Go \\\"1.0\\\" \""}
Marshal函式只有在轉換成功的時候才會返回資料,在轉換的過程中我們需要注意幾點:
- JSON物件只支援string作為key,所以要編碼一個map,那麼必須是map[string]T這種型別(T是Go語言中任意的型別)
- Channel, complex和function是不能被編碼成JSON的
- 巢狀的資料是不能編碼的,不然會讓JSON編碼進入死迴圈
- 指標在編碼的時候會輸出指標指向的內容,而空指標會輸出null
本小節,我們介紹瞭如何使用Go語言的json標準包來編解碼JSON資料,同時也簡要介紹瞭如何使用第三方包go-simplejson
來在一些情況下簡化操作,學會並熟練運用它們將對我們接下來的Web開發相當重要。