web-dev-qa-db-fra.com

Unmarshal JSON avec des champs inconnus

J'ai le JSON suivant

{"a":1, "b":2, "?":1, "??":1}

Je sais qu'il comporte les champs "a" et "b", mais je ne connais pas les noms des autres champs. Je veux donc le démarquer dans le type suivant:

type Foo struct {
  // Known fields
  A int `json:"a"`
  B int `json:"b"`
  // Unknown fields
  X map[string]interface{} `json:???` // Rest of the fields should go here.
}

Comment je fais ça?

28
Abyx

Ce n'est pas Nice, mais vous pouvez le faire en implémentant Unmarshaler:

type _Foo Foo

func (f *Foo) UnmarshalJSON(bs []byte) (err error) {
    foo := _Foo{}

    if err = json.Unmarshal(bs, &foo); err == nil {
        *f = Foo(foo)
    }

    m := make(map[string]interface{})

    if err = json.Unmarshal(bs, &m); err == nil {
        delete(m, "a")
        delete(m, "b")
        f.X = m
    }

    return err
}

Le type _Foo est nécessaire pour éviter la récursion lors du décodage.

19
0x434D53

Unmarshal deux fois

Une option consiste à décompresser deux fois: une fois dans une valeur de type Foo et une fois dans une valeur de type map[string]interface{} et en supprimant les clés "a" et "b":

type Foo struct {
    A int                    `json:"a"`
    B int                    `json:"b"`
    X map[string]interface{} `json:"-"` // Rest of the fields should go here.
}

func main() {
    s := `{"a":1, "b":2, "x":1, "y":1}`
    f := Foo{}
    if err := json.Unmarshal([]byte(s), &f); err != nil {
        panic(err)
    }

    if err := json.Unmarshal([]byte(s), &f.X); err != nil {
        panic(err)
    }
    delete(f.X, "a")
    delete(f.X, "b")

    fmt.Printf("%+v", f)
}

Sortie (essayez-le sur Go Playground ):

{A:1 B:2 X:map[x:1 y:1]}

Démarchage unique et manutention manuelle

Une autre option consiste à décompresser une fois dans un map[string]interface{} et à gérer les champs Foo.A et Foo.B manuellement:

type Foo struct {
    A int                    `json:"a"`
    B int                    `json:"b"`
    X map[string]interface{} `json:"-"` // Rest of the fields should go here.
}

func main() {
    s := `{"a":1, "b":2, "x":1, "y":1}`
    f := Foo{}
    if err := json.Unmarshal([]byte(s), &f.X); err != nil {
        panic(err)
    }
    if n, ok := f.X["a"].(float64); ok {
        f.A = int(n)
    }
    if n, ok := f.X["b"].(float64); ok {
        f.B = int(n)
    }
    delete(f.X, "a")
    delete(f.X, "b")

    fmt.Printf("%+v", f)
}

La sortie est la même ( Go Playground ):

{A:1 B:2 X:map[x:1 y:1]}
18
icza

Le moyen le plus simple est d'utiliser une interface comme celle-ci: 

var f interface{}
s := `{"a":1, "b":2, "x":1, "y":1}`

if err := json.Unmarshal([]byte(s), &f); err != nil {
    panic(err)
}

Go exemple de terrain de jeu

8
Ariel Monaco

Presque un seul passage, utilise json.RawMessage

Nous pouvons décompresser en map[string]json.RawMessage, puis décompresser chaque champ séparément.

JSON sera marqué à deux reprises, mais c'est assez bon marché.

La fonction d'assistance suivante peut être utilisée:

func UnmarshalJsonObject(jsonStr []byte, obj interface{}, otherFields map[string]json.RawMessage) (err error) {
    objValue := reflect.ValueOf(obj).Elem()
    knownFields := map[string]reflect.Value{}
    for i := 0; i != objValue.NumField(); i++ {
        jsonName := strings.Split(objValue.Type().Field(i).Tag.Get("json"), ",")[0]
        knownFields[jsonName] = objValue.Field(i)
    }

    err = json.Unmarshal(jsonStr, &otherFields)
    if err != nil {
        return
    }

    for key, chunk := range otherFields {
        if field, found := knownFields[key]; found {
            err = json.Unmarshal(chunk, field.Addr().Interface())
            if err != nil {
                return
            }
            delete(otherFields, key)
        }
    }
    return
}

Voici le code complet sur Go Playground - http://play.golang.org/p/EtkJUzMmKt

6
Abyx

Utilisez le décodeur carte-à-structure de Hashicorp, qui garde la trace des champs non utilisés: https://godoc.org/github.com/mitchellh/mapstructure#example-Decode--Metadata

C'est deux passes, mais vous ne devez utiliser aucun nom de champ connu.

func UnmarshalJson(input []byte, result interface{}) (map[string]interface{}, error) {
    // unmarshal json to a map
    foomap := make(map[string]interface{})
    json.Unmarshal(input, &foomap)

    // create a mapstructure decoder
    var md mapstructure.Metadata
    decoder, err := mapstructure.NewDecoder(
        &mapstructure.DecoderConfig{
            Metadata: &md,
            Result:   result,
        })
    if err != nil {
        return nil, err
    }

    // decode the unmarshalled map into the given struct
    if err := decoder.Decode(foomap); err != nil {
        return nil, err
    }

    // copy and return unused fields
    unused := map[string]interface{}{}
    for _, k := range md.Unused {
        unused[k] = foomap[k]
    }
    return unused, nil
}

type Foo struct {
    // Known fields
    A int
    B int
    // Unknown fields
    X map[string]interface{} // Rest of the fields should go here.
}

func main() {
    s := []byte(`{"a":1, "b":2, "?":3, "??":4}`)

    var foo Foo
    unused, err := UnmarshalJson(s, &foo)
    if err != nil {
        panic(err)
    }

    foo.X = unused
    fmt.Println(foo) // prints {1 2 map[?:3 ??:4]}
}
1

J'utilise l'interface pour unmarshal type incertain json.

bytes := []byte(`{"name":"Liam","gender":1, "salary": 1}`)
var p2 interface{}
json.Unmarshal(bytes, &p2)
m := p2.(map[string]interface{})
fmt.Println(m)
0
LiamHsia

Pass unique, utilisez github.com/ugorji/go/codec

Lors de la dissociation dans une variable map, encoding/json vide la carte, mais pas ugorji/go/codec. Il tente également de renseigner les valeurs existantes afin que nous puissions mettre des pointeurs sur foo.A, foo.B dans foo.X:

package main

import (
    "fmt"
    "github.com/ugorji/go/codec"
)

type Foo struct {
    A int
    B int
    X map[string]interface{}
}

func (this *Foo) UnmarshalJSON(jsonStr []byte) (err error) {
    this.X = make(map[string]interface{})
    this.X["a"] = &this.A
    this.X["b"] = &this.B
    return codec.NewDecoderBytes(jsonStr, &codec.JsonHandle{}).Decode(&this.X)
}

func main() {
    s := `{"a":1, "b":2, "x":3, "y":[]}`
    f := &Foo{}
    err := codec.NewDecoderBytes([]byte(s), &codec.JsonHandle{}).Decode(f)
    fmt.Printf("err = %v\n", err)
    fmt.Printf("%+v\n", f)
}
0
Abyx