Как маршалить одну и туже структуру в json с разным набором полей?

Question

[rustler2000]

Есть сложная структура связных данных, для которой надо сделать разные view.
Совсем не хочеться копировать данные, особенно когда их много и они связанные.

Тоесть с одих и тех же данных мне надо генерировать два разных json.

Есть ли либа для json маршалинга, чтобы можно было явно передовать "описание" полей и не использовать тэги в полях типа?

Answer 1

[rustler2000]

Вот так уже лучше, но в мапах приходится хранить анонимные типы (скорее всего в слайсах будет также)

https://play.golang.org/p/e1w5-RVRE0w

package main

import (
	"encoding/json"
	"fmt"
)

// Canonical types
type Aaa struct {
	Field1 string
	Field2 int
	Field3 map[int]*struct {
		Field4 int
		Field5 string
	}
}

func main() {
	// Data
	a := &Aaa{"string", -1, map[int]*struct {
		Field4 int
		Field5 string
	}{}}
	a.Field3[100] = &struct {
		Field4 int
		Field5 string
	}{100, "text"}
	a.Field3[200] = &struct {
		Field4 int
		Field5 string
	}{200, "text22222"}

	// Regular json marshal
	b1, _ := json.MarshalIndent(a, "", "  ")
	fmt.Printf("%s\n", string(b1))

	// Alternative types
	b2, _ := json.MarshalIndent(*(*struct {
		Field1 string `json:"Typ"`
		Field2 int    `json:"Prio,string"`
		Field3 map[int]*struct {
			Field4 int    `json:"-"`
			Field5 string `json:"Text"`
		} `json:"Map"`
	})(a), "", "  ")
	fmt.Printf("%s\n", string(b2))
}

Answer 2

[Илья]

Вот интересный пример, как на лету менять тэги структуры. Можно просто добавить для каждого view свой метод, меняющий всё представление
Еще обратите внимание на библиотеку, которая позволит вам менять поля в существующей структуре, или проще, создать собственную обертку над структурой
UPD: Нашел ту самую библиотеку, которая без копирования данных, в рантайме изменяет теги полей структуры github.com/sevlyar/retag

Comments

[rustler2000]

Первый пример - это копирование и будет более менее красиво выглядеть для flat структур.
Dynamic-struct тоже самое, но хуже - будет память жрать прогрессивно, если json маршалить (сгенерировання через рефлект структура будет иметь новый РТ который будет закэшен в json).
Retag - без копирования, но будет требовать global lock (особо если струкруты связные).

[Илья]

rustler2000, спасибо за пояснение. Вы имеете ввиду lock mutex в исходном коде или о каком global lock вы говорите? Просто там это сделано для безопасного доступа к кэшу в асинхронных вызовах функции Convert, насколько я понял

[rustler2000]

Илья, предположим - у меня сделующая конструкция

```
struct Config {
CollectionA [int]struct ItemA
}

struct ItemA {
SubColB [string]struct ItemB
}

var config Config
```
и я хочу сделать множественные view на config или какието его элементы - предположим на config.CollectionA.
Tогда если в параллели я буду пытаться отдавать config и config.CollectionA мне надо будет ретагать одновременно type info для типа ItemA - причем конкуретно и изза разного view в разные таги. Это не будет работать и придется использовать глобальный лок (мутекс к примеру) чтобы сменить таги, и сделать json.Marshal. Это конечно лучше чем копирование памяти, но это ограничевает скорость сильно.

Я склоняюсь, модифицировать мой первый ответ, чтобы через unsafe собирать интерфейс на нужный type info с нужными тагами, но совместимость типов проверять через тесты и\или _ =

Answer 3

[OlegPy]

https://github.com/valyala/fastjson

Comments

[rustler2000]

Это Unmarshal - не в ту сторону от вопроса