Бинарные данные в динамический архив?

Question

[Илья]

Мне нужно:

1. принять json
   
2. конвертировать его в структуру go
   
3. преобразовать в gob
   
4. сжать
   
5. сохранить в динамический архив с возможностью последующего добавления идентичных двоичных порций
   

Какую архивацию я могу использовать легально (без хаков с удалением футеров)?

Comments

[Everything_is_not_so_bad]

Не знаком с gob. 
Что подразумевается под "динамическим архивом"? Какой-то формат файлов для архивации данных?
Что подразумевается под этим:

с возможностью последующего добавления идентичных двоичных порций

[Илья]

Роман Мирр, я подразумеваю под динамическим архивом существующий, ранее созданный архив, в который можно добавлять/удалять (хотя бы последние) файлы.
Реализации из коробки в golang такого не предусматривают, поэтому и вопрос, может быть известны какие то библиотеки типа hdf5, но не такие громоздкие. Тем более для windows, адекватную hdf5 имплементацию go я не нашел

[Adamos]

Насколько я помню, самая удачная реализация динамического архива для данных называется SQLite.

[Everything_is_not_so_bad]

Adamos, аналогично и у меня была мысль использовать СУБД.
Хотя, возможно, существует СУБД с записью в HDF5 - в случае если так необходимо использовать этот формат.

[Илья]

Adamos, структура моих данных имеет многократную вложенность, а также с массивами с переменной длиной. Я предполагаю эффективно упаковать такой тип данных в sql это боль, могу ошибаться, т.к. не особо знаком с субд. Вообще этот вопрос больше по языку Go, а не по хранению данных

[Everything_is_not_so_bad]

Илья, есть графовые СУБД.

может быть известны какие то библиотеки типа hdf5, но не такие громоздкие

может, тогда проще найти библиотеки, подходящие по размеру.

[Adamos]

Про хранение сложных данных речи и не было. В архиве все равно будет храниться блоб.
От того, что он же будет храниться в базе, только уменьшатся затраты на запись и извлечение.