Decoder xml отъедает память. В чем проблема и как ее решить?

Question

[MOTORIST]

Всем привет!

Есть функция, которую я использую в цикле, она съедает память:

func decoderXml(f *zip.File) Text {
	d := Text{}
	r, err := f.Open()
	if err != nil {
		fmt.Println(err)
	}
	defer r.Close()

	decoder := xml.NewDecoder(r)
	decoder.CharsetReader = charset.NewReaderLabel
	err = decoder.Decode(&d)

	if err != nil {
		fmt.Printf("Error: %v",err)
	}

	return d
}

PS если перед return поставить d = Text{}. То все нормально.

Comments

[Александр Павлюк]

Какой размер несжатого файла?

[MOTORIST]

Александр Павлюк: Там много файлов я zip архив разбираю. 3-5 mb каждый.

[Илья]

А куда он возвращает? Может там скопление? А вообще, профилирование вам в помощь. Благо, у го легко это делается.

[MOTORIST]

FireGM: возвращается в цикле и присваевается элементу массива. Как ее правильно сбросить? Пробовал разные варианты не получилось.

[Александр Павлюк]

MOTORIST: погонял у себя этот код, память не отъедается. Может вне этого куска что-то происходит? Данные, которые вы достаете из файлов куда складываются?

[Илья]

MOTORIST: так вам нужны эти структуры, вы с ними работаете, или нет? То вы присваиваете d к пустой структуре, то сохраняете в массив. Если сохраняете, то и будет отъедать память, всё работает как вы и хотели.

[MOTORIST]

FireGM:По этой структуре я паршу xml, как мне парсить xml без структуры?

[MOTORIST]

Прошу прощения за беспокойство. Проблема не в функции, а дальше. Александр Павлюк, навел на решение. Всем спасибо.

[Илья]

Забавно, что моё "А куда он возвращает? Может там скопление?" не навело.

[#алгоптимизируй #отботизируй]

MOTORIST: проблему и решение не огласите?

[MOTORIST]

Дальше была переменная, которая переполнялась.

[MOTORIST]

FireGM: Ваш комментарий тоже навел на решение, спасибо за помощь! Нужно более серьезно подойти к профилированию.

Answer 1

[MOTORIST]

Дальше была переменная, которая переполнялась.

Answer 2

[Александр Сёмченко]

Прошу.
golang-book.ru/chapter-08-pointers.html