Как преобразовать в XML-файл большой объект?

Question

[Сергей Ганжела]

В проекте я использую
data = render_to_string("****.xml", products)
Объект продукт стал слишком большим, и процесс киллится во время выполнения.
Как с этим бороться?

Comments

[Developer]

Доброго времени суток тебе.
Не знаю.

[prochanev]

Раскрой свой вопрос более подробно

какая структура файла
какую либу используешь для преобразования XML в объект
какой размер у файла
с какой ошибкой "киллится" твоя программа?
текст функции render_to_string, может у тебя в функции raise Exception стоит, мы же не знаем.

[Сергей Ганжела]

prochanev, да наверно ты прав я то указал тег Django! наверно не очень понятно
Проект на django а render_to_string это встроенная функция для рендера шаблонов, файл ***.xml это шаблон в который передается объект 17К qyeryset на выходе мы должны получить xml файл,
Ошибки как таковой нет kill SIGOUT 9 насколько я понимаю не первый раз сталкиваюсь с таким не хватает памяти чтоб отрендерить такой большой объкм!

Answer 1

[Сергей Тихонов]

1. Использовать queryset.iterator() чтобы избавиться от хранения всего списка объектов
   
2. Использовать StreamingHTTPResponse чтобы не буферизировать весь выхлоп
   
3. Формировать XML не целиком с помощью цикла в шаблоне, а по одному элементу (плюс хедер/футер XML)
   

Comments

[Сергей Ганжела]

Спасибо! да наверно так и буду делать!