Как правильнее обработать объемные данные с внешнего сервиса?

Question

[smf002]

Добрый день.

Пытаюсь сделать несколько информационных страничек с отчетами к сервису, данные от которого получаю по API (к примеру список пользователей и их свойств с внешнего сервиса). И получается что для реализации любой функции (поиск по данным, пагинация вывода и т.п.) приходится каждый раз дергать API и получать довольно объемный кусок данных (запрос порядка 10-15 сек и будет увеличиваться со временем), что довольно тормозит работу с сайтом.
Приходит в голову при входе на сайт один раз дергать данные, запихивать их в БД и дальше уже с ней работать. Но тут возникают проблемы с удалением данных из БД после завершения работы с ними (что будет являться событием к удалению этих данных?).
Подскажите может есть другие способы решить подобную задачу?

Answer 1

[Vov Vov]

Я бы привязался к сессии.

Comments

[smf002]

А вас не затруднит поделиться ссылочкой где про это почитать? Я довольно начинающий с джангой.

[Vov Vov]

Про сессии можно почитать в документации (djbook.ru/rel1.8/topics/http/sessions.html). Будут ещё вопросы пишите мне на почту. Всёго хорошего.

[smf002]

Большое спасибо! Воспользуюсь при случае.

[smf002]

Помогло, все заработало намного шустрее. Спасибо.

Answer 2

[Andrey K]

Просто кешируйте данные.

Comments

[smf002]

Спасибо за совет, изучу.

[smf002]

В доке написано "Вам следует использовать кэш только при использовании Memcached". Отложу на потом.