Можно ли использовать MEMCACHED в данном случае?

Question

[Us59]

Задача: Объединить информацию из 2-х или 3-х разных запросов.

Есть 2 сайта на которые я должен сделать запросы, разные сайты дают разную информацию, сайты отвечают через callback опцию, т.е. - отправил запрос и нужно принимать ответ на моей стороне, все я это делаю.

Как мне посоветовали можно использовать MEMCACHED, в него можно записать все что угодно и потом доставать при необходимости.

Никогда не использовал MEMCACHED, поэтому возникают вопросы:
1) Сколько информации я могу записать через MEMCACHED? Т.е. имеет ли значение насколько много инфы я туда засуну, если да, то как проверять сколько осталось на данный момент места для записи?
2) Используют ли в подобных ситуациях MEMCACHED ?? Может кто из практики подскажет или кинет альтернативные варианты?)
3) Для использования MEMCACHED нужно устанавливать что-то на ubuntu?

Comments

[Модератор]

Us59 дорогой пользователь, настоятельно рекомендуем еще раз обратить самое пристальное внимание на п. 3.1 регламента работы сервиса (и, в особенности, на его последний абзац).
В противном случае ваши вопросы будут удаляться по причине тег-спама, а систематические нарушения приведут к блокировке учетной записи.

[d'Ivan]

Приведи пример того что подразумевается под объединением запросов.

[Us59]

Роман Мирр, я принимаю call back от сайтов, мне нужно из 2 разных call back составить 1 HTML и записать его в БД.

[d'Ivan]

Us59, а какие-нибудь требования к времени жизни целевого HTML имеются? И как часто он будет воспользован?

[Us59]

Роман Мирр, ну посудите сами, делаю запрос, call back возвращается все это занимает около 2-3 минут.
1 call back вернулся,нужно записать куда-то результаты.
2 call back вернулся нужно опять же записывать результаты, либо делать проверку (скорее всего) проверять, если первый call back вернулся и все успешно, то вытаскивать данные из него и строить html и сразу передавать его для записи в БД. после того как отдали в Бд можно очистить данные из кэша. Единовременно может выполнять около 50 запросов.

Answer 1

[Dimonchik]

можно
Максимальный размер значения, которое вы можете хранить в memcached составляет 1 мегабайт.
проверять место скриптами
еще есть Redis для продвинутых и Aerospike для крутых (ну и MongoDb для хипстеров)

Answer 2

[d'Ivan]

Под данную задачу не подходит Memcached, т.к. это не похоже на кэширование.
Нужно продумать механизм отложенного получения данных при помощи очередей, когда получение данных с каждого источника будет помечено и когда все получено, можно запускать задачу генерации HTML.
Предварительные результаты сохранять в РСУБД.