PHP как быстро кешировать большой массив?

Question

[Константин]

Значит есть массив категорий, который генерируется так
1. сначала запрос из БД 40мс (1мс если кешировала mysql его)
2. fetchrow это 30-35мс
3. само построение дерева категорий 70мс - как не оптимизировал снизить это время не могу

тоесть вся функция построения дерева обычно это 130-200мс в зависимости от посещения

ну что я решил, а давай его замемкешу - поставил memcached
загрузка массива из мемкеша! почти 120мс выигрыш смешной
потом думал у меня ssd а давай его jsondecode - получилось даже быстрее memcached но все равно под 100мс
я это к чему, к тому что генерация средствами php происходит быстрее чем загрузка этого массива

я и подумал, а нельзя как то оставить этот массив постоянно в памяти? и обращаться к нему из php
Наверно бред сакзал) ну я уже все перепробовал,
посоветуйте как кешировать можно быстро. я хотел бы чтобы этот массивчик загружался за 50мс максимум!

Вот... что делать...

Comments

[D']

Размер массива? Что в массиве?

[OVK2015]

Как выборку держать в памяти? Скрипт разово отработал,- и нет больше ничего в памяти

[Константин]

Массив категорий около 1500 тысяч категорий. Вложено в друг друга все.
Как раз функция что я писал она их рассовывает по местам.
Массив если в джэйсоне занимает 5мб

[D']

Константин: а если redis попробовать?

[D']

Константин: просто странно. Вы 5мб на клиент чтоли отправляете?

[Константин]

да нет. это массив столько занимает. на клиент уже результаты расчетов и все. там параметры категорий содержаться, имя вложенные и все такое... А редис это что? чем хорош

Answer 1

[neol]

Попробуйте кешировать в xcache или apc.

Comments

[Константин]

Я читал сравнение тесты этих штук. Оно не дает выигрыша больше чем opcache, ну может максимум 5%. А он уже у меня стоит)

[neol]

Константин: я про их использование в качестве кеша, а не акселератора (фкселератор можно отключить, если он не нужен).
Погуглите функции apc_store/apc_fetch или xcache_get/xcache_set
Вероятно это будет заметно быстрее memcache

[Константин]

оппа, попробую

Answer 2

[shagguboy]

кэшируй конечный html

Comments

[Константин]

Тоже об этом думал... Но боюсь потерять параметры, всякие гет посты, надо как то там гламотно разрулить чтобы не давать кеш если нужна динамика...

Answer 3

[Игорь Воротнёв]

shagguboy дело говорит, если object caching (массив) не удовлетворяет, ибо значительный расход времени идет на калькуляции на уровне PHP, используется fragment caching - генерируете уже готовый html и храните в memcached его.

Если сайт/приложение использует авторизацию и данные отличаются для гостей и пользователей, или вовлечена другая логика, которая требует множества вариантов - используйте комбинацию. 1й уровень - object cache (для авторизованных), поверх полируем fragment cache для гостей. Или же, если есть возможность и готовы к хардкору, разбиваете само меню / другой объект на части, те которые можно кешировать целиком, и те которые должны оставаться динамическими.