Выбрать CDN для WordPress?

Question

[super-guest]

Доброй ночи.

Есть WordPress MU (Multi Site), у него под-сайты (sub-sites), у них всякие медиа файлы. Места под них на сервере недостаточно.

Задача - хранить где-нибудь эти медиа файлы, чтобы не занимать места на сервере, но чтобы всё было автоматически (закачал картинку через Медиа библиотеку в админке WP - файл сам закачался на CDN).

Вероятно, мне нужен CDN, но который не просто отдаёт быстрее (это не критично), а на котором эти файлы и хранятся. Планирую использовать для этого плагин W3 Total Cache, но не уверен, что он НЕ будет сохранять копии файлов на моём же сервере.

Заранее спасибо за информацию и советы…

P.S.- посетители на сайт ожидаются все из РФ.

Comments

[Сергей Поздняков]

Есть плагин jetpack от photon, он как раз только для картинок...
https://jetpack.com

Answer 1

[Дмитрий Энтелис]

Принцип работы массовых CDN - они всегда отдают данные которые хранятся на Вашем сервере.
Это нужно для случаев, когда поток запросов по трафику превышает возможности вашего сервера.
Так что CDN - это не то что Вам нужно.

Если Вам нужно что бы данные хранились где то снаружи - можно посмотреть например на Amazon S3
aws.amazon.com/s3 К нему прикрутить прямой доступ docs.aws.amazon.com/AmazonS3/latest/dev/WebsiteHos... а сверху, для экономии трафика прикрутить уже CDN.
Учтите что цены на эти развлечения весьма не дешевые, оно гарантированно будет стоить заметно дороже чем просто еще один выделенный сервер.

Вы не написали конкретных цифр нагрузки, но посмотрите например на ru.hetzner.com/hosting/produkte_rootserver/sx60
Неужели 8 Тб Вам не хватит? Мне кажется что сменить сервер на более мощный - это явно более простое и дешевое решение.

Comments

[super-guest]

Интересно, спасибо. Но очередной сервер тоже надо настраивать...с CDN - проще. А как насчёт такого, со storage - www.rackspace.com/cloud/files ? Думаю, есть и аналоги (буду рад ссылкам). Только вот всё равно переживаю, не будет ли W3TC всё равно оставлять копии на моём сервере?

[Дмитрий Энтелис]

@super-guest Все упирается в конкретные цифры вашей нагрузки.
Если у Вам нужно хранить хотя бы 500gb, при ежемесячном трафике скажем в 1Тб - решение по ссылке будет стоить ~170$ ежемесячно. Сервер в хецнере можно взять за 42 евро. При росте нагрузки - облака начинают стоить тысячи и десятки тысяч $.

Что касается W3TC - залезьте в его исходники да посмотрите как он работает.

[super-guest]

Не понял, откуда цена в $170, но в www.rackspace.com/cloud/files цена намного ниже получается. Да и $170 за 500 гб - меня устраивает вполне.

Нагрузка, например, такая для начала: 70 гб места и трафика 10-20 ТБ, примерно.

[Дмитрий Энтелис]

@super-guest Вы вчитайтесь в цены внимательней. Отдельно оценивается хранение, отдельно оценивается трафик. И цены за 1gb даны.
70гб места = 70 * 0.10$ = 7$
20Тб трафика = 0,12$*(10*1024) + 0,10$*(10*1024) = 2252,8$

[Дмитрий Энтелис]

@super-guest Я Вас не очень понимаю если честно. Если у Вас есть трафик и соответственно средства на его оплату - наймите себе фрилансера какого нибудь, да перенесите на нормальное железо.
Заодно можно потихоньку от WP отказаться, еще и скорость генерации страниц вырастет.

[super-guest]

Хм, может быть я неправильно посчитал требуемый мне трафик...
У меня планируется так (для начала): 700 под-сайтов, у каждого по 100 мб. В итоге нужно где-то 70 гб. места. Если на каждый из сайтов будут заходить (раз по 200-300 в день), то какой трафик примерно получится?

P.S.- я, видимо, считал, что каждый посетитель будет съедать эти самые 100 мб при каждом заходе, но это же бред... подскажите, пожалуйста.

[Дмитрий Энтелис]

@super-guest Этих данных явно не достаточно что бы оценить трафик.
Во первых давайте определимся 200-300 пользователей или 200-300 просмотров страниц?
Если просмотров страниц то получается в месяц 300 * 700 сайтов * 30 дней = 6 300 000 просмотров в месяц.
Сколько трафика потребляет 1 просмотр зависит только от Вас.
Допустим у Вас есть какие то картинки, итд итп - пусть будет 5 mb (мне кажется это с существенным запасом)
Получается 30тб трафика в месяц.

[Дмитрий Энтелис]

@super-guest Вообще по поводу облаков, Вам на подумать:

Плюсы облаков:
возможность быстро расшириться.
вы платите мало денег пока у Вас нет трафика.
Минусы:
производительность хуже чем на своем железе
надежность хуже чем может быть на своем железе
при появлении нагрузки начинают стоить на порядки(!!) дороже выделенных серверов

Т.е если бы у Вас была ситуация "мы тут делаем стартап, к нам когда то придет много трафика, а может не придет" - я бы первый вам посоветовал захоститься в облаке итд.
Но в Вашем случае надо брать выделенный сервер и понемногу готовиться к мысли что одним сервером дело не обойдется

[super-guest]

Понятно, спасибо. Значит, где-то 25-30 гб траффика может понадобится.

А в принципе, где можно так хранить файлы?
CDN с хранилищем?
Облака?
Что-то ещё? (Dropbox, Amazon, Google?)

Хотелось бы знать все варианты, чтобы сделать полностью продуманный выбор.

[super-guest]

(свой сервер мне пока не нужен, мне кажется, слишком много другого, что заморачивает - хочется в этом обойтись без настроек сервера)

[Дмитрий Энтелис]

@super-guest Amazon можно подключить за 20 минут, есть готовое PHP SDK. Можно отдавать файлы напрямую с амазона, минуя Ваш хостинг.
Скорость работы в РФ будет достаточно печальная.

Dropbox итд - использовать для отдачи файлов в вебе без ОЧЕНЬ больших извращений не получится.

[Дмитрий Энтелис]

@super-guest и кстати вряд ли у Вас будет в пике больше 20 rps, но дешевые хостинги начнут загибаться и на этой нагрузке

[super-guest]

Значит, я всё перечислил, надеюсь...

Хорошо. Теперь, получается, надо посмотреть для каких сервисов есть готовые плагины (чтобы раз настроил и забыл), в идеале использовать W3TC, ну и в итоге выбрать из оставшихся по цене и отзывам.

Если есть ещё какие-то советы или пожелания - буду рад! :)

[Дмитрий Энтелис]

@super-guest
www.webdesignerdepot.com/2013/08/how-to-take-wordp...
richwp.com/wordpress-cdn-total-cache-amazon-cloudfront

[super-guest]

Спасибо, но Вы же писали, что Амазон не подходит по скорости для РФ? или статьи про разные Амазоны?

Вообще, я так и не смог найти информацию (полную) по типам CDN. В W3TC есть такой выпадающий список:
- Origin Pull / Mirror (recommended):
-- Akamai
-- Amazon CloudFront
-- AT&T
-- Cotendo (Akamai)
-- EdgeCast / Media Temple ProCDN
-- Generic Mirror
-- MaxCDN
-- MaxCDN Enterprise (NetDNA)
- Origin Push:
-- Amazon CloudFront
-- Amazon Simple Storage Service (S3)
-- Microsoft Azure Storage
-- Rackspace Cloud Files
-- Self-hosted / File Transfer Protocol Upload

Чем "Origin Pull" отличается от "Origin Push:"? Что лучше?
Почему "Amazon CloudFront" есть и там и там?

Если можете подсказать что-то по этим вариантам (что отбросить сразу, например, почему) - было бы здорово.

[Дмитрий Энтелис]

@super-guest s3 грустный по скорости. если сверху cloud front - будет получше imho.

[Дмитрий Энтелис]

@super-guest Все гуглится легко :)
www.whoishostingthis.com/blog/2010/06/30/cdns-push...

Вам соответственно нужен Push, раз Вы не хотите хранить у себя.

[Дмитрий Энтелис]

@super-guest но я в 100500 раз повторяю, что это не правильное решение, которое чревато кучей геморроя в дальнейшем.

[Дмитрий Энтелис]

@super-guest вы даже оператора cdn не сможете сменить без извращений. а если он вдруг потеряет ваши файлы - они потеряются окончательно, бекапа у вас нет.

[super-guest]

Т.е. из перечисленных выше Origin Push Вы предлагаете комбинацию "Amazon Simple Storage Service (S3)" + "Amazon CloudFront"? Остальные хуже или не пробовали их?

Да, бэкапы нужны, хочется, чтобы они были. НО не знаю я таких надёжных хостеров, где можно было бы по нормальной цене взять сервер для хранения файлов.
70 ГБ - это только начало, надеюсь. Потом может потребоваться и 150 и 300 гб. У CDN и облаков с местом проблем нет, а вот брать 100500 отдельных серверов, настраивать их, обновлять, покупать панели управления и т.п. - мне не хочется...

В принципе, сменить хостера без извращений тоже ведь не получится, к сожалению... Так что то на то, получается. Может быть бэкапы и получится настроить как-нибудь + у них у самих наверняка всё передублировано (это ж их хлеб).

Или я чего-то не знаю - делаю неверные выводы?

[Дмитрий Энтелис]

@super-guest Я занимаюсь проектированием высоконагруженных сервисов последние 4 года и хорошо понимаю о чем пишу.
Извините, но у меня такое ощущение что Вы не читаете мои сообщения. Или читаете из через слово, не знаю.
Мне честно говоря надоело биться о стену в разговоре с Вами и повторять прописные истины. Если после всего что я написал с цифрами Вам продолжает казаться что "у облаков нет проблем с местом" - флаг Вам в руки и удачи.

Я Вам по вашим цифрам показал трафик в 30 ТЕРАБАЙТ - Вы следующим же сообщением пишите трафик в 30 гигабайт. Определитесь уже сколько и чего Вам нужно.

И в последний раз, на прощание:
Если у вас нагрузка около нуля - вам подходит любое облако (дешево и масштабируемо).
Если у вас нагрузка умещается в 1 сервер (2-3-4 ТЕРРАБАЙТ данных всего, до 20 ТЕРРАБАЙТ трафика в месяц ) - вам нужно взять в аренду дешевый сервер в хецнере и не парить людям мозг.
Если вы чувствуете что нагрузка перестает умещаться в один сервер, но при этом не очень велика, можно перенести проект в облака, платить при этом порядка 1000-3000$ ежемесячно.
Если нагрузка вырастает до объемов когда месячный счет за облако стремится к 5000$+ - свой кластер серверов снова становится выгоднее.

И в самый последний раз:
Нагрузка которую выдерживает 1 сервер за 60 евро в месяц эквивалентна счету в 2000$+ ежемесячно при размещении в облаке

[super-guest]

Про "30" - опечатался. Неужели не понятно? О_о

Значит, Вы предлагаете сначала взять сервер, потом "с извращениями" перейти на облако, потом опять также на сервер (кластер)? Это действительно похоже на битие головой...нецелесообразное применение мозга, так сказать :)

Так Вы не ответили/не прокомментировали ни один из моих вопросов из предыдущего моего сообщения. Они слишком конкретные или просто устали от обёъма данных?

[Дмитрий Энтелис]

@super-guest
Я предлагаю сразу брать сервер, когда его перестанет хватать - сесть, подумать, посчитать по деньгам какой путь выгоден.
Это нормальный процесс развития проекта.
У вас не получится собрать из готовых кусочков проект и без смен архитектуры вырасти на порядки.
С учетом того что у Вас каждый сайт занимает мало места - переход на мультисерверную конфигурацию скорее всего будет легок и прост, облака можно будет вообще пропустить. Много нюансов, надо будет смотреть на профиль нагрузки итд.

По вопросам из предыдущего сообщения:

Т.е. из перечисленных выше Origin Push Вы предлагаете комбинацию "Amazon Simple Storage Service (S3)" + "Amazon CloudFront"? Остальные хуже или не пробовали их?

Я привел их для примера. Azure щупал, но не доверяю технологиям microsoft, про Rackspace раньше никогда не слышал. Хорошо зарекомендовал себя CDN https://www.cloudflare.com/ но у них проблемы в РФ, некоторые ip в черных списках.

Да, бэкапы нужны, хочется, чтобы они были. НО не знаю я таких надёжных хостеров, где можно было бы по нормальной цене взять сервер для хранения файлов.

ru.hetzner.com/hosting/produkte_rootserver/px60 4 терабайта в RAID1 за 60 евро в месяц.
Хочется бОльшей надежности - берем 2й в другом датацентре, через rsynk сливаем на него данные. Получается полностью подконтрольный Вам бекап на 4 терабайта за 120 евро в месяц (+ бонусом 2 сервера для отдачи контента во внешку). Аналогичное решение у вашего rackspace обойдется в 400$ ежемесячно + минимум еще столько же за трафик.

70 ГБ - это только начало, надеюсь. Потом может потребоваться и 150 и 300 гб. У CDN и облаков с местом проблем нет, а вот брать 100500 отдельных серверов, настраивать их, обновлять, покупать панели управления и т.п. - мне не хочется...

Опять описка? О каких 100500 серверах вы говорите, для размещения 300гб контента? На 1 сервер указанный в примере выше влазит 4 терабайта. Это 4096 гигaбайт если что. На 1м сервере.

Может быть бэкапы и получится настроить как-нибудь + у них у самих наверняка всё передублировано (это ж их хлеб).
если вы не управляете своим бекапом - у вас нет бекапа ©

Ну и чуть чуть слайдов с Highload 2012
https://www.dropbox.com/sh/af8zkmustos057n/AADTVid...

[super-guest]

Посчитал, прикинул - CDN слишком дорого просит за траффик. Спасибо за информацию. Видимо, придётся брать выделенный сервер... В связи с чем пара вопросов:
1) Почему именно hetzner?
2) Т.к. выгоднее будет перенести WP MU с VPS на выделенный сервер, то какие моменты стоит учесть? (сейчас у меня CentOS + ISPmanager pro 4)

[Дмитрий Энтелис]

1) Наиболее оптимальное соотношение цены/качества.
У них периодически бывают проблемы с железом, винты сыпятся итд (ну и в целом у них не серверное железо) - но оно у них настолько дешево, что можно спокойно делать 2е-3е резервирование и все равно получается дешевле чем у других.
Еще из дешевых есть www.leaseweb.com/en/bare-metal-servers

2) У хецнера можно заказать предустановленную cPanel если нужна панель управления. НУ или самому перенести, или фрилансим в помощь)

[super-guest]

1) Спасибо, но не хотелось бы, сэкономив, потом расплачиваться за это... иначе говоря, фраза "винты сыпятся и т.д." как-то даже пугает...
2) Я имел ввиду: как Вы считаете, подойдёт ли моя нынешняя ОС для выделенного сервера? (я максимум только с VPS имел дела) Ну и вообще может какие важные моменты есть в различиях между VPS и выделенным?

[Дмитрий Энтелис]

@super-guest
1) У нас сейчас в проектах суммарно ~180 серверов стоит. В разных датацентрах, разных хостеров. Не бывает не ломающегося железа.
Любой даже самый брендовый сервер может сгореть. Это нормально.
Надо уметь с этим жить. Цена на надежность влияет не принципиально как показывает практика.

2) CentOS отличная ос для сервера, её очень любят наши админы, используем её всюду. В администрировании отличий нет.

Answer 2

[super-guest]

Читаю, читаю и никак не могу найти простого решения...
Мне нужно всего-то: место, где будут дёшево храниться медиа файлы, неограниченный (или дешёвый) трафик, и плагин для WP (который настроил и забыл). При этом на моём сервере бы эти файлы не хранились, соответственно.

Неужели такого нет??

Comments

[Дмитрий Энтелис]

Да есть решение и я Вам его уже написал.

Купите себе нормальный выделенный сервер. 20Тб это как раз верхний лимит бесплатного трафика у хецнера, на 200 mbit канале.

Вообще ситуация когда у Вас 20Тб трафика в месяц, это уже прямо скажем, не простое по нагрузке решение. Даже если считать в лоб среднюю нагрузку это 80 mbit получается, а в пике очевидно выше раза в 2-3