Как организовать хранение большого количества медиа файлов фото и видео, для сайта?

Question

[I_want_to_know]

Всем добра и мира!
Уважаемые знатоки, поделитесь пожалуйста вашим компетентным опытом.
Задача (кратко):
Нужно обеспечить хранение и предоставление пользователю фото и видео. Не дорого (понимаю что это субъективное понятие, поэтому рассмотрю Ваше компетентное не дорого).

Задача подробнее:
Периодически на сайт нужно выкладывать фото и видео с мероприятий.
В среднем, вес фото с одного мероприятия около 5гб.
Видео может достигать 50Гб.
(для "грязного" расчета пусть будет 55гб).
Логика работы сайта такая:
Пользователь нажимает на кнопку "фото" у него открывается галерея (без перехода на сторонний сервис).
Пользователь нажимает на кнопку видео и у него открывается плеер (без перехода на сторонний сервис).
Размышления:
На хостинге reg.ru, во первых я не нашел расценок на cdn, во вторых в принципе не нашел этот раздел (может не внимателен).
Возможно есть удобный, не дорогой, надежный сервис для хранения фото и видео о котором я не знаю, но вы можете подсказать?
При этом всём, должно быть удобно заливать фото и видео на этот сервис и создавать там папки с датами

Comments

[Everything_is_bad]

а зачем тут cdn?
какой общий максимальный объем данных в момент времени?
какой срок хранения условных 55 Gb?
сколько раз эти "уникальные" 55 Gb скачивают?

[Refguser]

5гб фото - это 25-40тыщ шт нормально оптимизированных. Что явно перебор для одного мероприятия. (не, наснимать можно и больше, вот только выкладывать это всё никому не нужно.)

Answer 1

[rPman]

До нескольких терабайт, при условии что сайтом очень активно пользуются, сотни мегабайт трафика и т.п. - самое дешевое это использовать свое хранилище, на основе hdd (при большой нужде - ssd), настраивать raid1 или raid5, используя минимально возможное количество дисков на массив (т.е. если 10 дисков то делать либо 2 рейда по 5 дисков либо три по 3 диска, не делать один огромный рейд - особенно если это hdd, он будет медленный). Хранить в виде файлов как они должны отдаваться, метаинформацию - в базе данных.

Если дисков в своем хранилище больше 20, или если сетевой трафик очень маленький, условно за сутки один-два пользователя смотрят фоточек на десяток другой гб. либо если суммарно хранимый объем превышает десятки-сотни терабайт, то строить свое хранилище становится значительно дороже и лучше идти в облака. Самое популярное это амазон s3, в его формате такие услуги предлгают и российские провайдеры типа селектела или яндекса. Тарификация там двойная - за сетевой трафик (по разному на загрузку и выгрузку) и за хранение от объема.

Comments

[Everything_is_not_so_bad]

До нескольких терабайт, при условии что сайтом очень активно пользуются, сотни мегабайт трафика и т.п. - самое дешевое это использовать свое хранилище, на основе hdd (при большой нужде - ssd)

Возможно. Но надо брать в расчёт и ССВ, поскольку, включает:
1. аренду серверного оборудования
2. разработку собственного решения для хранения
3. Оплату специалистам за разворачивание и поддержку этого решения

[Everything_is_not_so_bad]

Самое популярное это амазон s3

надо уточнить, что этот популярный протокол не привязан жёстко к Амазону и он предоставляется многими провайдерами. И, с точки зрения разработчика, значительно упрощает работу с хранилищем данных, доступных по этому протоколу. И никто не запрещает использовать открытое ПО для работы on premises.

[I_want_to_know]

rPman Благодарю за подробный ответ.
Описанное Вами решение это скорее всего для реально больших проектов.
В моём случае, избыточное решение. :(
Сайт по организации праздников, на котором будут выкладываться материалы с этих праздников.
Вот я и обратился к экспертам для того, что бы понять как же всё таки мне организовать хранение файлов, но так что бы их можно было смотреть не покидая сайт (смотреть прямо на сайте) и за любой период.

[I_want_to_know]

Иерокопус Таманский, Интересное решение.
Вопрос тут возникает в том, что многие импортные компании уходят с Российского рынка, не уйдет ли и Амазон?

[Сергей Горностаев]

I_want_to_know, вам же написали, S3 к амазону не привязан.

[Everything_is_not_so_bad]

I_want_to_know,

Вот я и обратился к экспертам для того, что бы понять как же всё таки мне организовать хранение файлов, но так что бы их можно было смотреть не покидая сайт (смотреть прямо на сайте) и за любой период.

при использовании S3 весь доступ настраивается так, что пользователь может оставаться в рамках сайта, чтобы доступ был к поддомену, например files.example.com
Само хранилище S3 может работать как составной модуль сайта, а не как отдельный домен. Для веб-разработчиков S3 должен быть на слуху (если не дилетанты).
То есть хранилище S3 может работать как на своих мощностях, так и некоторого провайдера (нет связи с интернет провайдерами).
Для лучшего понимания о работе с хранилищем данных лучше обратиться с вопросами к специалистам или самому порыться в интернете.

[Dmitry Bay]

I_want_to_know,
Хотел ответ написать, в общем свадебщики еще в 2010 думали как передавать контент клиентам.

По сути, у вас остается важный вопрос - как сделать галлерею для клиента и сжать видео и фото в формат веба.
Память тут уже вторична, это может и яндекс s3 и просто жесткие диски подключенные к vps.

Вот сервис гляньте еще -
https://vigbo.com/pricing

Answer 2

[Drno]

Свою хранилку делайте и прикручивайте к сайту плеер итд
по сути наверно S3 будет оптимальным...