1) ссд на 2-3тб выйдет значительно дороже массива из 3-4 hdd, а упрётесь вы и там и там в порт 1гбит
2) имеет смысл либо использовать сторонний CDN, либо делать свой.
Леший Городской, главное поддерживать одно из двух/трёх зеркал, если одно из них отвалится то ничего страшного, главное замену произвести своевременно. А так вам наверное больше подойдёт ceph, пусть ему и надо по хорошему 2-3 сервера на мониторинг, зато можно спокойно добавлять/удалять ноды, при этом реплика перераспределится на имеющиеся/новые ноды