Btrfs + хранение нескольких картинок в одном файле и указанием позиции в урл или еще где. Почитайте про архитектуру facebook и контакта, там много полезной информации.
рекомендую 5.3.4 из свн, собрать с -disable-all и включать только нужные модули, по необходимости. Не забываем apc — последняя версия уже хорошо с fpm работает. Ну и оптимизации сборки под свою платформу.
