А в чем именно проявляется нагруженность? Большая загрузка CPU? Как именно вы ее измеряете, или это субъективные ощущения. Вообще, мне кажется, что тут замена ftp на http — менять шило на мыло, надо искать где на самом деле происходит затык.
С другой стороны, если скачивают в основном музыку и фильмы, то http позволит использовать streaming, не скачивая файл целиком, возможно это уменьшит нагрузку. Опять, же запустить массовую загрузку смогут только продвинутые пользователи, в отличие от ftp.
Nginx исмользует встроеную в ядро линукса команду SendFile — ничего быстрее нет.
Вынести статику на отдельный сервер — это хорошо, на несколько серверов — отлично.
С nginx нагрузка должна быть меньше. Во-первых, HTTP в отличие от FTP не использует разные коннекты для передачи команд и данных; использует лишь один коннект на одного клиента. Во-вторых, играет роль архитектура сервера. Например, vsftpd на каждый коннект порождает дополнительный процесс. nginx такого не делает, обрабатывая все коннекты циклами в заданном количестве процессов. Экономия ресурсов очевидна.
Передает, да. Лишних 300 байт. Еще запрос на получение файла при использовании HTTP будет весить на несколько сотен байт больше, чем при использовании FTP. Но я думаю, что отсутствие лишних нескольких сотен байт трафика на один файл — недостаточное преимущество FTP.
Да, нагрузка уменьшится. Можно вообще держать некоторые файлы в оперативке минимизируя обращения к диску. Еще советую поиграться с сетевыми параметрами ядра с помощью sysctl (в сети много руководств на эту тему).
