Ребята, попробовал несколько машин – от 4 до 32 ядер – в итоге, при большом количестве ядер (12 и больше) загрузка процессора не полная. Машина с 32 ядрами выполняет конвертацию на 15% быстрее машины с 16 ядрами, а стоит в 2 раза дороже.
Кто более глубоко понимает работу ffmpeg, подскажите, есть ли способ заставить использовать все ядра процессора на 100%, или это технически невозможная задача?
Это можно но безсмысленно. Дело в том что утилизация CPU не всегда связана с производидельностью приложения. Можно запустить и больше конкурирующих потоков и процессов но они будут конкурировать за оперативную память и кеши L1-2-3 и диск.
Оптимальную нагрузку можно подобрать только исходя из КПД вашего приложения. Меряйте с секундомером время готовности пережатого фильма. Оптимум можно будет найти за 3-5 экспериментов с разным числом потоков.
С миром автопрома есть хорошая аналогия. Расход бензина например. Вы-же не ставите задачу своей машине - жечь его как можно больше?
Евгений, а при уменьшении параметра -threads у вас увеличивается нагрузка на ядра ?
также видно htop показывает что ядера загружены задачей с низким приоритетом (синий цвет).
попробуйте с помощью утилиты nice запускать ffmpeg с повышенным приоритетом.
Есть расширенная часть закона Амдала (это про HighLoad) которая показывает что начиная от некоторого количества потоков перформанс приложения будет резко падать. Далее запускай хоть 64 хоть 128 ядер. Они все будут драться за один спинлок или выбивать полезные странички из L1 и ожидать своих страничек к примеру и это займет их 99% времени. А оставшися 1% они будут посвящать полезной работе.
Лекарства от этого нету. Есть варианты - уменьшить число потоков и поднять тактовую частоту. И второе - просто переписать приложение по другому.
xotkot, спасибо, попробую. Но судя по запущенным процессам, только ffmpeg работает. При этом линукс не должен разве ему отдать все необходимые ресурсы?
Средний
