Предыдущий оратор имеет в виду, что есть такая утилита ffmpeg.
Она, кстати, может сделать то, что вам требуется просто из командной строки без всякого питона. Но из питона же можно командную строку запускать, так что формально да, с помощью него тоже.
Вот из официальной документации мануал:
https://trac.ffmpeg.org/wiki/Slideshow#Addingaudio
Более того, можно еще и сделать эффект панорамирования и плавного масштабирования, чтобы видео получилось не таким статичным
