Concat делать способом, который вам больше нравится:
ffmpeg.org/ffmpeg-filters.html#concat - требует перекодирования, но результат обычно более гибкий и точный. Скорее всего придётся корректировать pts при помощи опции -fflags +genpts на выходе или фильтра pts.