Имеет ли смысл менять batch_size при дообучении?

Question

[Дима Zero]

Заметил такую особенность: если я установлю batch_size, скажем, 32 и обучу модель, то при дообучении, если я поменяю batch_size, скажем, на 16, то модель немного откатится назад. Вопрос такой: имеет ли смысл менять batch_size при каждом дообучении?