Потери будут выглядеть так:
Потери = Значение функции среднекв. ошибки + L1 * a + L2 * b , где a, b - гиперпараметры, которые будут указывать, насколько сильно мы будем штрафовать модель за большие веса.
Дальше просто от этого берем градиент от полученного выражения и меняем веса.