Не вините себя. У вас объективно очень много времени уходит на дорогу.
Совершенно серьёзно думаю, что в такой ситуации надо попробовать поговорить с руководителем на предмет хотя бы частичной (пару раз в неделю) удалённой работы. А лучше попробовать вообще выпросить удалённый режим.
Если нет – пробовать искать другую работу (поближе к дому или удалённую).
Ну, действительно, по пять часов в день на дорогу – это не дело.