Воспользуйтесь функцией условного форматирования Excel.
Выделите столбец с датами, далее: Главная - Стили - Условное форматирование - Правила выделения ячеек - Меньше... , указываете сегодняшнюю дату.
В итоге, все даты меньше текущей (просроченные) будут выделены.
В дальнейшем, алгоритм можно улучшить - поставить ссылку на ячейку с текущей датой и не потребуется каждый раз вбивать текущую дату.