В общем не знаю что это было, решил так.
- Откатил настройки восстановлением бекапа двухмесячной давности, при этом он сделал полный сброс перезагрузку и восстановление конфигурации.
- Добавил недостающих правил (которые появились за эти два месяца)
- Запретил доступ локальной сети по UDP портам во внешку (если понадобится в будущем, то выборочно по портам открою). Для VoIP адресов (базы Panasonic) доступ к UPD во внешку без ограничений оставил.
Все. В логах ошибок нет, интерфейсы (порты) не падают. Вторые сутки под нагрузкой работает стабильно.