Проблема затрагивает не только Firefox, также и Google Chrome. И как раз Firefox мне и помог. Зашел на сайт где отображается неправильно буквы. Выделил этот фрагмент в режиме разрботчика (F12) и посмотрел какой он применил шрифт, оказалось, Lucida Grande.
Я решил так:
Установил Font Manager
Отключил Lucida Grande, затем сохранил настройки
Перезапустил программы