Вы меня, конечно, извините, что я со своим уставом в чужой монастырь, но зачем с этим бороться? Эту фичу включают именно люди, которые нуждаются в такой функциональности. Ну там всякие слабовидящие, например. Для них огорчение от того, что «ломается весь дизайн», абсолютно ничтожно по сравнению с тем, что надписи и кнопки хорошо заметны при их нарушениях зрения.
Более того, я практически уверен, что даже если вы умудритесь найти способ сломать эту встроенную функциональность, то Apple не пропустит ваше приложение в стор.
Не заморачивайтесь попытками изменить стандартное поведение интерфейса. Эта опция не включена по умолчанию — ей пользуются те, кто включил её осмысленно, и они не хотят, чтобы в каком-либо приложении она внезапно переставала работать.