Минуточку. Вот говоришь "верстаю адаптивно, почти пиксель в пиксель" - пиксель в пиксель с чем?
Если есть ноутбучный, паншетный, телефонный макеты и с ними все совпадает - какие вопросы?
Если дополнительных макетов нет - строго говоря, это не проблема верстальщика, это проблема дизайнера. Чистый верстальщик не должен придумывать адаптивность, он её только реализовывает.
Ну а если говорить чисто технически - да, размер шрифта адаптируется тоже. Можно по формуле через calc(в соседнем ответе ссылку дали), можно просто как набор из 4-5 статически заданных размеров через медиа-запросы. Оба подхода имеют свои плюсы и минусы.