HDD очень сильно влияет на сборку проекта. Если мы говорим про Xcode. Во время сборки, происходит чтение файлов, компиляция в объектные файлы, которые записываются на диск. В macboock air, у ssd скорость чтения записи 730 мб/с, а у mac-mini около 100 мб/с. Вот и посчитайте, на сколько медленнее может собираться ваш проект. А если, при этом у вас открыта куча других программ, которые висят в памяти, то будет использоваться swap (аналог виндовой подкачки, это когда жесткий диск используется как оперативная память), что может замедлить не только запись объектных файлов, но и компиляцию.
С выходом 9 xcode, введут инкрементальную сборку (собираться заново будут только изменённые файлы), может тогда вам не сильно больно будет собирать проекты. А вообще рекомендую ssd купить.