Grunt для таких вещей нужно очень мощное железо. У меня характеристики раза в 3 выше и всё равно медленно компилирует, придется скоро апгрейд только для этого делать. Попробуйте распараллелить задачи вот этим
https://github.com/sindresorhus/grunt-concurrent 
