У меня в Gulp подключен плагин
bower-main-files (он и для grunt) - с помощью него я копирую к себе в проект только нужные файлы. Синтаксис грунта не знаю, конкретней не подскажу, но там есть пример.
Что я делаю: копирую библиотеки с bower_components, минифицирую и кладу в /public
JS в /js/vendor
CSS в /css
Шрифты в /fonts