Попробовал установить
этот пакет для ускорения, но посыпались ошибки, пока искал на них ответы проверил версию ноды, обновил её до 16.4.0 стабильная на данный момент и проблема решилась.
Теперь без использования этого пакета скорость сборки около 1 сек. пакет этот удалю.
Если у вас это не решит проблему, попробуйте этот пакет, только нужно будет решить проблемы которые будет выдавать.
Следите, чтобы у вас были последние стабильные версии node и npm.