не видя логов контейнера, вывода docker ps и т.п. , не видя как вы там что собираете и т.п. - трудно определить что именно не так.
Но! Основываясь на своих впечатлениях , я бы ставил на кривизну платформы - Docker for Windows , это странный докер, с которым может быть что угодно.
У меня нет под рукой компа с Windows и с докером, но на моем обычном маке, все это тестовое задание собралось и взлетело за несколько минут. Проверяйте логи, проверяйте какие порты забиндились в системе после старта контейнера, если есть какой то firewall - выключите его .
добавил скриншот