Вообще такая схема описанная Вами идет из коробки.
В случае, если вы изменили настройки:
1) В административной части переходите WooCommerce -> Товары -> Отображение
2) Указываете - На странице магазина -> Показывать категории & подкатегории (не знаю почему такой перевод, но отображает только категорию, как Вам и надо)
3) Указываете - На странице категории - Показывать оба варианта
4) Сохранить изменения