Самый простой вариант скопировать файл из ../plugins/woocommerce/templates/taxonomy-product_cat.php в папку вашей темы, предварительно создав в ней папку woocmmerce.
И переименовать его в taxonomy-product_cat-ЯрлыкКатегории.php.
Т.е. если ярлык категории motor-oil, название файла будет taxonomy-product_cat-motor-oil.php. И так для каждой категории сделать свой файл шаблона.
