В шаблоне woocommerce.php
ЕСЛИ is_product() ИЛИ is_product_category() :
-подключаем get_sidebar() в правой колонке
и наоборот:
ЕСЛИ ! is_product() ИЛИ...
Либо, если в теме есть отдельные шаблоны для single-product и archive-product, меняем местоположение do_action( 'woocommerce_sidebar' ) как писали выше...