Actualmente en WooCommerce, el botón «Seguir Comprando» o «Volver a la Tienda» se muestra solo cuando el carrito está vacío, con este snippet en el functions.php de tu tema podrás mostrar ese botón en el carrito cuando este tenga productos.
<?php
//add back to store button after cart
add_action('woocommerce_cart_coupon', 'themeprefix_back_to_store');
function themeprefix_back_to_store() { ?>
<a class="button wc-backward" href="<?php echo get_permalink( wc_get_page_id( 'shop' ) ); ?>"><?php _e( 'Seguir comprando', 'woocommerce' ) ?></a>
<?php
}
Fuente: https://wpbeaches.com/add-continue-shopping-button-woo-commerce-cart-page/