Нотан Ройамов

Никак.
Файл robots.txt лишь даёт роботам инструкции о том, стоит ли сканировать и индексировать конкретные URL-адреса или их наборы, при этом роботы могут их игнорировать и всё равно индексировать страницы, если на них не используется мета-тег Robots со значением noindex.

Явное указание Allow: / равносильно его отсутствию (по умолчанию подразумевается разрешение индексации всего сайта), поэтому и не пишут :)
Правильный robots.txt в Вашем случае будет таким:

User-agent: *
Disallow: /cabinet/
Disallow: /search/
Sitemap: https://site.com/sitemap.xml

Host - устаревшая директива (к тому же её надо указывать с https, если главное зеркало доступно по защищенному протоколу), остальное просто лишнее.

User-agent:*
Disallow: /catalog$
Allow: /catalog/*

Это похоже на запрет индексирования страниц пагинации (постраничной навигации), а не всех новостей. По идее ничего не нужно удалять, если Вы действительно хотите, чтобы страницы пагинации не индексировались. Гугл сам разрулит.