Привет, что я бы сделал:
1) обязательно ЧПУ поставить, то есть у вас сейчас идет url
https://programmatron.com/viewforum.php?f=3
а нужно как на том же киберфоруме, который заср..л половину поисковой выдачи, у него все четко по структуре url -
https://www.cyberforum.ru/cpp-beginners/thread1260...
каждая тема, каждый пост - отдельная страница html, понятная по структуре урлов поисковику, а не ?f=3
делайте точно также.
2) в яндексе кстати индексируется:
https://yandex.by/search/?text=site%3Ahttps%3A%2F%...
значит надо покопать google поглубже.
зайдите и посмотрите в панели вебмастера гугл - какая там карта сайта добавлена.
должна быть карта в виде sitemap.xml - и список url с индексацией каждый день.
если карты нет, то это плохо.
как ее формировать - не подскажу, это скорее задача конкретного программиста под конкретный форумный движок. Но phpbb популярный форум, наверняка должны быть готовые решения.
3) выбросьте из robots.txt
Disallow: /viewtopic.php*p=*
Disallow: /viewtopic.php?t=*
правила блокируют такие url, например, как
https://programmatron.com/viewtopic.php?p=161#p161 или
https://programmatron.com/viewtopic.php?f=3&t=18
гуглу пофик обычно роботс, но всё равно я бы вообще в роботс оставил только правила фильтрации откровенного мусора, а не /includes /cache или страницы постов. Обычно их не нужно исключать,
После переделки ЧПУ они будут неактуальны, но лишний раз убедитесь, что в роботе ничего не запрещается к индексации.
И ждать несколько дней.
Средний
