Dimonchik

аккаунт улетает в бан

задержку между запросами

новый аккаунт

проверяй отладку через Хром F12 Network

pytablereader не помог?

в прокси и логах

прокси, поди, не ротируются? еще и паблик

если ненужный всегда второй - удаляй второй
если нужный имеет одинаковый текст - ищи по куску текста

если они оба равноценны - ищи признак нужности или считай одинаковыми ))

Харон изучи

cookie JAR

Scrapy

для пыха встречал краулер лет 5 назад, наверно, и сейчас есть

DNS query for XXX failed: too many retries.

пропускай и переходи к следующему, можешь кеширующий сервер поставить с 8ю вверху общеизвестными мощными (гугл, CF, яндекс, хурррикан)

прокси в Селениуме, скажем так, не очень оригинальное решение
хуже только прокси в селениуме под своим аккаунтом ))

но с Гуглом работает )), конечно, не в лоб

wget берет свободно

пробуй без реферера и кривых заголовков

смоотри код страницы

sbfactory.ru/?p=600

потому что , братуха, AJAX запрос имеет другие хидеры

серверу пофиг, но ты пытаешься получить аякс неаяксовым клиентом - вот и 403

UID типа 4238019d-7e49-4fc9-91db-b6b951d5cf8e преврати в строку (кавычки) и попробуй как JSON

https://www.telerik.com/fiddler справишься?

смотришь что делает браузер и повторяешь то же самое курлом, кстати, тоже можно видеть фиддлером

как правило, в курле можно все всунуть в headers , но иногда всякие юзерагенты имеют отдельные настройки

Selenium юзай

там JS / metarefresh проверка, requests не справится

И еще один вопрос, как можно настроить в группе, бота что бы спамеры не могли свои ссылки постить?

....и чтобы два раза не вставать, третий тост - за дам! (с)

бот настраивается антиспамом: кикает / банит спамеров по факту, или когда акков много - по нику
можно самописом, можно всякими protectronbot (надо понимать, чтоони берут за бесплатность)

Scrapy