Как произвести авторизацию в пауке фреймворка Scrapy до Rules?

Question

[sc8di]

Каким образом возможно произвести авторизацию на сайте до rules в классе CrawlSpider?

Вызывать метод авторизации через callback не выходит.
Страниц для прохода должно быть около 30 при парсинге с авторизацией, а на выходе имею 15.

Answer 1

[drDemon]

Делается запрос на адрес авторизации с соответствующими параметрами
Например так:

def start_request():
    yield FormRequest(url=auth_url, callback=self.authorized, .... )