Здравствуйте, в связи с отсутвивем времени на изучение тонкостей scrapy хотел бы спросить у знающих людей
Подойдет ли Scrapy если
1)Мне надо симитировать работу браузера, по аналогии с phantomjs, есть ли там такое же?
2)Нужно скачать сотни тысяч урлов и сделать это паралельно с разными ip и как можно быстрее
В крайнем случае можно PyPy использовать - ДАЖЕ в случае с Scrapy(она Network-bound) я получал 25% прироста по скорости благодаря ускорению парсинга html
