Что выбрать для парсинга страницы? Go или NodeJs?

Question

[alex_belouss]

Стоит такая задача: скрипту необходимо в определенный промежуток времени заходить на страницу, делать логин, оставить запись и делать логоут. По другому говоря, нужно делать так, как будто человек заходит на страницу и совершает действия.

в PHP достигается это с помощью CURL, но почему то, когда страница со скриптом запускается, PHP не успевает обработать все задачи. И сейчас думаю изучить NodeJS или Go для этого дела. Что вы посоветуете?

Comments

[Александр Павлюк]

Может вам лучше подойдёт PhantomJS? Это полноценная эмуляция браузера, а не просто http запросы.

[4iloveg]

Может лимит времени стоит повысить что бы php успевало обработать?

Answer 1

[nofuture trustnoone]

Кек, курлом иммитировать поведение в браузере?)
Тут пофиг что на бекенде, если есть библиотеки для работы с браузером или по типу фантом джс, который выше упомянули - то пишите на том языке.

В подобной штуке я юзал selenium через хром драйвер.
Если вам нужно это запускать на сервере, то такой варик не подойдет, и нужен или headless chrome библиотека или опять же фантом джс

Answer 2

[RidgeA]

я бы phantomjs.org посоветовал

Answer 3

[zooks]

Ноду, либо Пайтон.

Answer 4

[Dimonchik]

Scrapy

или

Selenium + PhantomJS