Можно ли сымитировать пользователя на сайте любой сложности?

Question

[Viktor Stilton]

Есть ли какие-то ограничения, которые могут не дать создать бота, работающего на каком-то сайте?
Знаю, что на некоторых сайтах можно эмитировать пользователя с помощью HTTP-запросов. Но ведь есть сайты, на которых такое уже не работает. Что применяют тогда?

Comments

[Олег]

А загуглить о способах защиты, а не обхода, вера не позволяет?
Сотни, если не тысячи ограничений можно поставить. Все описать?

[Viktor Stilton]

Олег, ну вот внизу написали способ обхода. Без ограничений. И смысл тогда от такого гуглинга? Чтоб бесполезный коммент написать?

[Ukrainskiy]

Виктор Потебенько, ну этому способу тоже можно противостоять, все зависит от того, какую потенциальную выгоду может получить атакующий и сколько вы готовы вложить ресурсов в защиту. Но могу сказать, что даже не все букмекерские конторы успешно справляются с ботами

[Олег]

Виктор Потебенько, Stltnium и подобное не панацея!

Answer 1

[Ukrainskiy]

Используют например эмуляторы браузеров, скрипт делает все тоже самое что и браузер, но только без GUI. Самый популярный инструмент для этого Selenium

Comments

[Михаил]

Точнее там можно использовать не эмулятор браузера ( такой как phantomJs), а полноценный браузер, такой как chrome headless. Для сайта разницы между скриптом и настоящим пользователем практически нет.