Как определить useragent, заведомо принадлежащий ботам и т.п. (не реальным посетителям)?
Если ли какой либо список или набор правил, по которым можно определить useragent, принадлежащий реальным посетителям?
Цель: отделить все запросы, приходящие от ботов (в том числе поисковых систем) и прочего мусора от запросов, приходящих от реальных посетителей через браузер.
