fman2: нет защиты от парсинга.
любая "защита" будет мешать поисковым роботам ходить по сайту,
тот же дром, к примеру, парсить себя разрешает полностью. защищает только телефонные номера в объявлениях:
после запроса каждого 10го телефона с одного ip просит ввести капчу. Но и такую защиту обойти очень дешево. Значительно дешевле, чем стоило ее внедрение.
Алексей Тен: действительно, проблема оказалась на стороне хостера - что-то с сетевой инфраструктурой они у себя поменяли не так. Написал им, исправили.
Алексей Тен:
спасибо за совет, но сервер с этим адресом это и есть эта машина.
>браузер соединяется с сервером по адресу 94.247.58.125
браузер соединяется с сайтом по адресу am49.ru
затем сервер начинает редиректить этот же запрос к себе же, но уже не по домену, а по ip адресу
понятно, что смотреть нужно на сервере с таким адресом. непонятно, где именно.
Алексей Романенко:
>должен попадать любой запрос
понимаю, почему не вижу, пытаюсь разобраться
выставил дебаг сейчас только для своего ip, смотрю все логи
Алексей Тен: для тестов оставлял только один сервер, все остальное удалял.
По идее
listen 80 default_server;
должно перекидывать все, что не указано, на этот сервер?
любая "защита" будет мешать поисковым роботам ходить по сайту,
тот же дром, к примеру, парсить себя разрешает полностью. защищает только телефонные номера в объявлениях:
после запроса каждого 10го телефона с одного ip просит ввести капчу. Но и такую защиту обойти очень дешево. Значительно дешевле, чем стоило ее внедрение.