Контакты
Местоположение
Россия, Москва и Московская обл.

Достижения

Все достижения (28)

Наибольший вклад в теги

Все теги (236)

Лучшие ответы пользователя

Все ответы (753)
  • Научиться парсингу - с чего начать?

    kawabanga
    @kawabanga
    Бью себя по рукам за каждый ответ на глупый вопрос
    1) Нужно иметь представление, как загружаются и работают сайты. Тут необходимо иметь представление и о том, что полезный контент может появится на сайте и после загрузки через определенное время.

    2) Нужно иметь представление, как работает самый обычный способ получения контента - Curl. Попробуйте скопировать что то, поработать, представить в xml документ и тд. Тут вы определитесь с принципом работы парсера.
    - парсер получает вводую информацию -> с учетом программы и вводных данных, парсер запрашивает определенные данные -> парсер обрабатывает данные для пользователя -> при необходимости, парсер повторяет запрос (инициированный пользователем или рекурсий) -> конец

    3) Далее вы дойдете до механизмов защиты от парсинга:
    - ограничение запросов на 1 ip, на один клиент и тд
    - подгузка информации после загрузки контента
    - дополнительный запрос на подгрузку контента с CSRF и другими способами
    - блокирование ip
    Это откроет вам парсеры типа PhantomJs, Научит пользоваться прокси, мимикрировать под популярные браузеры и тд.
    Так же вы дойдете до многопоточности работы парсера, и подумаете о переходе на C и подобный язык программирования. Общаясь с сайтом уже посредством api.

    А дальше, сталкиваяь с новыми проблемами, будете их решать.
    Ответ написан
    1 комментарий
  • Как сделать личный кабинет для сайта?

    kawabanga
    @kawabanga
    Бью себя по рукам за каждый ответ на глупый вопрос
    Найдите кто за вас сделает это за деньги. быстрее будет.
    Ответ написан
    Комментировать
  • Как поднять сайт в топ5 гугл?

    kawabanga
    @kawabanga
    Бью себя по рукам за каждый ответ на глупый вопрос
    1 способ) Заказать SEO продвижение у специалистов
    2 способ) Создать свой гугл с блэкджеком
    3 способ) Изучить самому SEO
    Ответ написан
    2 комментария
  • Система личных сообщений (шардинг)?

    kawabanga
    @kawabanga
    Бью себя по рукам за каждый ответ на глупый вопрос
    4 комментария
  • Делаете ли вы гимнастику для глаз?

    kawabanga
    @kawabanga
    Бью себя по рукам за каждый ответ на глупый вопрос
    Кому как,

    Если работаете при хорошем освещении, с хорошими мониторами - глаза реже устают.
    Но все равно, раз в час ухожу чай попить, в окошко поглядеть, отвлечься.

    Если в Помодоро системе работаю, то каждые 25 минут.
    Ответ написан
    4 комментария

Лучшие вопросы пользователя

Все вопросы (78)