Нужно парсить цены конкурентов автоматические 3 раза в неделю. Товаров для парсинга достаточно много. В интернете посчитал про парсинга. Везде указывается адрес парсинга ручную.
Мне нужно чтобы по названию товара система сама искала его в сайтах (заранее может быть определены список сайтов), и автоматом проставила в список адресов парсинга.
1. Сопоставление
Ну вот у вас есть запись товара -- его артикул, название, бренд
Придумайте как с помощью этих данных сопоставить товар на конкретном сайте конкурента -- нужно проанализировать сайт конкурента и придумать это сопоставление, возможно не самое идеальное, придумайте как -- например через поиск, или через выгрузки
2. Записать ссылки на братьев
Нужно завести таблику, где будет указана связь товара и его братьев на определенных сайтах product_id, site_id, url_analog
3. Парсинг
Скорее всего также будет нужно под каждый сайт делать парсеры, полученные данные нужно будет сохранять и выводить уже где нужно. Сам парсинг будет происходить например по крону
все
Задача достаточно не тривиальная -- зависит от чистоты структуры и возможностей найти нужный вам товар на конкурентном сайте, сам парсинг не так уж и сложен
Сложный
Простой
