Существует ли CMS для поиска «лучшей цены» по 7 интернет-магазинам?

Question

[sheber]

Здравствуйте
Исккал в сети движок для сервиса определения лучшей цены среди нескольких интернет-магазинов и пока не нашел или может такие сервисы не так делаются? Я пока в этих вопросах особо не сведущ, так что мог вопрос совсем не правильно задать.
Количество товаров в этих интернет-магазинах в общей сложности дойдет до 1000000 шт. Можно даже сделать так чтобы сервис не грузил себе весь список товаров к себе с интернет-магазинов, а делал одновременный поиск по ним и выдавал лучшую цену по ним.

Answer 1

[Dmitriy Ronzhin]

Не найдете вы такую cms. Тут под каждый магазин нужно будет парсеры писать или договариваться с ними о выгрузке, а это достаточно трудоемкая задача.

Comments

[sheber]

А они могут запретить парсить или как-то ограничить?

[Dmitriy Ronzhin]

Конечно могут. Попробуй сейчас спарсить, к примеру яндекс маркет. Сразу нечего не получится, нужно наличие js у парсера и эмуляция поведения пользователя. Но обойти всегда все можно, главное - это цена, которая будет при этом затрачена.

Answer 2

[xmoonlight]

CMS - это content managment system или система управления контентом/содержимым.
Поиск информации со сторонних сайтов - это несколько модулей:
1. Crawler - кто закачивает страницы
2. Parser - кто ищет нужные данные на странице
3. Scrapper - кто выполняет индексацию и сравнение новых данных со старыми.
4. API - то, что позволяет Вам искать по результатам в базе и делать какие-либо операции.

Вот все эти модули - нужно кодировать.
Это сложная работа, требующая 1,5-2 мес трудозатрат.
Готовых решений под это (на данный момент) - нет.