Как реализовать удаление снятого с продажи товара в агрегаторе?
Делаю товарный агрегатор, примерно на 100к-200к товаров. Проблема в том, чтобы наличие товара, оставалось актуальным, т.е. парсер собирает данные, выдает мне csv, я сравниваю с первоначальной базой, выбираю изменившиеся данные и загружаю изменения в базу. Но, если товар сняли с продажи? Парсер не соберет о нем данные, никаких изменений не будет загружено, он повиснет мертвым грузом.
Единственная вариант который пока вижу - полное обновление базы, после каждого сбора данных, но это, невозможная нагрузка на сервер. Идеи?