Как реализовать парсинг с Youtube только уникальных видео?

Question

[Ivan Petrov]

Задача такая: Нужно парсить видео с Youtube, скорее всего просто ссылки, записывать их в базу.
Затем при выводе записей на сайт ссылка просто подставляется в embed код.

Как можно парсить только уникальные видео? Если я хочу парсить и публиковать 10 видео в день по определенному ключевому слову, находить ведь будет одни и же видео, соответственно, видео, которые уже есть в базе, нужно пропускать.

Как это реализовать? Проверять каждую ссылку, искать её в базе? А если в базе 100 000 записей будет?

Answer 1

[Кирилл Жиляев]

Использовать API ютуба, либо регулярной парсить id, и перед добавлением смотреть на наличие в БД.

Answer 2

[Алексей]

Нормально все должно быть с 100000 записями, если ID видео будет отдельным столбцом с индексом по этому столбцу.