Нейросеть, которая по ссылке из ютуба смотрит видео и отвечает на вопросы по нему?

Question

[Noder SS]

Недавно видел видео с нейросетью, которая принимает ссылку из ютуба и может отвечать на вопросы по нему. Не подскажите, как называется?

Answer 1

[rPman]

Не существует (публично) ИИ, работающего с видео, но говорят что следующий ИИ обучать будет именно на них.

Это значит единственное что можно сделать, это взять субтитры, в т.ч. автосгенерированные, скормить их уже существующим текстовым языковым моделями например от openai, и придумать промпты, с помощью которых можно что то вытянуть из этого.

Если нужен хардкор, то можно брать видео, разбирать по кадрам и скармливать существующим алгоритмам типа SAM, но не уверен что можно полученный поток данных с пользой распознать.

Comments

[Noder SS]

Спасибо!

Answer 2

[Noder SS]

Нашел https://skipit.ai/

Answer 3

[Александр Скуснов]

У меня Мерлин каждый раз предлагает сделать краткое содержание ролика. (один раз согласился, действительно делает, но дальше ему вопросы не задавал)

Answer 4

[Arocket]

вот такая есть unstuckstudy.com