Существует ли модель, обратная Stable Diffusion?

Question

[Никита Каргин]

Stable Diffusion создает картинки по текстовому описанию. А существует ли модель, создающая текстовое описание картинки.
Было бы круто, если бы при скармливании этого описания Stable Diffusion, она бы генерировала +- похожий результат

Answer 1

[rPman]

https://github.com/mlfoundations/open_clip
https://huggingface.co/laion/CLIP-ViT-H-14-laion2B...

лучше гуглить сразу CLIP image classification, тьма моделей начиная с openai, разбираться долго

p.s. еще про анализ объектов на изображении лучше начни копать от сюда или лучше segment-anything фейсбук много чего выкладывает

Answer 2

[Василий Банников]

Да, есть.
https://imagetoprompt.com/