Как в Битрикс реализовать AI поиск по фото?

Question

[junior_www]

Добрый день!
Необходимо реализовать поиск по фото с помощью нейросетей. В настоящее время все поля у товаров заполняют менеджеры (например: цвет - красный, рисунок - абстракция и тд).
Задача автоматизировать этот процесс.
Можете подсказать в сторону какой сети копать? Может кто сталкивался с похожей задачей?

Comments

[U235U235]

А кто будет ответственен за ошибки нейросети? А они будут.

[junior_www]

U235U235, хороший вопрос. Пока вижу так: менеджеры будут контролировать свои категории, проверять, если что заметили, либо исправили, либо написали программисту

Answer 1

[rPman]

Задача получения текстового описания по картинке CLIP (что то типа обратная stable diffusion):

https://github.com/mlfoundations/open_clip
https://huggingface.co/laion/CLIP-ViT-H-14-laion2B...

гуглить сразу CLIP image classification, тьма моделей начиная с openai, разбираться долго

p.s. еще про анализ объектов на изображении начни копать от сюда или лучше segment-anything фейсбук много чего выкладывает

Соответственно после запилить интерфейс и интеграцию в битрикс

Comments

[junior_www]

rPman, спасибо большое. Тут мне сложно правильно сформулировать вопрос. Благодарю

Answer 2

[Алекс Глебов]

Можно интегрироваться с этим сервисом https://mcs.mail.ru/vision/

Answer 3

[Yappy1]

Я реализовал модуль для поиска товаров по фото в битрикс, более подробно на сайте https://фотопоиск.рф
Первые 2 недели бесплатно