Как реализовать задачу “Надеть” вещи из каталога на фото клиента в нужной локации?

Question

[Andrey P]

Есть фото человека в определенной локации и заранее подготовленные фото вещей с нужным ракурсом и масштабом, в разных вариантах.
Что необходимо:
Надеть на клиента нужные вещи, фактически переодеть его соблюдая пропорции тела.

Расширить задачу до уровня "Надеть" на произвольного человека в произвольной локации вещи из каталога Интернет магазина, при этом фото можно подготовить в разных ракурсах и вариантах.

В какую сторону капать, какие инструменты использовать?

Comments

[Dmitry Bay]

А вы видели достойную реализацию это задачи в интернете?

[YepBro]

Нейропримерочная

Alibaba представила (https://point.md/ru/novosti/hi-tech/alibaba-razrab...) виртуальную примерочную Outfit Anyone. Сервис позволит загрузить своё фото и предметы одежды, после чего искусственный интеллект стартапа Hugging Face сгенерирует образ и сделает из него довольно реалистичную анимацию.

Прямо сейчас Hugging Face открыл демо. Пока что в него нельзя загружать изображения людей. Можно лишь выбрать одну из готовых моделей (сгенерированных ИИ, само собой) и добавить предметы одежды или загрузить образ целиком.

Это вроде пока максимум.

[CityCat4]

Dmitry Bay, У printio есть функция "показать на манекене", где только что скреаченная вещь будет "надета" на манекен и можно посмотреть на то, как она на нем сидит, хотя конечно это не совсем то.

[CityCat4]

YepBro, Господи, какие у них у всех жуткие лица, у этих моделей. По глазам, по этому совершенно безумному взгляду, который в жизни даже у полного имбецилла не увидишь - сразу определяется сетка...

Answer 1

[My1Name]

Теоретически это можно сделать, если клиент пришлёт фото на белом фоне (или подходящем под хромакей). По фото масштабируется тело и подбирается 3D модель, на которую натягивается фейс-текстура клиента и заранее подготовленная модель одежды... Далее всё это дело можно отобразить используя какой-нибудь движок, типа three.js или Unity 3D.

https://humanaigc.github.io/animate-anyone/

На практике всё гораздо сложнее. Потому что нужно не аниме или красивую картинку показывать (с помощью какой-то нейросети..), а реально то, как сидит та или иная вещь на теле клиента. Например, если капризная женщина купит таким образом красивое платье, которое в реальности будет выглядеть на ней как мешок, то она в лучшем случае вернёт товар, а в худшем - подаст в суд.

Comments

[My1Name]

Другие варианты:
DressX, ZERO10, META SPARK
https://vm.tiktok.com/ZSN3peoD5/