Почему MidJourney и другие ИИ изменяют мою исходную картинку?

Question

[Дмитрий]

Здравствуйте! Такая проблема.

Использую MidJourney для генерации картинки. Я взял рендер мебели (без фона и прочего шлака). Добавил в MidJourney как основную картинку. Попросил в окне промта, чтобы он не изменяя картинку мебели вставил ее органично в пейзаж с закатом. MidJourney сделал, но сильно исказил мебель.

Что я не так сделал? Или MidJourney все время будет искажать исходную картинку? Может быть надо как-то промт по-другому писать? Или пользоваться другой нейросетью?

Comments

[Ronaldo]

Есть картинка с альфой? Попробую её вставить в SDXL/Flux с маской или ControlNet.

[Дмитрий]

MidJourney для этого не предназначен, он только генерирует. Максимум может за стиль взять существующую картинку.

Лучше Adobe Firefly или DALL-E использовать для genfill.
Stable Diffusion c ControlNet ещё можно заюзать.
Krea AI вроде как умеет тоже такое.

[Дмитрий]

Дмитрий, То что вы перечислили - это нейронки?

[Дмитрий]

Дмитрий, Использую https://gen-api.ru/ - этот сайт посредник для пользования нейросетями. Посмотрел там DALL-E и Stable Diffusion. Что-то не нахожу я поля, где можно вставить свое изображение. Только промт.

[rPman]

Дмитрий, image to image вкладка у stable diffusion ui

там можно добавить маску (обвести вручную объект) и указать что бы менял только его (+несколько пикселов) или наоборот не менять только его.

Answer 1

[Валерий Ковальский]

Для получения контролируемой генерации с сохранением исходного изображения нужно искать специальные сервисы, которые поддерживают такой режим работы.

Например, можно использовать Stable Diffusion с интерфейсом Automatic1111 ( но там высокий порог вхождения для разработки, где есть режим img2img)

Этот режим нужно специально выбрать, и он позволяет тонко настраивать параметры генерации для получения нужного результата.
Обычные генеративные модели вроде MidJourney действительно будут изменять исходное изображение достаточно сильно они нацелены на креатив

Для вашей задачи лучше подойдут инструменты для создания коллажей или специальные режимы img2img (лучше искать что-то по ключевым словам inpant) с высоким уровнем сохранения деталей исходного изображения.

Это позволит органично вписать вашу мебель в новый фон без нежелательных искажений

Answer 2

[Евгений Орлов]

В такой постановке, пока что ни одна сетка не может выполнить эту задачу
Здесь нужно применять другие подходы, при которых контроль над изображением гораздо больше, чем просто управление через промпт
Например, можно применить подход inpaint - в нем генерация происходит только для отдельных элементов изображения, а не генерится заново все изображение

Answer 3

[Василий Банников]

Будет искажать всегда.
Если нужно не искажая - тогда надо дорисовывать окружение вокруг мебели, но вряд ли оно похоже на нужный пейзаж

Answer 4

[Виктор Петров]

Если у вас есть рендер - вам нужен коллаж, а не генеративки. Попробуйте последние версии "Фотошоп", он умеет делать это очень просто с использованием нейросетевых алгоритмов.
В конце концов, сгенерировать нужный фон и вписать в него ваш рендер может любой человек, владеющий "Фотошопом" на базовом уровне, тут "Миджорни" не нужна. 5-10 минут занимает такая работа для человека.

Answer 5

[Yuli_Vid]

Вот здесь попробуйте https://t.me/SoraMidjourneySunoBot . Он не изменяет картинку, если это не требуется.