Замена персонажей с помощью ИИ: Оригинальные музы, а не замена лиц с Idoli

Введение

Поиск замены персонажа на изображении обычно означает подстановку: удалить человека из кадра, поставить другого, сохранить комнату. Эта задача старше генеративных моделей. Журналы делали это с помощью скальпелей и воздушных кистей. Кино делало это с помощью матов. Столничные программы делали это с помощью слоев. Такое желание не появилось с появлением ИИ. ИИ лишь снизил стоимость скрытия швов.

Сейчас под одной фразой скрываются две разные задачи. Первая — размещение оригинального персонажа в новой сцене или с новым видом — одежда, освещение, погода — при этом лицо остается тем, которое вы разработали. Вторая — взятие фотографии реального человека и наложение на его череп другой личности. Первая — это создание персонажа. Вторая — это замена лица. Idoli разработан для решения первой задачи и не будет выполнять вторую.

Как раньше работала замена

Традиционная замена фигуры была задачей на совпадение, а не волшебной кнопкой. Кто-то вырезал объект из фона — сначала с помощью физических масок, позже с помощью цифровых выделений. Входящая фигура должна была унаследовать параметры комнаты: направление света, цветовая температура, зернистость, фокус, жесткость тени на полу. Волосы и воротник были теми местами, где выглядело обман. Если шея не принадлежала тому же телу, фотография ломалась.

Этот прием имел достаточно разумное применение. Команды каталогов включали одну музу в несколько наборов, не отправляя ее в каждый местоположение. Редакционные команды создавали составное изображение, когда две сессии не могли проходить на одной сцене. Человек на фотографии по-прежнему, в принципе, был тем, кто был сфотографирован — или иллюстрированным заместителем — а не украденной личностью, одетой в чужую кожу.

Замена лица стала более резким поворотом. Когда программное обеспечение стало способно обнаруживать глаза, рот и челюсть как сетку, оно могло искажать одну личность, адаптируя ее под другую позу. Позже модели перестали искажать пиксели и начали кодировать лицо как набор характеристик, а затем декодировать этот набор на другую голову. Шов стал лучше. Проблема согласия стала хуже. Инструмент, который может заставить незнакомца носить ваше лицо или заставить вас носить лицо знаменитости, больше не создает составной каталог. Он берет чью-то личность в пользование.

Генеративные системы сломали обе истории в один запрос: вписать фигуру, переработать стиль комнаты или отобразить личность. Вот почему поиск кажется новым. Основное разделение отсутствует. Замена сцены вокруг персонажа — это одно искусство. Замена живого лица — другое.

Технология без рецепта

Внутри старой конвейера было три слоя. Изоляция: определить, какие пиксели относятся к человеку. Выравнивание: разместить новую фигуру там, где стояла старая, в правильном масштабе. Интеграция: согласовать свет, контуры и зернистость так, чтобы вырезание исчезло. Ничего из этого не требовало кражи биографии. Это требовало терпения и образца того, как освещалась комната.

Отображение личности добавило четвертый слой: рассматривать лицо как данные, которые могут перемещаться. Обозначения указывали, где находятся черты лица. Позже сети определили, что представляют собой эти черты — особую конфигурацию, которая делает одного человека узнаваемым на другом фото. Это мощно для фиксации музы, которую вы создали. Это оскорбительно, когда источником является реальный человек, который не сидел за фото, которое вы собираетесь опубликовать.

Idoli использует полезную половину этой истории. Многоразовые персонажи и ссылки с 3 ракурсов существуют для того, чтобы костная структура оставалась неизменной при изменении гардероба и обстановки. Технология существует для того, чтобы сохранить согласованность разработанного человека — сначала на статичном изображении, затем в коротком клипе — а не для того, чтобы сдернуть лицо у незнакомца и надеть его.

Кинематографический портрет оригинальной молодой женщины, редакционное ключевое освещение, естественная кожа, зафиксированная личность, новый гардероб и комната вокруг нее, нет второго лица, нет сходства с знаменитостью

Граница, которую сохраняет Idoli

Idoli не заменяет лица реальных людей. Ни как забаву. Ни как ползунок «попробуй свое фото». Ни как способ надеть на знаменитость, одноклассника или несогласную незнакомку образ, с которым они не согласились. Если задача работает только потому, что зрителю узнается живой человек, не являющийся автором персонажа, это выходит за рамки продукта.

Принцип достаточно простой, чтобы сформулировать его в одном предложении. Вы можете создать оригинальную музу и переместить ее через различные сцены. Вы не можете загружать реальное лицо, чтобы заменить другим телом или заменить реальное тело другим лицом. Замена персонажа здесь означает, что персонаж принадлежит вам. Замена лица живого человека — это функция, которой мы не дадим более приятное название.

Это та же линия согласия, что и в остальной части студии: оригинальные персонажи, никаких клонированных актеров, никакого несогласного снятия одежды на фотографии. Замена разрешена как художественное руководство — свет, одежда, обстановка — а не как кража личности.

Практические применения

Честная версия замены все еще является значительной работой, стоящей того, чтобы ее делать. Закрепленная муза в новом интерьере. То же самое лицо на дневном свете, затем в неоне, не превращаясь в другого массового актера. Мода-тесты, где человек остается определенным, а гардероб меняется. Листы персонажей для истории, которая нуждается в одной женщине на крыше, затем во дворе, затем в движении.

Тот же зафиксированный оригинальный персонаж, медленное изменение обстановки с тихого интерьера на вечернее светлое свечение в окне, постоянная одежда, неизменное лицо, естественные движения, отсутствие текста на экране, отсутствие сходства с другими людьми

Эти фотографии публикуются. Замененное реальное лицо не становится чище только потому, что освещение хорошее. Тест тот же, что мы используем для трейлеров и костюмов: если вам приходится скрывать, от кого взяты пиксели, вы находитесь в неправильной студии.

Как Idoli улучшает опыт

Idoli — это студия создания персонажей, к которым вы можете вернуться. Зафиксируйте музу с помощью трех угловых референсов, чтобы челюсть не смещалась при изменении комнаты. Сделайте статичную фотографию в виде портрета. Переведите ее в короткий кинематографический клип, если сцена нуждается в атмосфере. Шаблоны могут начать рецепт освещения или одежды. Создать — это место, где человек остается оригиналом — а не картой, наложенной на фотографию другого человека.

Это лучший опыт, чем заменяющая игрушка. Вы не пытаетесь победить в конкурсе «до-и-после». Вы пытаетесь стать владельцем лица, которое никогда не было взято у незнакомца.

Заключение

Замена персонажа на изображении — это долгий ремесло: вырезание, сопоставление, смешивание — и, позже, нанесение лица. Первая половина все еще может быть искусством. Вторая половина, примененная к реальным людям, — это грань, которую мы не пересекаем. Используйте Idoli, чтобы сохранить постоянство оригинальной музы в разных сценах. Оставьте живые лица там, где они принадлежат: у людей, которые их имеют.