Заменить фон на видео ии: что происходит под капотом
Раньше фон убирали хромакеем: снимали на зелёном, потом вычитали цвет по формуле. Метод работал идеально, пока зелёный не отражался на коже и волосах, и требовал площадки.
Сейчас работает сегментация. Модель на каждом кадре предсказывает маску: где человек, где всё остальное. Маска сглаживается между кадрами, иначе контур дёргался бы. Дальше фон либо заливается новым изображением, либо остаётся прозрачным.
Разница принципиальная. Хромакей знает цвет и не знает объект. Модель знает объект и не знает цвет. Поэтому она уверенно отделяет человека в комнате, но ошибается там, где объект и фон похожи по цвету и текстуре.
Нейросеть изменить фон на видео: три подхода
Первый, автоматическое вырезание. Инструмент находит главный объект и делает его прозрачным. Дальше подкладывается любой фон: цвет, картинка, другое видео.
Второй, замена по описанию. Здесь объект не вырезается: вы просите модель перерисовать всё, что находится позади него. Формулировка промпта задаёт новую локацию.
Третий, хромакей как страховка. Если съёмка изначально шла на зелёном, старый метод всё ещё точнее любой нейросети, особенно на волосах.
Выбор зависит от материала. Для готового ролика без зелёного остаются первые два. Для съёмки, которую можно организовать заранее, третий вариант дешевле по времени.
Что умеет Runway по документации
На сайте Runway есть отдельное приложение Change Backdrop. Оно меняет фон за объектом и, как указано на странице, зелёный экран не требует.
Условия из официального описания: загружается видео длиной до пяти секунд, фон описывается текстом, стоимость пятнадцать кредитов за секунду, приложение доступно на плане Standard и выше. В режиме Unlimited Explore оно работает без расхода кредитов.
Отдельно стоит знать про судьбу старого инструмента. Страница Remove Background в справке Runway теперь сообщает, что функция недоступна: модель Gen-3 Alpha отключена восьмого июля 2026 года, а Gen-3 Alpha Turbo тридцатого июля 2026 года. На её место предлагаются другие пути, включая Edit Studio на модели Aleph 2.0.
У Edit Studio свои ограничения, и они важнее, чем кажется. Видео должно быть от двух до тридцати секунд, от 480p до 1080p, от 24 до 30 кадров в секунду и содержать не больше десяти склеек. Ролик с одиннадцатью стыками просто не примут. Замена фона там делается через правку ключевого кадра и промпт, и для смены локации это удобнее, чем вырезание.
Для студий Runway отдельно описывает приём с чистой площадкой: видео превращается в зелёный материал или чистый фон без ротоскопирования, а дальше с ним работают как с обычным хромакеем.
Заменить фон на видео нейросеть онлайн: что делает CapCut
В CapCut та же операция живёт в двух режимах, и это стоит различать.
Первый режим, Auto removal. Он вырезает главный объект из обычного фона, хромакей не нужен. Путь по интерфейсу из официального описания: раздел Video, затем Remove BG, затем Auto removal.
Второй режим, Chroma key. Он рассчитан на съёмку с зелёным или синим фоном и работает по цвету.
После вырезания CapCut предлагает заменить фон цветом, картинкой или другим видео и посмотреть результат до экспорта. Для сложных краёв в описании упомянуты ручные кисти: ими подчищают контур там, где автомат промахнулся.
Где ломается
Ошибки предсказуемы, и их полезно знать заранее.
Волосы. Тонкие пряди на просвет это главный тест. Модель либо съедает их, либо оставляет полупрозрачную кайму, и на новом фоне она светится.
Руки и предметы. Пальцы, ручка, чашка: мелкая моторика даёт дрожащий контур и «прилипшие» куски фона.
Быстрое движение. На размазывании маска не успевает и появляется ореол.
Тени и контакт с полом. Модель вырезает человека, но не понимает, что тень принадлежит ему. В результате человек висит над новым фоном.
Совпадение цветов. Белая рубашка на белой стене, тёмная куртка в тёмном коридоре: граница теряется, и силуэт получает дыры.
Отражения и стекло. Зеркало, окно, очки: за объектом видно то, чего в новой сцене быть не должно.
Поменять фон на видео нейросеть: порядок работы
Порядок, который снижает число переделок.
Сначала выбрать кадр-эталон. Один кадр, где человек виден целиком и не размыт. По нему настраивается маска, остальные кадры идут за ним.
Потом проверить контур на паузе. Покадрово, без воспроизведения, на самом сложном участке: поворот головы, взмах руки.
Дальше подобрать фон по свету. Если человек снят с тёплым светом справа, холодная студия слева выдаст монтаж.
Потом вернуть тень. Проще нарисовать её вручную или взять готовый слой, чем оставлять парящего человека.
И в конце прогнать движение. Смотреть на стыки масок между кадрами: там появляется дрожание, которое на стоп-кадре не видно.
Заменить фон на видео нейросеть онлайн: чек-лист приёмки
Контур по волосам без светлой каймы.
- Пальцы не слиплись и не обрезаны.
- Тень под ногами есть и падает в ту же сторону, что свет.
- На быстром движении нет ореола.
- Цвет кожи не изменился после замены.
- Отражения не выдают старую локацию.
- Границы кадра не обрезают человека при смене соотношения сторон.
Когда замена фона не нужна
Иногда дешевле переснять, чем спасать кадр. Если в сцене много стекла, отражений и быстрых рук, замена фона съест больше времени, чем новая съёмка на зелёном.
Есть и другой путь: перерисовать саму сцену целиком. Тогда работает редактирование видео нейросетью, где модель меняет окружение вместе со светом и тенями.
Для потока коротких роликов замена фона становится рутиной, и её лучше ставить в процесс сразу: об этом имеет смысл смотреть материал про изготовление видео с помощью нейросетей, где подобные операции идут пакетом. А для кампаний в вертикали фон это половина смысла, поэтому полезно заранее понимать, как устроена вертикальная реклама. Там, где в кадре живой человек и важна каждая деталь, честнее работает съёмка, её закрывают ручные ролики.
