Sminex снял фильм без декораций: хромакей, 3D и ИИ

Девелопер Sminex сделал трёхминутный имиджевый фильм с актёрами и трёхмерной графикой. Всё сделали инхаус: две команды, ИИ-инструменты и много ручной работы. Для производства видеороликов этот кейс интересен тем, что вопрос «нейронки или съёмка?» там решили третьим способом. Актёров сняли на хромакее, миры построили в 3D, а нейросети отдали узкие задачи. Сколько всё это стоило, в материале не сказано, поэтому про экономию я гадать не буду. Зато процесс описан подробно, и из него можно кое-что взять.

Производство видеороликов без павильона: хромакей и 3D

Основа проекта – съёмка на хромакее. Ради живых эмоций команда отсмотрела 350 кандидатов и взяла 24 актёров. Декораций не строили, но операторы заранее рассчитали геометрию кадра и выставили под неё свет. Без этого зелёный фон превращается в долгую боль на композе.

Дальше за дело взялась инхаус-студия 3D-графики. Она перестроила привычный пайплайн на 3ds Max и Corona Renderer, чтобы вставить живое видео в трёхмерные сцены:

1. Восстановление движения. В 3DEqualizer сделали матчмув и воссоздали траекторию реальной камеры. Её импортировали в 3ds Max, и виртуальное окружение стало двигаться синхронно с объективом.
2. Интеграция и кеинг. Зелёный фон убрали, а финальные кадры собрали в NukeX из десятков слоёв. Плоскости трекали в Boris FX Mocha, а волосы ротоскопили через Roto Brush в After Effects – этот ИИ-инструмент сам ведёт маску по кадрам.
3. Сложные симуляции. Водопад сделали в Chaos Phoenix, облака в EmberGen, осколки и мебель через tyFlow в 3ds Max, растения в GrowFX.

Павильоны и выезды на локации не понадобились.

Где нейросеть споткнулась и что дорисовали руками

Нейросети в проекте работали помощниками, и команда довольно быстро нашла их потолок. Таких мест два.

Первое – крупный план с физикой. По сценарию в кадре растут цветы, и генерация с этим не справилась: картинка плыла. Анимацию собрали вручную в 3ds Max через Morpher Modifier.

Второе – точный контроль кадра. Когда надо сохранить детали бренда, геометрию объектов и жёстко держать камеру, генеративные модели не тянут. Тут решает ручной 3D. Для брендового заказа это критично: клиент заметит чужой логотип или поплывшую упаковку раньше, чем оценит красоту света.

Свои инструменты, чтобы пайплайн не рвался

Готового софта на стыках не хватало, и разработчики написали два решения.

Первое – конвертер из CXR (родной формат Corona Renderer) в EXR (OpenEXR). Рендеры теперь приходят в Nuke со всеми слоями и без потери качества. Второе – скрипт Light Controller. При правках крутить десятки источников света вручную было нереально, и скрипт привязал их к одному контроллеру. Одна ручка – вся сцена.

Мне это нравится больше всего. Именно такие мелочи, а не громкая генерация, решают, успеете ли вы к дедлайну после третьего круга правок.

Что взять из кейса на ближайший проект

• Разложите сценарий по сценам и для каждой решите, что это будет: актёр на хромакее, 3D или генерация. Сцены с логотипом, продуктом и жёсткой камерой сразу отдавайте в 3D.
• До съёмки соберите оператора и 3D-студию и сверьте геометрию кадра и свет. Пусть оба скажут вслух, кто что считает.
• Попросите подрядчика сгенерировать самую сложную сцену до старта. Если картинка плывёт на тесте, на площадке лучше не станет.
• Спросите, в каком формате рендеры приходят в композ и со всеми ли слоями. Узнайте заодно, кто будет править свет на третьем круге и чем.

Такое распределение сцен упирается в команду, которая умеет считать, где нейросеть сэкономит время, а где съест его. Как выстроить этот разбор внутри студии или агентства, собрано на странице AI-консалтинг и обучение команд.