Как вывести ролик из Kling на ТВ без пластиковой кожи

Kling AI и Luma Dream Machine обычно отдают 720p или 1080p, и на большом экране это видно сразу: лица мыльные, мелкие детали плывут, кожа блестит как воск. Обычный апскейл тут не спасает. Topaz Video AI доводит такой материал до 4K, если разделить работу между двумя моделями: Iris берёт лица, Proteus отвечает за всё остальное. Ниже пайплайн, который я бы собрал для сдачи на экран или ТВ.

Почему сырое видео из Kling и Luma мылится при апскейле

Диффузионные модели рисуют картинку из шума. Поэтому на микроуровне в кадре остаются плавающие пиксели, артефакты сжатия и нестабильные края. Растяните такой кадр в редакторе или добавьте шарпенинг, и дефекты станут заметнее: контуры жёсткие, кожа глянцевая.

У генераций из Kling, Luma или Runway беда одна и та же. Крупные объекты прорисованы хорошо, а на мелочах (ресницы, поры, ткань, надписи на фоне) получается каша. На плазме или светодиодном экране её видно с первого ряда. Отсюда и подход: кадр обрабатывают по частям, геометрию и фон отдельно, портреты отдельно.

Чем лучше стартовая генерация, тем меньше работы на апскейле. Про выбор инструментов для этого этапа есть материал Ролик для «Контур.Фокуса» на ИИ за три недели. Что взять.

Iris или Proteus: какую модель Topaz Video AI ставить на лица и на фон

Для генеративного видео в Topaz Video AI нужны две модели: Proteus (Fine-Tune Enhance) и Iris (Face Recovery & Enhancement). Одну на весь хронометраж ставить нельзя, лица и фоны требуют разных настроек.

– Proteus тянет общий апскейл. Шумоподавление, детализацию и сжатие вы выставляете вручную ползунками, например Revert Compression и Recover Details. Модель хорошо работает на архитектуре, пейзажах, графике, средних и дальних планах. Следите за ореолами на резких контрастах. – Iris занимается лицами. Она распознаёт черты, восстанавливает зрачки, текстуру кожи, зубы и волосы, так что на выходе остаётся живое лицо, а не мыльное пятно. Осторожно на дальних планах: там Iris дорисовывает лишние детали.

Лучший результат даёт связка. Либо два прохода по очереди, либо Iris на портретных планах и Proteus на остальных.

Пайплайн апскейла до 4K: пять шагов

Цель – чистая картинка 3840x2160 для сдачи заказчику или показа на экранах.

1. Берите исходник из Kling или Luma в максимальном битрейте и без двойной пересборки. Каждое лишнее пережатие приносит новые артефакты, и лечить их потом придётся вам.
2. Переключите Proteus из автоматического режима в Manual. Revert Compression убирает артефакты диффузного сжатия, Recover Details возвращает микротекстуры, Reduce Noise гасит цифровой шум нейросети, De-halo снимает белые ореолы вокруг контрастных объектов. Начните с низких значений, двигайте по одному ползунку и сверяйте результат и на лице, и на фоне.
3. Если в кадре актёр или спикер, включите Iris. Face Recovery держите в середине шкалы: взгляд и губы станут чётче. На максимуме модель начинает дорисовывать лишнее.
4. Экспортируйте мастер в кодек без межкадрового сжатия: ProRes 422 HQ или ProRes 4444 на macOS, DNxHR HQX на Windows. Сохраните в H.264 или H.265 уже здесь, и вся восстановленная детализация уйдёт.
5. Перенесите мастер в DaVinci Resolve или Final Cut Pro и наложите мягкое плёночное зерно. Стерильно чистый нейро-апскейл выглядит чужеродно, а зерно прячет остатки диффузного шума и возвращает кадру кино. Про одну из монтажных систем есть разбор В DaVinci Resolve 21.1.2 AI-поиск ускорили до 14 раз.

Зерно подбирайте на глаз, на том экране, где ролик будут показывать. Честно говоря, «в меру» на ноутбуке и «в меру» на светодиодной стене – две разные величины.

Что проверить перед сдачей на большой экран или ТВ

Прежде чем отдать ролик клиенту или отправить на эфирный сервер, пройдите по списку:

– Разрешение: 3840x2160 (4K UHD) или 4096x2160 (DCI 4K), смотря что требует площадка. – Кожа: лица не должны выглядеть полированным воском. Если выглядят, снизьте Sharpen и Face Recovery. – Мерцание: прокрутите быстрые движения и проверьте пальцы, мелкие решётки на фоне и логотипы. Деформации вылезают чаще всего там. – Кодеки: мастер для заказчика сдавайте в ProRes 422 HQ или DNxHR HQX, а для веба сделайте отдельный MP4 с высоким битрейтом.

Апскейл – только часть цепочки. Будет ли ролик держаться на большом экране, решают режиссура, монтаж и звук. Как это выглядит на практике, можно посмотреть в разделе AI-видеопродакшн Мити Амбарцумяна: там межпрограммный генеративный фильм «Окко. Спорт в цифрах» про падел и имиджевый тизер OREX для платформы земли в Дубае, который работает в продажах.