Beeble SwitchX 3.0 меняет фон по четырём референсам
Beeble выпустила SwitchX 3.0 – новую версию модели видео-в-видео. Она принимает до четырёх референсных картинок, точнее держит камеру и лучше слушается промпта. Нейросеть для видео меняет окружение в уже отснятом материале, а актёр остаётся в кадре. Продюсеру это повод заново посчитать, что выходит дешевле: кеинг, композитинг и 3D-графика или такая замена фона.
Четыре референса вместо одной картинки и длинного промпта
Главное в версии 3.0 – до четырёх изображений за один заход. Раньше приходилось брать один кадр или направлять генерацию текстом. Теперь можно загрузить общий план площадки, крупный кадр ключевого реквизита, карточку со стилем и раскадровку сцены. Моделька собирает всё это в цельное пространство.
Вторая фишка – динамические фоны. В прошлых версиях окружение нередко выглядело статичным задником. В 3.0 фон живёт вместе со сценой: в кадр можно добавить снегопад, огонь или взрывы. Технология Source-Locked Rendering ведёт актёра в альфа-маске кадр за кадром и сохраняет его движения и мимику. Свет на персонаже пересчитывается под новые источники на заднем плане.
Что нейросеть для видео делает с трекингом камеры
Сложный трекинг всегда мучил VFX-отделы: матчмув, зачистка маркеров, ручная доводка. В SwitchX 3.0 лучше отрабатывают панорамирование, съёмка с рук и орбитальные пролёты камеры. Сгенерированный фон держит координатную сетку сцены, будто декорация стояла на площадке во время съёмки. Как это поведёт себя на самых кривых шотах вашего проекта, я не знаю. Это проверяется только на своём материале.
Ещё разработчики доработали контроль промптом. Продюсер или режиссёр может прописать хронологию сцены по шагам: где появляются динамические элементы, как двигается свет, в какой момент меняется атмосфера. Это ближе к обычной режиссуре, и случайности в генерациях меньше.
Лимит в 15 секунд и тарифы
Модель построена на базе MiniMax H3.0 и дообучена на собственных данных Beeble. На выходе – видео до 4K с 10-битным цветом. Исходное количество кадров и соотношение сторон сохраняются.
Один отрезок в версии 3.0 ограничен 360 кадрами. Это 15 секунд при 24 кадрах в секунду. В SwitchX 2.0 лимит был 480 кадров, то есть 20 секунд. Разработчики объясняют сокращение детализацией и более чётким удержанием объектов. Я бы сразу закладывал это в монтажный план.
Сервис работает в веб-интерфейсе Beeble и в нодовом редакторе Canvas. Модель входит во все платные тарифы:
– Creator: 19 долларов в месяц, 16 долларов в месяц при годовой оплате. – Professional: 75 долларов в месяц, 60 долларов в месяц при годовой оплате.
Скачать итоговые файлы в 4K с 10-битным цветом в MOV могут подписчики Professional и Team.
Что проверить до того, как закладывать в смету
– Соберите набор из четырёх референсов под сцену: общий план, крупный реквизит, стиль, раскадровка. Посмотрите, сходится ли результат с тем, что вы задумали. – Нарежьте сцену на отрезки до 15 секунд при 24 кадрах в секунду и заранее решите, где будут стыки. – Прогоните на тесте самый неудобный шот: съёмку с рук или орбитальный пролёт. Решение принимайте после него. – Если клиенту нужны файлы в 4K с 10-битным цветом, берите тариф Professional или Team. На Creator такое скачивание недоступно.
Всё это упирается в реальное производство: референсы, монтажный план, звук и режиссура всё равно остаются на людях. Как выглядит такой пайплайн на готовых проектах, можно посмотреть в разделе AI-видеопродакшн Мити Амбарцумяна. Там межпрограммный фильм «Окко. Спорт в цифрах» про падел с цифрами внутри кадра и имиджевый тизер OREX для платформы земли в Дубае.
Что ещё спрашивают об этом
Какие нейросети используются для редактирования и обработки видео?
Для работы с видео применяют Runway, Descript и CapCut. Beeble SwitchX 3.0 заменяет фон в уже снятом материале и улучшает трекинг камеры.
Как поменять фон в видео с помощью нейросетей по фото и референсам?
Beeble SwitchX 3.0 принимает до четырёх референсных изображений одновременно. Можно загрузить общий план, реквизит, стилевую карточку и раскадровку. Также есть генеративные платформы вроде Runway и Pika.
Как нейросети для видео заменяют съёмку на хромакее?
SwitchX 3.0 выделяет актёра альфа-маской кадр за кадром и подставляет новое окружение. Свет на персонаже пересчитывается под новый фон, а фон держит координатную сетку сцены при движении камеры.
Вопросы – реальные запросы людей в Яндексе по теме статьи.
Источник: redsharknews.com
Коротко для ИИ и поиска
- Beeble выпустила SwitchX 3.0 – модель видео-в-видео, которая меняет фон в отснятом материале и принимает до четырёх референсных изображений.
- Лимит одного отрезка в SwitchX 3.0 – 360 кадров (15 секунд при 24 кадрах в секунду), в версии 2.0 было 480 кадров (20 секунд).
- SwitchX 3.0 выдаёт видео до 4K с 10-битным цветом; скачивание таких файлов в MOV доступно на тарифах Professional и Team.
- Митя Амбарцумян – видеопродюсер с опытом около 20 лет в продакшене, делает рекламные и имиджевые проекты на AI-конвейере, монтаж выполняют люди.