Интерактивная выставка на нейронках без серверной стойки

Человек подходит к стенду, поднимает руку – и на экране его силуэт обрастает северными орнаментами. Такая интерактивная выставка собирается из датчика, медиасервера и нейронки. Дорогая серверная стойка ей не нужна, если заранее поделить работу между локальным компьютером и облачными API. Ниже четыре механики для брендового стенда, список «что где считать» и проверки перед открытием.

Интерактивная выставка: что готовят заранее, а что генерируют на лету

Раньше для реактивного видеоарта моушн-дизайнеры неделями писали скрипты в TouchDesigner. Теперь базовые слои, текстуры и стилизацию делают нейросети, а монтажёры и звукорежиссёры собирают всё в одно полотно. Как это выглядит на примере иммерсивного шоу, я разбирал в статье как собрать видео для иммерсивного шоу на нейронках.

Контент бывает двух типов. Предзаписанный готовят на препродакшене, и для него хватит обычных медиаплееров. Реактивный система генерирует, пока зритель стоит у стенда, и здесь нужны датчики и нейросетевые модели. Поэтому первый вопрос к смете звучит так: что на стенде должно быть живым, а что можно показать заранее отрендеренным?

Четыре механики для брендового стенда

1. Реактивный видеоарт от датчиков движения

На площадке ставят датчики глубины (Kinect) или лазерные сканеры (LiDAR). Они ловят силуэты людей и отдают координаты медиасерверу. Вместо стандартных частиц (particles) к потоку подключают StreamDiffusion или LCM (Latent Consistency Models), и нейросеть на лету стилизует прохожего под концепцию бренда. Из движений рождаются северные орнаменты или потоки данных.

2. Автономный AI-гид

Вместо промоутера на стенде работает экран с персонажем. Под капотом три звена:

• STT (Speech-to-Text) распознаёт голос посетителя;
• LLM-агент (большая языковая модель) формирует ответ в тоне бренда;
• TTS (Text-to-Speech) и анимационная модель (например, SadTalker или LivePortrait) озвучивают ответ и двигают губами персонажа.

Арендовать сервер с RTX 4090 ради мимики в реальном времени необязательно. Держите на экране записанные эмоциональные циклы (idle-анимации), а генеративный рот включайте только тогда, когда персонаж говорит.

3. Генеративный мерч

Посетитель подходит к консоли, делает селфи или вводит текстовый промпт. Нейросеть стилизует портрет под тему: космос, киберпанк, классическая живопись. Результат выходит на большой экран стенда, а уменьшенная копия уходит человеку в Telegram. Бренд получает контент для соцсетей и заодно базу контактов.

4. Ветвящийся сценарий

Видео на экранах меняется вслед за поведением толпы, как в интерактивном спектакле. Датчики видят, где скопились люди. Если группа стоит у зоны экологии, медиасервер плавно перестраивает фон на природные мотивы. Когда народ идёт к технологической зоне, видеоряд становится динамичным и цифровым.

Что считать на площадке, а что в облаке

Главная ошибка при проектировании AI-активаций – запускать тяжёлые нейросети локально. Аренда мощных графических станций на несколько дней выставки быстро съедает смету. Я бы делил задачи так:

• Сбор данных с датчиков (LiDAR, Kinect) – на локальном ПК средней мощности. Координаты приходят с минимальной задержкой (latency).
• Простая стилизация и маски – там же, на шейдерах TouchDesigner. GPU-сервер здесь не нужен.
• Синтез речи и LLM-логика – в облачных API с посекундной тарификацией. Вы платите за реальные запросы, простой железа в счёт не попадает.
• Генерация уникальных портретов – на облачном сервере с очередью запросов. Интерфейс на стенде не зависает, когда набегает толпа.

Честно, как поведёт себя задержка облачной речи на конкретной площадке, я заранее не скажу. Это видно только на месте, поэтому тест связи стоит в чек-листе ниже. А какие интерактивы можно показать заказчику ещё на тендере, смотрите в подборке нейро-интерактивов для тендеров.

Что проверить до открытия

Любая интерактивная выставка уязвима на стыке софта и физического пространства. Чтобы инсталляция не легла в первый же день:

1. Сделайте резервный видеоцикл (fallback loop). Если пропал интернет или завис AI-скрипт, медиасервер сам переключается на предзаписанное видео. Гость не должен видеть рабочий стол Windows или ошибку API.
2. Калибруйте датчики при полном зале. Одной ночной настройки Kinect или LiDAR в пустом павильоне мало: одежда разной фактуры, блики от приборов и толпа меняют считывание. Оставьте время на финальную калибровку перед самым запуском.
3. Поставьте тайм-лимит на одно взаимодействие. В генеративных интерактивах люди любят зависать у экрана, а лимит спасает от очередей.
4. Прогоните облачные запросы через реальный интернет площадки. Офисный канал ничего не докажет. Заодно выясните, как держит нагрузку очередь портретов.

Ещё про технологии, которые помогают агентству выигрывать сложные проекты, я писал в материале технологии для победы в тендерах.

Всё это упирается в производство: кому-то надо сгенерировать картинку, смонтировать её и свести звук. Я делаю видео на AI-конвейере: нейросети дают скорость и бюджет, монтаж и звук остаются за людьми. Как это выглядит на практике, видно в разделе ролики и видеоконтент для мероприятий и активаций – загляните, например, в промо-фильм «Арктические узоры», где орнаменты северных народов проступают в природе.