Головы следят за человеком

Задача: две головы держат артиста на сцене без оператора, с возможностью взять управление руками в любой момент.

Тракт целиком#

ИК-камера ──▶ модель (скелет) ──▶ точка в кадре
                                        │
                          калибровка камеры → точка на сцене (метры)
                                        │
                                   цель в 3D-сцене
                                        │
                          на каждый прибор: object → pan tilt CHOP
                                        │
                          сглаживание, ограничение скорости
                                        │
                                    16 бит → DMX

Шаг 1. Камера#

Камера над сценой или сбоку, жёстко закреплена, с фиксированной экспозицией. Инфракрасная подсветка и ИК-фильтр: шоу-свет не мешает трекингу, зритель подсветки не видит — Трекинг в луч.

Плата захвата, а не USB-камера: меньше задержка.

Шаг 2. Калибровка камеры#

Отметьте на сцене четыре точки с известными координатами. Наведите на них курсор в кадре камеры, запишите пиксельные координаты. Из четырёх пар строится преобразование «пиксели → метры на плоскости сцены».

Это та же процедура, что и калибровка приборов, только для камеры.

Шаг 3. Приборы#

Позиции голов — в таблице патча, поправки — из калибровки. Проверьте наведение вручную на несколько точек, прежде чем подключать автоматику.

Шаг 4. Трекинг#

Модель даёт точки скелета. Берите точку опоры (середина между ступнями) — она стабильнее центра масс и соответствует положению на полу.

Обработка обязательна:

Шаг 5. Что делать при потере#

• человек пропал на 1–2 секунды — держать последнюю позицию;
• дольше — плавно уйти в центр сцены;
• несколько человек — выбирать ближайшего к предыдущей позиции;
• модель молчит совсем — переключиться на ручное.

Шаг 6. Ручной дубль#

Обязателен. Варианты:

• позиция с пульта: два 16-битных канала;
• планшет с крестовиной по OSC;
• переключатель «авто / ручное» одной кнопкой.

Оператор должен иметь возможность взять управление за секунду.

Проверка#

1. Один человек ходит по сцене медленно — луч держится.
2. Быстрое перемещение — луч отстаёт, но не теряет.
3. Человек ушёл за кулисы — луч ведёт себя как задумано.
4. Два человека — понятно, за кем следит.
5. Включён шоу-свет и дым — трекинг не развалился.
6. Переключение на ручное и обратно.

Пятый пункт — самый важный и самый пропускаемый.