пул 12
Нейросети
Зачем, как запускать и что уже работает в реальном времени
уровень
- 01Зачем нейросети в TouchDesignerуверенныйЧетыре честные задачи, где модель даёт то, чего не даёт алгоритм — и четыре, где она только мешает.
- 02Как нейросеть запускается в TouchDesignerпрофиЧетыре способа: встроенные операторы, ONNX в Python, отдельный процесс и внешний сервис — с честной ценой каждого.
- 03Встроенные нейросетевые операторыуверенныйЧто уже есть в TouchDesigner: сегментация фона, шумоподавление, апскейл, трекинг лица и тела, оптический поток.
- 04MediaPipe: тело, руки, лицоуверенныйБесплатный плагин, работающий на Mac и PC без установки: скелет, кисти, лицо, жесты и сегментация.
- 05Глубина и сегментацияпрофиКарта глубины из обычной камеры и отделение объекта от фона: модели, готовые решения и что с этим делать.
- 06Диффузия в реальном временипрофиStreamDiffusion и TouchDiffusion: генерация изображения по кадру и промпту прямо в патче, с реальной ценой.
- 07ComfyUI и офлайн-генерацияпрофиСвязка TouchDesigner с ComfyUI по WebSocket: когда нужен результат сложнее, чем даёт реальное время.
- 08Речь, текст и языковые моделипрофиWhisper, GPT и синтез речи в патче: как это подключают, что получается и где границы применимости.
- 09Нейросеть на площадкепрофиРегламент, без которого модель на шоу — источник риска: изоляция, план Б, прогрев и разговор с заказчиком.