prototipagem 16. video interactivo_touchdesigner_interação por gestos

captura de ecrã da interface do Touch Designer

Foi implementado com sucesso um sistema de interação no TouchDesigner utilizando a biblioteca MediaPipe, com reconhecimento de gestos manuais e detecção facial em tempo real. A presença do rosto do utilizador é detectada como condição de activação da experiência — a partir do momento em que a face é reconhecida, o sistema entra em estado de prontidão para receber comandos através de gestos.

A comunicação entre o MediaPipe e o TouchDesigner é realizada através de transmissão de dados, onde os pontos de referência (landmarks). Com base nessa informação, foram definidos três gestos específicos que desencadeiam diferentes animações dentro do ambiente visual: ao levantar apenas o dedo indicador, o sistema activa a animação 1; com os dedos indicador e médio levantados, muda para a animação 2; e com a mão completamente aberta, com todos os dedos estendidos, é iniciada a animação 3.

Este sistema possibilita uma experiência mais intuitiva e imersiva através da detecção natural de movimentos corporais.