Natural interaction in virtual TV sets through the synergistic operation of low-cost sensors

Un set virtual combina imágenes del mundo real con entornos virtuales para obtener imágenes que ofrecen la impresión de ser elementos reales, como los actores o los objetos físicos, estando presentes en un escenario generado por ordenador. Así, la audiencia tiene la sensación de los talentos presentes en un espacio donde no lo están. Uno de los aspectos más relevantes para obtener una buena sensación de presencia en el escenario es la capacidad de los actores para interactuar, en tiempo real, con el mundo virtual. Para hacerlo posible, es necesario trackear el cuerpo de los presentadores y detectar sus gestos de tal manera que estos puedan modificar el entorno sintético de manera natural. En este artículo, un estudio analiza la viabilidad del uso sinérgico de varios sensores para mejorar la interacción de actores con la escena, enfocándose principalmente en la detección de gestos naturales. Se propone un nuevo flujo de trabajo, basado en el aprendizaje de gestos naturales a través de técnicas de inteligencia artificial para usarla en los informativos. Empleando esta aproximación en el proceso de preproducción, los actores pueden crear sus propios paradigmas personalizados de interacción con el entorno virtual, incrementando así el naturalismo de su comportamiento durante los informativos en directo y reduciendo el tiempo de entrenamiento necesario para las nuevas producciones.