Watson, director de orquesta

Generar la partitura

El siguiente paso fue traducir esas emociones a una partitura musical y visual. Para esto, Head Brothers empleó Limbic, un sistema computacional diseñado y desarrollado por ellos mismos que genera contenidos audiovisuales en tiempo real, basándose en modelos matemáticos y, precisamente, en emociones.

"Estábamos desarrollando este sistema computacional, cuya entrada son las emociones, y a su vez teníamos que Watson entregaba emociones. Y dijimos 'Genial. Tenemos que hacer esto'", contó uno de los técnicos.

Con esta tecnología, la computadora generó en tiempo real una partitura, la cual fue interpretada por máquinas y músicos en vivo en un show de 15 minutos de duración. Se hizo una composición de toda la parte sonora, de los ambientes que acompañan la narración y de la parte visual, sobre todo a nivel de color, todo adelante del público.

El pasado viernes 3 de agosto, en el marco del primer Watson Summit Uruguay organizado por IBM, el equipo de realizadores uruguayos Head Brothers y el dúo Pulsar presentaron Watson Says, un innovador espectáculo musical de creación e interpretación conjunta entre humanos e inteligencia artificial.

Esta experiencia multimedia, que combinó sonido, música y proyecciones visuales en vivo, tuvo como principal objetivo explorar las capacidades de la computación cognitiva, es decir, la capacidad de un modelo computarizado de pensar, comprender, escuchar y recordar por sí mismo.

Marco Colasso (ingeniero en sonido) y Juan Pablo Colasso (diseñador de interacción), hermanos responsables de Head Brothers, destacaron en diálogo con Cromo que este proyecto explora los límites de la colaboración entre el hombre y la máquina.

Análisis de emociones

"Realizamos una composición a partir del análisis de varios textos con la herramienta Tone Analyzer de Watson", afirmó uno de los integrantes del equipo. Los realizadores se basaron en el IBM Watson Emotion Analysis, una nueva funcionalidad de la inteligencia artificial de la empresa que permite detectar emociones básicas como felicidad, odio, tristeza, disgusto y miedo en el análisis de textos.
El equipo ingresó a una variedad de escritos a la herramienta, desde discursos de la historia de IBM hasta proyecciones a futuro de la empresa.

Watson analizó estos textos y devolvió una serie de emociones. "Diferentes porcentajes, cantidades de emociones, sobre diferentes partes del texto", dijo uno de los hermanos a Cromo. A partir de esto, hicieron una guía básica, una especie de "esqueleto de emociones", y se inventó una historia.