Brainstorm promove IA e aprendizado de máquina no projeto europeu Emerald

Financiado por la Comissão Europeia, este proyecto en el que participa Brainstorm se centra en el desarrollo y demostración de herramientas de IA, aprendizado de máquina (ML) y Big Data para las industrias de entretenimiento digital y medios.

Brainstorm, especializada en gráficos 3D en tiempo real, set virtuales y soluciones de realidad aumentada, participa en el proyecto europeo Emerald Automatización de procesos e IA para entretenimiento y medios sostenibles, financiado por la Comisión Europea sob o programa Horizonte Europa.

El consorcio interdisciplinario de siete socios incluye a empresas referentes en tecnología de entretenimiento en vivo, streaming, transmisión y cine, como British Broadcasting Corporation, Multimídia brainstorm, Disguise Systems, Filmlight y MOG Technologies, y respaldado por dos universidades europeas.

“Emerald se esfuerza por ser pionero en herramientas innovadoras para los sectores de entretenimiento digital y medios de comunicación, aprovechando el potencial de las tecnologías de inteligencia artificial, aprendizaje automático y Big Data -explica Francisco Ibanez, director de proyectos de I+D en Brainstorm-. El objetivo es revolucionar el procesamiento, mejorar la eficiencia de producción, minimizar el consumo de energía y elevar la calidad del contenido con innovación”.

Como este gerente aponta, “actualmente hay un aumento masivo en el volumen de contenido basado en vídeo y realidad extendida, con una demanda insostenible de recursos humanos capacitados, procesamiento de datos y energía. Este proyecto tiene como objetivo abordar este desafío mediante el desarrollo de la automatización de procesos para la creación de medios sostenibles”.

Javier Montesa, coordinador técnico de I+D en Brainstorm, acrescenta que, en colaboración con la Universidade Pompeu Fabra (UPF), se están desarrollando métodos y herramientas basados en aprendizaje profundo para separar el vídeo en dos o más capas (matting).

“El objetivo principal es producir resultados de alta calidad -subraya- pelo integración automática en tiempo real de presentadores o artistas remotos en escenas y set virtuales para medios de transmisión y streaming utilizando aprendizaje profundo, sin la necesidad de un trimap. Con la mejora de IA de InfinitySet llevaremos la calidad de los métodos de pantalla verde a configuraciones más simples”.

Brainstorm tiene planes de integrar InfinitySet con los sistemas de aprendizaje profundo de UPF para la estimación de la pose de la cabeza y el cuerpo, lo que permitirá al operador activar contenido que se mostrará automáticamente en diferentes partes de la escena, pantallas virtuales, marcadores de posición de gráficos 3D o, simplesmente, frente al presentador mientras se mueve.

Gracias a ello “se explorarán nuevas formas de mejorar la inserción del presentador, cambiar su silueta y calcular su sombra con más precisión y realismo”, Garante.

Além disso, la compañía participará en la creación de herramientas diseñadas para el equilibrio automático del color y la coincidencia de tomas. Las manipulaciones de color son necesarias en posproducción, en producciones virtuales y en estudios virtuales.

“La integración de esta corrección automática de color en InfinitySet simplificará el uso de la herramienta y mejorará la integración presentador-escena cuando las condiciones de iluminación no estén controladas o cuando en la escena virtual estén destinadas a variar durante un programa”, Conclui.

Outros artigos sobre Brainstorm, Multimídia brainstorm, Comisión Europea Programa Horizonte 2020, Proyecto Emerald, Universidade Pompeu Fabra