Sony Edge Analytics traz aprendizado híbrido para a Universidade de Bamberg

A tecnologia de vídeo baseada em inteligência artificial de Sony Edge Analytics e câmeras SRG-X120 IP-4K PTZ trouxeram aprendizado híbrido para salas de aula maiores e para o auditório.

Uma equipe de técnicos multimídia e especialistas em TI implementou um sistema digital para otimizar as operações de aprendizagem híbrida no Universidade de Bamberg, garantindo que os alunos possam se beneficiar de um sistema presencial ou à distância. A inovadora tecnologia de inteligência artificial de Sony, Análise de borda, é parte da solução.

Fundada em 1647 como Academia Bambergensis, Universidade de Bamberg (Otto-Friedrich-Universität Bamberg) é um dos mais antigos da Alemanha e atualmente atrai quase 13.000 estudantes de todo o mundo. Como muitas outras instituições, enfrenta grandes desafios de transformação digital, além das incertezas deste tempo de pandemia.

No moderno edifício An der Weberei da Universidade de Bamberg, especificamente na sala de aula na sala de aula WE5/00.022 uma câmera PTZ foi pendurada no teto IP-4K SRG-X120 da Sony. Este equipamento captura em alta resolução cada canto da sala de 300 metros quadrados. Um elemento que se tornou fundamental para o aprendizado híbrido.

“atualmente, temos cinco salas de aula grandes permanentemente equipadas com essas câmeras modernas. Essa tecnologia é um elemento fundamental para poder continuar a educação universitária mesmo durante uma pandemia”, Diz Christoph Seeger, trabalhando no centro de ciência da computação da Universidade de Bamberg.

O projeto foi realizado com o fornecedor da Sony MR Datentechnik Vertriebs und Service, com sede em Nuremberg.

contudo, não são as câmeras PTZ montadas no teto que criam o sistema de aprendizagem híbrido. Esse papel recai sobre as pequenas e ainda menos marcantes caixas pretas às quais as câmeras estão conectadas..

O pequeno cubo, de pouco mais do que 10 centímetros de comprimento, Análise de borda, contém uma tecnologia de vídeo baseada em IA.

“É aí que está a inteligência por trás do nosso sistema.”, Explica Michael Fries, Gerente de contas de exibições profissionais & Grupo de Negócios de Soluções na Sony, especializada em sistemas híbridos de aprendizagem para o setor educacional. “Edge Analytics detecta o professor e torna possível que a câmera PTZ siga a classe. Ele também detecta gestos dos participantes e salva notas do quadro, mesmo que o professor cobre parte dele”.

O sistema Edge Analytics é configurado através de uma interface de usuário baseada na Web e gerenciado com uma unidade de controle multimídia padrão, compatível com todas as unidades de controle multimídia profissionais comuns.

As cinco salas de aula da Universidade de Bamberg que são equipadas com o sistema Edge Analytics da Sony usam controles e painéis de toque de Extron.

“Edge Analytics gera conteúdo envolvente em tempo real e automaticamente. Você pode transmitir vídeo da câmera diretamente para uma tela ou mídia de armazenamento, sobre IP, para qualquer local do mundo ou, como na Universidade de Bamberg, para o servidor de streaming de vídeo que você usa. Este sistema funciona por conta própria, sem que os professores tenham que verificar ou ajustar constantemente as configurações de mídia”, adiciona batatas fritas.

Flexibilidade e mobilidade

A Universidade de Bamberg ainda não modernizou todas as salas de aula e seminários de seus diversos edifícios por toda a cidade., assim, para entregar aprendizado híbrido em mais salas, comprou duas unidades móveis, além dos cinco sistemas permanentemente instalados.

As unidades móveis também consistem em uma câmera Sony PTZ e a caixa Edge Analytics. O sistema é compacto, é instalado em uma caixa de transporte e pode ser movido de uma sala para outra.

“Os professores podem conectar o sistema em alguns passos simples, obtê-lo para cima e executá-lo e configurá-lo para a classe ou curso, por exemplo, especificar se a classe deve ser transmitida ao vivo ou salva para download posterior”, diz Fries. Instalação também é fácil, porque os componentes individuais só estão conectados uns aos outros usando cabos de rede e HDMI, e, em seguida, para a unidade de controle multimídia.

Recursos de análise de borda

O sistema Edge Analytics tem um total de cinco funções que podem ser ativadas através de um modelo de licenciamento de acordo com as necessidades.

Em primeiro lugar, há o rastreamento PTZ automático, que coloca a tecnologia da câmera conectada em operação e garante que as câmeras sigam um objeto em movimento completamente automaticamente, especialmente em salas de aula grandes, como as de Bamberg. Um algoritmo permite o rastreamento automático de alto-falantes para que eles permaneçam sempre afiados e focados.

O recurso de extração de caligrafia usa técnicas de realidade aumentada para que as palavras e diagramas escritos no quadro sejam visíveis para os alunos o tempo todo. Edge Analytics detecta automaticamente texto manuscrito, desenhos e diagramas, extratos deles uma sobreposição em tempo real e exibe-o na frente do alto-falante. Mesmo que o alto-falante seja colocado diretamente na frente do tabuleiro, alunos sempre serão capazes de ver ideias e raciocínio. O texto extraído pode ser baixado para um laptop como um arquivo JPEG.

Edge Analytics da Sony usa gestos para detectar certos movimentos na sala. por exemplo, se alguém no auditório se levanta, a câmera automaticamente amplia essa pessoa e se concentra nelas enquanto eles estão falando. De acordo com Fries, isso é especialmente útil em aulas ou apresentações corporativas para capturar perguntas ou comentários.

Recurso de recorte de tela melhora a dinâmica da classe, como ele pode ser usado para exibir seções de imagem ajustáveis em telas adicionais. Isso significa que várias visualizações de tela podem ser alcançadas com uma câmera.

último, embora não menos importante, a função de sobreposição pode ser usada para exibir conteúdo adicional na tela que é visível para os alunos, como a janela de apresentação, o logotipo da universidade fixa ou um fundo completamente diferente.

Como Seeger comenta, em Bamberg, seis dos sete sistemas Edge Analytics estão equipados com a licença de rastreamento automático PTZ. "Um de nossos sistemas tem todas as licenças. No momento, estamos usando-o como um sistema de teste e estamos testando as funções individuais. A instalação e a configuração foram muito simples e não houve problemas de compatibilidade com o nosso atual sistema Extron. Agora temos um moderno sistema de aprendizagem híbrida em nossas grandes salas de aula e auditório, onde também estamos usando esta solução”.

Outros artigos sobre Extron, Extron Electronics, MR Datentechnik Vertriebs und Service, Sony, Universidade de Bamberg