Como o Projekt Kalwaria usa a ElevenLabs para dar vida a um patrimônio destruído

O Projekt Kalwaria é uma organização sem fins lucrativos da Polônia que está reconstruindo um lugar que já não existe. O Calvário de Ujście, um complexo de estações em uma encosta construído entre 1893 e 1908, foi destruído por forças de ocupação durante a Segunda Guerra Mundial. Por décadas, ele sobreviveu apenas em fotografias e arquivos.

A associação está recriando o local digitalmente para manter vivo o patrimônio da região e permitir que um novo público o conheça. Por meio do nosso Programa de impacto, demos voz a essa reconstrução.

Reconstruindo a colina

A restauração do Calvário começou nos arquivos. A equipe digitalizou cerca de 300 documentos de 1893 a 1935, depois reconstruiu a colina em 3D e modelou suas três primeiras estações. A partir dos mesmos registros, recriou quatro molduras das estações, cujos designs ganharam prêmios em uma Exposição Universal de Paris há mais de um século.

Como usam a ElevenLabs

A reconstrução só tem valor se as pessoas puderem vivenciá-la. Por isso, a equipe transforma a topografia recriada em 3D, os modelos das três primeiras estações e fotografias de arquivo animadas em reconstruções de vídeo narradas: passeios virtuais que percorrem a colina e suas estações como um visitante faria antigamente, guiados por narração do início ao fim.

Essa narração é gerada com o Text to Speech da ElevenLabs. Como o áudio é gerado, e não gravado, a equipe publica cada passeio em polonês, inglês e alemão a partir de um único roteiro, em vez de contratar dubladores para cada idioma. O Eleven Music cria a trilha das aberturas, e o vídeo com IA anima as fotografias centenárias que servem de base para os filmes.

"Não queremos apenas contar histórias sobre a história — queremos que as pessoas possam vivenciá-la. Quando combinamos centenas de documentos recuperados com o poder de mecanismos 3D modernos e da inteligência artificial, percebemos que poderíamos literalmente ressuscitar este lugar. As ferramentas de IA nos deram a capacidade de criar uma experiência imersiva e multilíngue", disse Patryk Piotrowski, do Projekt Kalwaria, "devolvendo uma voz a um lugar que havia sido brutalmente privado dela."

Os filmes são publicados no YouTube, onde o público pode vivenciá-los hoje.

O impacto até agora

A história do Calvário de Ujście conecta influências polonesas e alemãs, por isso alcançar um público internacional foi importante desde o início. Publicar cada filme em polonês, inglês e alemão permite que a equipe compartilhe uma história local para além da região sem produzir três versões separadas.

O projeto ainda está no início, e o objetivo da equipe é alcançar um público maior com o tempo. Combinar vídeo com IA e áudio da ElevenLabs permite que uma pequena equipe de voluntários produza esses filmes com uma qualidade que antes exigia um estúdio.

O que vem a seguir

O Projekt Kalwaria agora está conectando o áudio ao próprio local. Um app móvel em desenvolvimento acionará a narração em pontos ao longo dos caminhos históricos de Ujście, para que os visitantes ouçam sobre cada estação ao chegar até ela. A equipe também está criando passeios em VR com mecanismos 3D modernos e áudio espacial, permitindo que as pessoas percorram o Calvário reconstruído de qualquer lugar.

O Calvário de Ujście é um entre milhares de locais que correm o risco de desaparecer da nossa história cultural. O áudio criado com IA torna trabalhos de reconstrução como este acessíveis às equipes de voluntários e associações locais que preservam essa história, para que uma parte maior do patrimônio mundial sobreviva para as gerações futuras.

Inscreva-se no Programa de impacto da ElevenLabs

Por meio do Programa de impacto da ElevenLabs, ajudamos organizações sem fins lucrativos a alcançar mais pessoas com áudio criado com IA, como parte da nossa meta de ajudar um milhão de pessoas a se comunicar, aprender e criar sem barreiras. Se a sua organização atua nas áreas de cultura, educação ou acessibilidade, inscreva-se em elevenlabs.io/impact.

Conheça o trabalho do Projekt Kalwaria em projektkalwaria.pl.