AI e redes neurais ajudaram um usuário do Reddit a transformar um filme antigo em resolução 4K com 60fps.
Um dos clipes mais famosos da história do cinema é o curta-metragem “L’Arrivée d’un train à La Ciotat” (ou A chegada de um trem à estação La Ciotat), um vídeo de pouco mais de 50 segundos realizado pela Irmãos Lumière. Gravado originalmente em 1896, como você pode imaginar, as câmeras da época não captavam som, então ter a imagem em movimento já era uma façanha. Agora você pode ver este filme em 4K a 60 fps.
AI preencheu os pixels para aumentar a resolução para 4K
Um usuário do Reddit, Denis Shiryaev decidiu melhorar o clássico com a ajuda da tecnologia. Ele começou a dimensionar a resolução da imagem para 4K com uma ferramenta chamada Gigapixel AI por Topaz Labs.
Esta ferramenta permite gerar pixels para aumentar o tamanho da imagem original para obter uma resolução mais alta com o máximo de detalhes possível. Você pode ver o vídeo original abaixo:
Além de melhorar a resolução, ele conseguiu aumentar a taxa de quadros também. Algo que torna a saída mais fluida.
Como você pode ver, o movimento do trem e as pessoas que caminham pela cena parecem perfeitamente suaves. Quase não há quebras de movimentos, o que o torna completamente diferente do original. AI é usado aqui para preencher os quadros extras, então o resultado final é absolutamente hipnótico.
Para isso, Shiryaev usou uma ferramenta usada chamada DAIN, que realiza uma série de processos supercomplexos que preenchem buracos inexistentes com imagens perfeitamente sincronizadas com o resto do filme.
Para isso, analise a ferramenta analisa as imagens, a fim de detectar o fluxo visual da cena, o contexto e a profundidade da mesma. Em seguida, ele gera um mapa de calor que acaba criando a imagem perfeita para o quadro.
E então ele adicionou sons como o toque final.
