Como pode um software transformar vídeos e filmes em autênticos livros de banda desenhada?

A resposta está no machine learning e o Comixify é a primeira solução neste campo. O programa foi desenvolvido por um grupo de investigadores da Universidade Tecnológica de Varsóvia e há uma versão web que pode experimentar.

A Universidade de Tecnologia de Varsóvia apresentou uma nova proposta de software que promete transformar vídeos e filmes em autênticos livros de banda desenhada. Isto, claro, de forma completamente automática.

O programa, que se chama Comixify, opera de acordo com um processo que passa pela recolha de frames de um dado vídeo e pela aplicação de filtros estéticos que lhe dão um aspecto semelhante às tradicionais bandas desenhadas.

tek comixify

De acordo com os investigadores envolvidos no projeto, o programa utiliza um algoritmo neural, que tem por base uma rede geradora de adversários (GANs). Estas redes são compostas por duas redes neurais e, neste caso, uma delas é responsável por apresentar frames, ao passo que a segunda tem a tarefa de as avaliar de acordo com aquilo que são as características anatómicas humanas. De seguida, são escolhidos os melhores frames.

Para os interessados em ler, ao pormenor, como funciona este Comixify, a universidade publicou um ensaio online que explica a conceção e a operacionalização do software. Em adição, há ainda uma versão web do programa, que pode experimentar através deste link.