A startup Runway AI anunciou nesta segunda-feira, dia 20, o Gen-2, um modelo de inteligência artificial (IA) multimodal capaz de gerar trechos de vídeo a partir de uma descrição escrita pelo usuário. A ferramenta produz vídeos do zero, embora ainda tenha limitações, como duração curta, baixa resolução e uso limitado.
Apesar das ressalvas, os resultados apresentados pelo Gen-2 indicam um futuro promissor para as IAs generativas de texto para vídeo. Em um dos exemplos divulgados pela empresa, o novo sistema gera um clipe de vídeo baseado no seguinte texto: “Pôr do sol através de uma janela em um apartamento em Nova York”. Confira abaixo o resultado.
O Gen-1, primeiro modelo de edição de vídeo por IA da empresa, Gen-1, foi lançado em fevereiro e focava mais em trabalhar sobre vídeos já existentes.
De acordo com a Bloomberg, os usuários terão que se inscrever numa lista de espera para o Gen-2 no Discord da Runway, aqui neste link. Um porta-voz da empresa, Kelsey Rondenet, disse ao The Verge que o acesso amplo será disponibilizado nas próximas semanas.
A Runway também oferece um editor de vídeo baseado na Web, com remoção de fundo e detecção de pose por meio de IA. A startup ainda participou do desenvolvimento do Stable Diffusion, modelo de texto para imagem com código aberto.
