Acabei de ver uma notícia interessante sobre o desenvolvimento de IA na área de representação de personagens, lançada pela Anuttacon, uma empresa de IA fundada por Tsai Haoyu, o criador da miHoYo.

Eles acabaram de lançar o LPM 1.0, um modelo de exibição de vídeo de personagens que é bastante surpreendente. Este sistema permite que os personagens falem, cantem, ouçam e exibam reações simultaneamente, em tempo real. Além disso, os movimentos de boca e expressões faciais, bem como o ritmo do corpo, parecem muito realistas, não algo artificial.

Do ponto de vista técnico, eles usam um modelo base de 17 bilhões de parâmetros e o ajustaram para uma versão de streaming com baixa latência. O que é ótimo é que ele suporta uma variedade de estilos de personagens, desde estilos realistas, animações 2D, até jogos 3D e até criaturas não humanas, sem necessidade de ajustes adicionais.

O que notei é que a Anuttacon lançou um padrão de avaliação chamado LPM-Bench, que apresenta os melhores resultados em vários indicadores em comparação com outros modelos no mercado. Uma diferença importante é que o LPM 1.0 pode gerar conteúdo sem limite de duração, ao contrário de outras opções que limitam a apenas 30 segundos.

As aplicações que eles parecem focar são bastante claras: personagens NPC de jogos para conversas e transmissões ao vivo virtuais, que têm um potencial enorme, especialmente para a miHoYo e outras empresas de jogos.

No entanto, é importante notar que a Anuttacon afirma claramente que esta é uma versão de demonstração apenas para fins acadêmicos. Ainda não há planos de open source ou de fornecer uma API ao público. A maior parte da comunidade acredita que o objetivo principal é atrair talentos em IA.

Olhar para trás, o LPM 1.0 representa um passo adiante na trajetória de IA da Anuttacon, especialmente em motores de jogos e NPCs inteligentes. Além disso, é mais um resultado do desenvolvimento de IA da miHoYo, desde a ferramenta de chat AnuNeko até as capacidades do modelo base. Parece que Tsai Haoyu e sua equipe estão criando algo de grande impacto na área de IA de personagens.