Casa do Administrador de Sites (ChinaZ.com) 14 de junho de 2024: Pesquisadores da Universidade de Stanford, em conjunto com a Apparate Labs, lançaram um modelo de IA chamado PROTEUS, capaz de gerar personagens virtuais realistas e expressivos a partir de uma única foto, permitindo canto e fala em tempo real.
Principais Características:
Geração em tempo real de personagens realistas: O PROTEUS pode gerar a partir de uma única imagem efeitos como risos, rap, canto, piscadas, sorrisos, fala, etc., mostrando expressões faciais e movimentos corporais complexos.
Fluxo de vídeo de alta taxa de quadros: Suporta fluxo de vídeo com mais de 100 FPS, permitindo processamento em tempo real e garantindo a fluidez e naturalidade da interação.
Interação multi-modal: Compatível com várias formas de dados, como voz, texto e imagens, permitindo interação natural e intuitiva em diferentes cenários.
Personalização e aplicações: Design de arquitetura altamente personalizável, adequado para diversos setores e cenários de aplicação, atendendo a necessidades individualizadas.
Arquitetura tecnológica:
O PROTEUS utiliza modelos de difusão latente e a arquitetura avançada do Transformer, processando dados no espaço latente para gerar imagens complexas de forma eficiente.
A arquitetura e os algoritmos aprimorados permitem uma velocidade de geração superior a 100 quadros por segundo.
Cenários de aplicação:
Assistente virtual personalizado: Oferece serviços como processamento de tarefas diárias, gerenciamento de agendas e busca de informações.
Animal de estimação virtual: Cria animais de estimação virtuais com aparência realista e ampla gama de emoções.
Apoio emocional: Gera personagens virtuais de apoio emocional, fornecendo conforto e suporte psicológico.
Atendimento ao cliente: Gera representantes de atendimento ao cliente virtuais, oferecendo suporte imediato e eficiente.
Educação e treinamento: Gera professores ou instrutores virtuais, oferecendo educação e treinamento personalizados.
Personalização de personagens de videogame: Fornece aos desenvolvedores de jogos personagens altamente personalizáveis.
Cinema e entretenimento: Utilizado para gerar atores e personagens virtuais realistas, reduzindo custos de produção.
Marketing e publicidade: Gera embaixadores virtuais para promoção de produtos e divulgação de marcas.
Mídias sociais e interação virtual: Gera avatares virtuais para enriquecer a experiência nas plataformas de mídia social.
A visão do PROTEUS é fornecer uma representação visual controlável por voz, servindo como uma interface intuitiva para entidades de conversa artificial, permitindo que os usuários interajam naturalmente com personagens virtuais.
O fornecimento de segurança e o acesso antecipado à API serão disponibilizados a desenvolvedores selecionados.
O PROTEUS já possui diversos casos de uso em transmissões ao vivo no Twitch, demonstrando seu potencial em cenários de interação em tempo real. Através da API, o PROTEUS pode ser usado em qualquer aplicativo, trazendo experiências inovadoras de interação com personagens virtuais para diversos setores.
Site oficial: https://apparate.ai/stream.html