Conheça seu Double Digital: Como os Metahumans melhoram a personalização

Desde seu lançamento em 2021, Epic Game's MetaHuman Creator, um aplicativo baseado em nuvens para o desenvolvimento de humanos digitais, ampliou sua gama de possibilidades acrescentando novas características - como o Mesh ao MetaHuman. Usando Unreal Engine, este plugin oferece uma nova maneira de criar um metahumano a partir de uma malha de caracteres 3D, permitindo que os desenvolvedores importem scans de pessoas reais. Em outras palavras, ele facilita a criação quase imediata de um duplo virtual de si mesmo (ou de qualquer outra pessoa).

Inspirados por esta atualização significativa e seguindo nossa tradição de melhorar os fluxos de trabalho de produção usando o Unreal Engine, nossa equipe de especialistas dedicados decidiu construir seu próprio protótipo. É desnecessário dizer que eles aprenderam algumas coisas ao longo do caminho - desde as possibilidades práticas dos meta-humanos até os aspectos técnicos da aplicação da captura de movimento a eles. Como explicado pelos próprios especialistas, aqui está o que você precisa saber sobre a criação e destravamento de todo o potencial dos humanos virtuais.

Estar em todos os lugares ao mesmo tempo - pelo menos virtualmente.

Se você já fantasiou em se clonar para poder cumprir todos os seus compromissos ou completar suas tarefas pendentes, os meta-humanos podem ser exatamente o que você estava procurando. Praticamente, pelo menos. Como representantes digitais de indivíduos existentes, os metahumans oferecem infinitas possibilidades em termos de criação de conteúdo, atendimento ao cliente, filmes e entretenimento em geral. Claro, eles não poderão lavar seus pratos - pelo menos ainda não - mas se você for uma figura pública ou trabalhar com eles, é uma mudança no jogo.

Ao emprestar direitos de imagem a seus pares digitais, qualquer influenciador, celebridade, político ou superstar esportivo poderá fazer aparições simultâneas (digitais) e assumir mais shows comerciais sem ter que estar no set. Como explica John Paite, Diretor de Criação da Media.Monks India, "as celebridades poderiam usar suas metahumanas para cargos de mídia social ou tarefas publicitárias menores para as quais normalmente não teriam a disponibilidade" Da mesma forma, as marcas que colaboram com influenciadores e celebridades não precisarão mais trabalhar em torno de suas agendas ocupadas.

A verdade é que os influenciadores virtuais já são uma coisa - emborana forma de personagens fictícios, em vez de duplas digitais de humanos existentes. Eles formam comunidades, fazem parcerias com marcas e são capazes de se envolver direta e simultaneamente com milhões de fãs. Além disso, eles não estão presos em um lugar de cada vez, nem operam sob restrições de fuso horário. Nesse sentido, as duplas digitais das celebridades combinam os benefícios dos seres humanos virtuais com o apelo de uma pessoa real.

Uma nova fronteira de personalização e localização.

Como trabalhar com humanos virtuais pode ser mais eficiente em termos de tempo do que trabalhar com humanos reais, eles oferecem oportunidades valiosas em termos de personalização e localização. Da mesma forma como temos usado o Unreal Engine para oferecer criatividade relevante em velocidade e escala, o MetaHuman Creator leva a localização a um novo nível. Como diz a Designer Sênior Rika Guite: "Se um comercial apresenta alguém que é uma celebridade em uma região específica, por exemplo, esta tecnologia facilita a substituição da marca por alguém que é mais conhecido em um mercado diferente, sem ter que voltar ao set"

Mas nem tudo é sobre celebridades. Os Metahumans também estão prontos para transformar o cenário educacional, assim como muitos outros. "Se você combinar metahumans com IA, ele se torna uma casa de força", diz Paite. "Em breve, os metahumans estarão ensinando cursos personalizados e os estudantes poderão ter acesso a esses cursos a um preço mais baixo". Ainda não atingimos esse nível, mas chegaremos lá"

Para um realismo impecável, o toque humano é a chave.

Para testar até onde os meta-humanos estão prontos para ir, nossa equipe escaneou nosso diretor executivo da APAC, Michel de Rijk, usando a fotogrametria com a Captura de Realidade Epic Games. Esta técnica trabalha com múltiplas fotografias de diferentes ângulos, condições de iluminação e pontos de vista para capturar verdadeiramente a profundidade de cada tema e construir a base para um modo metahumano realista. Depois, importamos a geometria para o MetaHuman Creator, que nossos projetistas 3D refinaram usando as ferramentas de edição da plataforma.

"Como o Mesh para Metahuman permite digitalizar e importar seu rosto real, é muito mais fácil criar duplas digitais de pessoas reais", diz nosso engenheiro generalista Nida Arshia. Dito isto, a contribuição de um especialista ainda é necessária para atingir modelos de alta qualidade. "Certas partes do rosto, como a boca, podem ser mais desafiadoras". Algumas estruturas faciais são mais difíceis que outras, também. Se você quiser que o metahumano pareça verdadeiramente realista, é importante passar algum tempo refinando-o"

Uma vez que conseguimos nosso protótipo o mais próximo possível da perfeição, usamos a tecnologia de captura de movimento facial FaceWare para desbloquear animações faciais em tempo real. Enquanto a variedade de opções de personalização do FaceWare fez dele nossa ferramenta de escolha para este modelo em particular, diferentes opções estão disponíveis dependendo do orçamento, da linha do tempo e da parte do corpo que você deseja animar. O LiveLink da Unreal, por exemplo, oferece uma versão gratuita que permite que você use seu telefone e é fácil de implementar aplicações tanto em tempo real quanto pré-gravadas, mas foca apenas nas animações faciais. Fatos mocap com câmeras externas permitem a captura de movimentos de corpo inteiro, mas com fidelidade média, e a gravação de um verdadeiro humano em um estúdio mocap dedicado desbloqueia animações altamente realistas tanto para o rosto quanto para o corpo.

Ao mesmo tempo, vale a pena considerar o ambiente que pretendemos que o metahumano habite, pois as roupas, o cabelo, o tipo de corpo e a estrutura facial precisarão todos se encaixar de acordo. Naturalmente, softwares diferentes podem se adaptar melhor a um estilo ou a outro.

Enquanto esta tecnologia ainda é incipiente e requer algum nível de especialização, as marcas podem começar a explorar diferentes maneiras de aproveitar os meta-humanos e economizar tempo, dinheiro e recursos em seus esforços de criação de conteúdo, atendimento ao cliente e entretenimento. Da mesma forma, os criadores podem começar a aprimorar suas habilidades e co-criar junto com as marcas para expandir o reino das possibilidades. Como diz Arshia, "Devemos continuar a avançar em nossa busca do realismo, concentrando-nos na expansão da variedade de tons de pele, texturas de pele e características disponíveis para que possamos construir um futuro onde todos possam ser representados com precisão"