Kiki • intérprete virtual de língua de sinais japonesa

A NHK Enterprises, Inc. (NEP) há muito tempo está comprometida em atender melhor a comunidade surda no Japão, tornando-se uma pioneira em acessibilidade no setor de mídia. Isso levou a uma intensa pesquisa sobre a linguagem de sinais japonesa (JSL) e ao investimento em tecnologia que pode disponibilizar notícias importantes para os falantes de JSL. Nossa solução: Kiki, um intérprete humano virtual que gera interpretações dinâmicas completas em JSL a partir da entrada de texto.

Você pode se perguntar: por que não usar apenas legendas nas transmissões? O JSL é um idioma próprio e distinto, e os falantes nativos podem não falar ou ler japonês por vários motivos. Isso fez com que falar com a comunidade surda em seu próprio idioma fosse uma prioridade importante. Embora o principal caso de uso da Kiki seja a interpretação de transmissões de emergência para desastres naturais no site e nos canais de TV da NHK, a plataforma está disponível para licenciamento para outras grandes organizações, com compromissos iniciais voltados para a geração de interpretação em linguagem de sinais para guias de exposições de museus, anúncios públicos e muito mais.

Kiki é um ser humano virtual de última geração e altamente realista para interpretação de linguagem de sinais. Criado a partir de 16.000 mocaps individuais, o impressionante personagem 3D tem aparência, movimento e sensação de ser humano. O aplicativo de back-end, desenvolvido pela Unity, transforma frases em uma interpretação dinâmica e acolhedora da linguagem de sinais, produzindo uma renderização em arquivo de vídeo da frase quase em tempo real. No total, a plataforma consegue uma economia significativa de custo e tempo em comparação com uma transmissão profissional tradicional ao vivo, garantindo que os falantes de JSL tenham melhor acesso às notícias e às informações que são importantes para eles.