Clonando a voz dos Wendigos

Clonagem de voz Wendigos (modelo letal da empresa)

Masked aprendeu a copiar as vozes dos seus amigos. Você sabe dizer quem é verdadeiro e quem é falso?

Para que este mod funcione corretamente, ele deve ser instalado em todos os players.

Aqui está um vídeo que fiz para apresentar este modelo.

O segundo vídeo apresenta esse modelo em tempo real.

Isenção de responsabilidade.

Se você não estiver usando Elevenlabs, este mod carrega um binário externo (cerca de 350 MB) do meu github e localmente carrega um modelo de IA para gerar clipes de áudio de pessoas mascaradas. O binário externo tem 350 MB e o modelo de clone de voz tem 1,75 GB.

Privacidade.

Sua voz é clonada inteiramente localmente em tempo de execução. Isso significa que (1) os clones de áudio não são armazenados, a clonagem ocorre em tempo de execução e (2) todo o processamento ocorre localmente na máquina. Não é transmitido externamente. Apenas clipes de áudio criados são trocados entre os players.

Quando você usa Elevenlabs, tudo é armazenado em sua conta.

Configuração inicial (não em tempo real)

Se você está usando Elevenlabs, pré-clone os votos de todos os jogadores.

Habilitar mod em Wendigos.cfg. Opcionalmente, habilite Elevenlabs e adicione a chave API e o ID de voz. Além disso, certifique-se de instalar o idioma e adicionar uma voz personalizada (consulte a seção "Recursos de bônus").

(Somente para modelos locais de IA - os usuários do Elevenlabs já estão desabilitados.) Ao iniciar o jogo pela primeira vez, você será solicitado a gravar várias réplicas de voz. O microfone atualmente selecionado é exibido.

Se o microfone selecionado não for o que você deseja usar, clique em Fechar, defina o microfone em Configurações e reinicie o jogo.

Controles

'R' inicia a gravação.

'Q' para a gravação.

'N' exibe o seguinte som.

Se a sua língua de trabalho não for o inglês, diga o que quiser nesta etapa e pressione "Q".

Quando você parar a gravação ou sair da lista de linhas de voz, o modo começará a gerar linhas de voz.

Esse passo pode demorar muito tempo. Quando a geração estiver completa, o jogo irá notificá-lo!

Na primeira vez que isso acontecer, o mod carregará o modelo de som (1,75 GB) na pasta Wendigos MOD. Como esse modelo já está carregado, a geração subsequente será muito mais rápida.

Se você cometer um erro e precisar gravar o áudio novamente, saia do jogo e defina "Áudio de exemplo de novo jogador salvo?" como verdadeiro na configuração do Thunderstone "BepInEx/config/Wendigos.cfg".

Oportunidades de bônus

Sequência de voz personalizada.

Não gosta da cadeia de caracteres de voz padrão? Você pode personalizar o que o Mascarado pode dizer em diferentes categorias de comportamento editando o arquivo abaixo:

BepInEx/config/Wendigos/player_sentences/player0_chasing_sentences.txt

BepInEx/config/Wendigos/player_sentences/player0_idle_sentences.txt

BepInEx/config/Wendigos/player_sentences/player0_nearby_sentences.txt

Novas frases são separadas por uma nova linha; a IA pode ser forçada a dizer qualquer coisa.

Cada jogador pode ter sua própria corda de voz, correspondente ao que eles dizem.

Aprimoramentos de máscara.

Este mod remove a máscara e as mãos zumbis da máscara, permitindo-lhe enganar melhor o jogador. As roupas do jogador também serão emuladas.

Onze Laboratórios.

Os jogadores podem usar Elevenlabs para clonar sua voz. Isto dá resultados muito melhores e pode ser mais enganador para a máscara. Para usar este recurso, todas as vozes de clientes já devem ser clonadas por Elevenlabs. Todos podem usar a mesma chave de api, mas cada jogador precisa de um identificador de voz exclusivo.

Reação em tempo real com o Azure e o ChatGPT (experimental)

Permite que pessoas mascaradas reajam às expressões do jogador em tempo real. Este recurso não oferece suporte a push-to-talk.

O que você precisa.

Assinatura do Eleven Labs (US$ 5+)

 Compre quantos créditos quiser no seu perfil em [Faturamento] - [Adicionar Método de Pagamento]. Estes empréstimos não expiram no final do mês.

Em seguida, volte para seu perfil -> Chaves da API do usuário -> Exibir chaves da API do projeto, crie um novo projeto, crie uma nova chave com a chave da API do projeto, salve-a e insira a chave da API ChatGPT em wendigos.cfg.

Se você não encontrar a chave de API, consulte aqui: https://help.openai.com/en/articles/4936850-where-do-i-find-my-openai-api-key.  

Definições de Configuração

Configure todas as chaves de API (Elevenlabs, Azure, ChatGPT).

Defina o ID de voz como Elevenlabs.

Defina a região do Azure como a região recém-selecionada.

Defina Geral -> Ativar modo e Experimental -> Respostas em Tempo Real como verdadeiro.

Adicione seu nome ao campo Seu Nome.

Configurações avançadas

Otimize Eleven Labs para obter velocidade: acelera a produção de som ao custo de perder a maior parte da emoção da voz. O estilo geral e a emotividade da fala são reduzidos.

Probabilidade de Fala: A probabilidade de que o Mascarado reproduzirá uma linha de voz predefinida.

Possíveis problemas.

A linha de áudio está fora de sincronia.

Os jogadores ouvem vozes diferentes (raramente, mas podem ocorrer devido a saltos em atraso).

A gravação fora do buffer resulta em erros de unidade (as cadeias de caracteres geradas são muito grandes).

Seu computador não tem espaço de armazenamento suficiente para modelos e linhas de áudio.

Cada player armazena modelos de clones de voz (1,75 GB), amostras de som (~10 MB) e trilhas de áudio (<500 KB cada) localmente.

PERGUNTAS FREQUENTES.

Que idiomas esse modelo oferece suporte?

Este mod usa XTTSv2 e suporta 17 idiomas: inglês (en), espanhol (es), francês (fr), alemão (de), italiano (it), português (pt), polonês (pl), turco (en), russo (ru), holandês (nl), tcheco (cs), árabe (ar), chinês (zh-cn), japonês (ja), húngaro (hu), coreano (hko), hindi (hi).

Onze laboratórios estão disponíveis em 32 idiomas. Para obter mais informações, consulte https://elevenlabs.io/languages.