Clonando la voz de los Wendigos

Wendigos Voice Cloning (Lethal Company mod)

Clavo LC 2

Masked ha aprendido a copiar las voces de sus amigos. ¿Puedes decir quién es real y quién es falso?

Para que este mod funcione correctamente, debe instalarse en todos los jugadores.

Aquí hay un video que hice para presentar este mod.

El segundo video es una demostración de moda en tiempo real.

Descargo de responsabilidad.

Si no está usando Elevenlabs, este mod carga un binario externo (aproximadamente 350 MB) de mi github y carga localmente un modelo de IA para generar clips de audio de personas enmascaradas. El binario externo es de 350 MB y el modelo de clonación de voz es de 1,75 GB.

Privacidad.

Tu voz se clona completamente localmente en tiempo de ejecución. Esto significa que (1) sus clones de audio no se almacenan, la clonación se produce en tiempo de ejecución y (2) todo el procesamiento se produce localmente en su máquina. No se transmite externamente. Sólo se transmiten clips de audio generados entre reproductores.

Cuando utiliza Elevenlabs, todo se almacena en su cuenta.

Configuración inicial (no en tiempo real)

Al usar Elevenlabs, clona la voz de cada jugador de antemano.

Habilitar mod en Wendigos.cfg. Opcionalmente, habilite Elevenlabs y agregue la clave de API y el ID de voz. Además, asegúrate de establecer el idioma y agregar réplicas de voz personalizadas (consulta la sección "Características adicionales").

(Solo para modelos de IA locales - Los usuarios de Elevenlabs ya están deshabilitados.) Cuando comience el juego por primera vez, se le pedirá que grabe varias réplicas de voz. Se muestra el micrófono seleccionado actualmente.

Si el micrófono seleccionado no es el que desea usar, haga clic en Cerrar, configure el micrófono en Configuración y reinicie el juego.

Controles

'R' comienza a grabar.

'Q' deja de grabar.

'N' muestra el siguiente sonido.

Si su idioma de trabajo no es el inglés, diga lo que quiera en este paso y luego presione "Q".

Cuando deje de grabar o salga de la lista de cadenas sonoras, el modo comenzará a generar las cadenas sonoras.

Este paso puede llevar mucho tiempo. Cuando la generación esté completa, el juego te lo notificará.

La primera vez que esto suceda, el mod cargará el modelo de duplicación de audio (1.75 GB) en la carpeta Wendigos MOD. Dado que este modelo ya está cargado, la generación de líneas posterior será mucho más rápida.

Si cometes un error y necesitas grabar el audio de nuevo, cierra el juego y establece 'Grabar nuevo reproductor de audio de muestra.' en true en la configuración de Thunderstone 'BepInEx/config/Wendigos.cfg'.

Oportunidades de bonificación

Línea de voz personalizada.

Si no le gusta la cadena de voz predeterminada. Puede personalizar lo que Masked puede decir en diferentes categorías de comportamiento editando el siguiente archivo:

BepInEx/config/Wendigos/player_sentences/player0_chasing_sentences.txt.

BepInEx/config/Wendigos/player_sentences/player0_idle_sentences.txt.

BepInEx/config/Wendigos/player_sentences/player0_nearby_sentences.txt.

BepInEx/config/Wendigos/player_sentences/player0_damaged_sentences.txt.

Las nuevas oraciones están separadas por una nueva línea; puede obligar a la IA a decir cualquier cosa (sí, cualquier cosa).

Cada jugador puede tener su propio diálogo de voz.

Mejoras de máscara.

Este mod elimina la máscara y las manos de zombi de la máscara, lo que le permite engañar mejor al jugador. La ropa del jugador también será emulada.

Once laboratorios.

Los jugadores pueden usar Elevenlabs para clonar su voz. Esto da resultados mucho mejores y puede ser más engañoso para la máscara. Para utilizar esta función, todas las voces de los clientes ya deben ser clonadas por Elevenlabs. Todos pueden usar la misma clave de API, pero cada jugador necesita un identificador de voz único.

Reacción en tiempo real con Azure y ChatGPT (experimental)

Permite a las personas enmascaradas reaccionar a las expresiones del jugador en tiempo real. Esta característica no admite la función de pulsar para hablar.

Lo que necesitas.

Suscripción a Eleven Labs ($5+)

Servicio gratuito de Azure Speech to Text

Cuenta de ChatGPT con créditos de API comprados (no suscritos)

Once laboratorios.

Crea una cuenta y regístrate para una suscripción a partir de $5 o más. Haz clic en tu perfil y selecciona "Claves de API". Generar una clave y guardarla en algún lugar. Para copiar su propia voz (y las voces de otras personas con las que comparte), haga clic en su voz en Voces, Personal y, a continuación, haga clic en ID para copiar su ID de voz. Guarda también este ID.

Lazuli.

0] y crear una cuenta y un nuevo grupo de recursos. Se le pedirá que cree una suscripción, pero puede elegir de forma segura una suscripción gratuita. Para obtener mejores resultados, intente seleccionar la región más cercana a su ubicación real.

A continuación, vaya al nuevo grupo de recursos y haga clic en crear, busque Azure AI Services y haga clic en crear, escriba toda la información y seleccione de nuevo la región más cercana.

Después de eso, vaya al nuevo servicio de Azure AI y haga clic en Claves y Endpoint, en el archivo wendigos.cfg ingrese CLAVE 1 para la CLAVE de la API de AZURE y Ubicación/Región para la región.

ChatGPT

y crear una cuenta. Perfil -> (en la sección Organización) Facturación -> Añadir un método de pago. Compra tantos créditos como quieras. Estos préstamos no caducan al final del mes.

A continuación, vuelva a su perfil -> Claves de API de usuario -> Ver claves de API de proyecto, crear un nuevo proyecto, crear una nueva clave en las claves de API de proyecto, guardarlo e introducir la clave de API ChatGPT en wendigos.cfg.

Si no puede encontrar la clave API, consulte aquí: https://help.openai.com/en/articles/4936850-where-do-i-find-my-openai-api-key.  

Configuración de configuración

Configure todas las claves de API (Elevenlabs, Azure, ChatGPT).

Establezca el ID de voz en Elevenlabs.

Establezca la región de Azure como la región recién seleccionada.

Establecer General -> Activar mod. y Experimental -> Respuestas en tiempo real a true.

Si desea que AI sepa quién es quién, agregue su nombre a su preferencia de nombre.

Configuración avanzada

Optimizar Eleven Labs para la velocidad: Acelera la reproducción de sonido al perder la mayor parte de la emoción en su voz. El estilo general y la emocionalidad del habla se reducen.

Probabilidad de voz: La probabilidad de que Masked reproduzca una línea de sonido pre-renderizada.

Posibles problemas.

Las líneas de voz no están sincronizadas.

Los jugadores escuchan voces diferentes (raramente, pero pueden ocurrir debido a saltos en el retraso).

La escritura fuera del búfer da como resultado errores de unidad (las filas generadas son demasiado grandes).

El equipo no tiene suficiente espacio de almacenamiento para modelos y líneas de sonido.

Cada reproductor almacena modelos de clonación de voz (1,75 GB), muestras de sonido (~10 MB) y pistas de audio (<500 KB cada una) localmente.

PREGUNTAS FRECUENTES.

¿Qué idiomas admite este mod?

Este mod utiliza XTTSv2 y admite 17 idiomas: inglés (en), español (es), francés (fr), alemán (de), italiano (it), portugués (pt), polaco (pl), turco (en), ruso (ru), holandés (nl), checo (cs), árabe (ar), chino (zh-cn), japonés (ja), húngaro (hu), coreano (hko), hindi (hi).

Eleven Labs está disponible en 32 idiomas. Para obtener más información, consulte https://elevenlabs.io/languages.  

¿Puedo usarlo con Mirage?

Todavía no se ha probado, pero probablemente no (al menos cuando el audio está activado).

¿Por qué se tarda tanto en crear clips de audio?

La primera vez que ejecute un mod, debe descargar el modelo ai (1,75 GB) y el script ai (350 MB). Estos pueden tardar mucho tiempo en descargarse dependiendo de la velocidad de Internet. Esto se hace solo una vez y debería ser más rápido en las generaciones posteriores. Los scripts también cargan modelos ai y crean archivos de audio para todas las líneas de sonido. Dependiendo de las capacidades de su equipo, esto puede tardar un tiempo.

¿Se traducirán automáticamente las réplicas de audio a mi idioma?

No, es necesario escribir una cadena de sonido en un archivo de texto en su idioma.

¿El clon de mi voz mantiene el mod?

No, los clones de sonido se crean durante el juego y no se guardan. Solo se guarda el archivo de audio.

¿Cuándo escucha Mod mi voz?

Si la reacción en tiempo real está activada, el mod solo escuchará mi voz durante la gira. Si la respuesta en tiempo real está desactivada, el mod no escuchará tu voz.

¿Puedo compartir mi cuenta de Eleven Labs? ¡Sí, puede compartir su cuenta de Eleven Labs! Todos pueden usar la misma cuenta. Solo tienes que configurar tu ID de voz en la configuración.

TODO.

[x] Añadir categorías de líneas rotas.

[x] Enmascarado debe jugar ciertas categorías de líneas (como Persiguiendo o Inactivo) dependiendo de lo que hacen.

[x] Permita a los jugadores usar las teclas de la API de ElevenLabs para clonar mejor los sonidos.

[AI genera nuevas líneas de sonido entre rondas.

[Permitir la clonación de voz de cualquier enemigo.

Créditos

https://github.com/coqui-ai/tts.

Skinwalkers mod por RugbugRedfern

@Kalthun y @notgarrett por su ayuda en probar esta moda.

La compañía letal Modding Discord