cambian una canción de Charly García

Para entrenar la inteligencia artificial, un desarrollador investigó los mejores medios para extraer una voz limpia de Charly García.

Por iProfesional

31/03/2023 – 12:49

El usuario de Twitter @petacas_posting publicó el 20 de marzo la canción Spector del último disco de charly garcia, Random (2017), cantada con la voz del compositor de 1982/1983. “Reconstrucción vocal de Charly García de principios de los 80 utilizando inteligencia artificial” (IA), así lo llamó.

El usuario comentó sobre el proceso: «Entrené una IA llamada diff-SVC con grabaciones en vivo de Charly que incluyen parte del Luna Park del ’83, y parte del disco ‘No llores por mí Argentina'».

«No es una IA al publico como estan apareciendo por eso no quise dar datos muy especificos del proceso ya que es complejo e implica tener noción de código y potencia computacional. Para llegar a esos resultados, tuve que ser meticuloso y paciente. Para entrenar a la IA, necesitaba investigar el mejor medio para sacarle una voz limpia a Charly”, explicó al diario Tiempo Argentino.

“Luego procesé, separé la voz de los instrumentos (con otra IA que tengo guardada, Demucs) y cortamos los audios en porciones de unos segundos para dárselos a la IA para ‘entrenar'», explicó.

“En total me quedarán aproximadamente 150 audios y el entrenamiento en sí me habrá llevado unas 9 horas. Aquí es donde entra en juego el oficio: la minuciosa selección, revisión y preprocesamiento de los conjunto de datos (audios con partes de su voz)”, advirtió.

También explicó cómo logró trabajar con dos recitales como fuentes: «Al ser una mezcla entre audios de dos recitales diferentes, se diferencian tanto en la calidad del sonido como en la técnica vocal. El de Luna es más de voz de pecho y grito, y el del álbum con Seru Girán Es más un falsete, una voz aguda».

un collage vocal

Por lo tanto, «la IA hace una mezcla de ambos según el contexto del audio de referencia proporcionado (porque sí, para que funcione necesita un audio de referencia cantando lo que quieras convertir a la voz de Charly)”, dijo.

Si, por ejemplo, «el sujeto canta bajito, quizás te ponga en la voz de falsetesi el sujeto canta fuerte, ponle voz de pecho, y así… Si en el hipotético caso tuviera en mi poder pistas de estudio oficiales de la voz de Charly, pues todo tendría la misma calidad de sonido, así que las transiciones entre modos de canto sería mucho más homogéneo», reconoció.

Dada la repercusión del tema, el público le pide que convierta más canciones: «Me dicen canciones como loco y lo que trato de hacerles entender es que necesito ‘molestar’ a un tercero para que los cante y me pueda convertir a la voz de Charly, ya que no me da la voz, no soy cantante”, aclaró.

Experimente con otra IA similar llamada So-vits SVC: «Tiende a dar mejores resultados, debo decir… Ya tengo Charly AI v3 conmigo. Estuve haciendo varias pruebas y reentrenándome para refinar los detalles. Más canciones vendrán más tarde, y otras voces Quizás podamos traer de vuelta (al difunto compositor Gustavo) cerati? Quién sabe…».

¿Podrá la IA hacer que suene completamente real en unos años? Para este usuario, no es necesario esperar tanto tiempo, sino que depende de la calidad y el tipo de fuente de grabación que esté disponible.

«Por supuesto, de hecho, puede sonar completamente real si entrenas con audio completamente limpio en el estudio y/o en un entorno controlado. Idealmente, tendrías pistas vocales oficiales y/o temas de estudio de Charly, pero como no existir, tienes que hacer todo casero«, contestada.