diciembre 10, 2023

Cómo la IA ayudó a que la voz de John Lennon fuera ‘pura’

¿Un último disco de los Beatles? Bueno, según una entrevista en BBC Radio 4 Hoy con Sir Paul McCartney, se lanzará a finales de este año y presenta voces de John Lennon extraídas de un viejo casete de demostración usando inteligencia artificial. Puedes escuchar la entrevista aquí, a partir de las 29:30.

Según McCartney, todo comenzó cuando el director Peter Jackson hizo Regresarsu documental de casi ocho horas sobre la realización de Déjalo ser. En la entrevista, McCartney dijo que Jackson «pudo sacar la voz de John de un casete pequeño y rígido donde tenía la voz de John y un piano».

Según un artículo más detallado en el sitio web de la BBCEmile de la Rey, editor de diálogos del documental, entrenado en computadora para aislar las voces de los Beatles del resto del audio, incluidos los sonidos de fondo y sus instrumentos. Como McCartney explicó el proceso, “Le dicen a la máquina, eso es una voz, esto es una guitarra. Pierde tu guitarra».

En realidad, las cosas son más complicadas que eso. Ars Technica informes que de la Rey trabajó con Paris Smaragdis, un investigador de aprendizaje automático, en la Universidad de Illinois Urbana-Champaign para crear una red neuronal capaz de aislar voces o instrumentos individuales y «re-sintetizarlos de una manera realista de hacer coincidir muestras entrenadas de esos instrumentos o voces de forma aislada”. En otras palabras, la IA recrea la voz objetivo al combinar información de la cinta con un modelo construido a partir de muestras aisladas de la misma voz. No es exactamente Lennon, pero es lo más parecido que se puede obtener.

«Entonces», dice McCartney, «cuando hicimos lo que sería el último disco de los Beatles… tomamos la voz de John y la pusimos pura a través de esta IA para poder mezclar el disco como lo haces normalmente».

Aunque McCartney no nombró la pista, la BBC dijo que probablemente De vez en cuando. Lennon compuso la pista en 1978 y la grabó, junto con varias otras demostraciones, para McCartney en su apartamento usando un estéreo portátil.

Dos canciones de la cinta resultante, Libre como un ave y Amor verdaderofue lanzado en la década de 1990, y los Beatles intentaron grabar De vez en cuando, pero la sesión está rota. Según la BBC, McCartney dijo que George Harrison se negó a trabajar en la canción, diciendo que la calidad del sonido de la voz de Lennon era ‘basura'». Aparentemente, hubo otros problemas técnicos con la canción.

Sin embargo, aparentemente, todos los problemas de sonido se han resuelto con IA. (Harrison murió en 2001). “Acabamos de terminar”, dijo McCartney en la entrevista, “se estrenará este año”.

Si bien esto parece un uso realmente positivo de la IA, en toda la industria de la música en general, la recepción se está quedando atrás. es mucho más mixto. Algunos artistas, como Grimesha adoptado la IA y permitió a los creadores usar su voz a cambio de una reducción de regalíasmientras otros, como picaduraestaba abiertamente enojado por esto.

También hay un elemento pirata en todo esto. Es bastante fácil para cualquier persona usar software como SoftVC VITS Conversión de voz de canto para entrenar un modelo basado en cualquier artista que quieran. En poco tiempo encontrarás videos de una versión de Lennon generada por IA pared de la maravilla de oasis, Rarezas espaciales de David Bowie y Ayer en Youtube.

Si bien todo esto es increíblemente desordenado y puede que no sea legal, a menos que las plataformas de transmisión como YouTube y TikTok tomen medidas enérgicas contra estas creaciones de IA como lo hacen con las infracciones de derechos de autor, es probable que continúen proliferando. Como dijo McCartney: «Da un poco de miedo pero es emocionante, porque es el futuro. Ya veremos a dónde nos lleva». Un camino largo y tortuoso, de hecho.