Ich will das auf keinen Fall schlecht reden, aber wurde hier die Stimme wirklich extrahiert oder wurde sie nicht eher durch die KI nachgebaut?

zu 100% extrahiert. das ist zu 100% John's Stimme. Das auf dem Tape vorkommenden Tonarten wurden in einzelne Stems extrahiert. Zum Test wurden diese Stems wieder zusammen gefuegt und ergaben danach 1 zu 1 das Original.

Die KI wurde anhand von unzaehligen original Nagra Aufnahmen der Beatles trainiert.

Danke für die Erläuterung! Zugegebenermaßen kenne ich mich mit der Bearbeitung von Audiodaten nicht aus. Ich habe für mich Parallelen zur Bildbearbeitung gezogen. Ich habe hier beispielsweise ein vom Motiv her gutes Landschaftsfoto, das allerdings stark durch Dunst beeinträchtigt ist. Dadurch fehlen die Kontraste und insbesondere auch die Farben. Die Farbinformation ist einfach nicht im Bild enthalten. Mit konventionellen Methoden ist daher nichts zu machen. Jetzt könnte man natürlich hergehen und eine KI mit vergleichbaren Landschaftsfotos füttern, so dass sie anschließend die fehlenden Informationen ergänzt und ein der Wirklichkeit entsprechendes Bild erzeugt, wobei natürlich auch alle vorhandenen Bildinformationen genutzt werden. Aus meiner Sicht wäre das dennoch ein KI generiertes Bild. Aber gut möglich, dass das bei Audiodaten anders funktioniert.

Bei Audio extraction mittels AI muss man sich das so vorstellen. Du fütterst das System erstmal mit sauberen Beispielen des zu extrahierenden Materials. In diesem Fall saubere Studioaufnahmen von Lennon's Stimme wie er singt. Anhand dieser Beispiele lernt das System in ersten Schritten wonach es suchen muss. Anschliessend nimmt man Aufnahmen der gleichen Stimme, die man anfangs als Beispiel genutzt hat. Diesmal jedoch abgemischt in Liedern. Das System muss dann die Stimme aus diesen Liedern extrahieren. Dann füttert man das Extrahierte, was natürlich noch nicht ganz sauber ist wieder ins System zum Vergleich mit der original Stimme. Das wiederholt man wieder und wieder und wieder bis das System ganz genau weiss wonach es suchen muss. Anschließend setzt man das System langsam auf das alte Tonband an, aus welchem man die Stimme von John extrahiert möchte. Logischerweise sind die ersten Versionen nicht sauber. Diese kontaminierten Versionen füttert man wieder und wieder ins System, bis sie sauber sind. Das ist eine sehr vereinfachte Beschreibung, aber in etwa so funktioniert es.

So geht man für alle Tonspuren vor, welche man haben möchte. Im Fall der Beatles hat man sogar alte in Restaurants aufgezeichnete Gespräche soweit aufgedröselt, dass man am Ende einzelne Tonspuren von Leuten im Hintergrund, von Kaffeemaschinen, von Umgebungslärm, von rumrutschenden Stühlen, etc hatte. Man kann erst mit dem Ergebnis zufrieden sein, wenn man alle einzelnen extrahierten Stems wieder zusammenlegt und dann das gleiche dabei rauskommt wie das Ausgangsmaterial.

FlyingSloth
Danke für die ausführliche Erklärung! Das klingt nach einem aufwändigen Prozess. Aber schön, dass man auf diese Weise die alten Aufnahmen originalgetreu aufbereiten kann.

Hier ist schonmal der Link zu dem Musik Video welches diese Woche Premiere hat.

FlyingSloth

Danke für die Erklärung. Habe mich heute Morgen noch gefragt, wie das wohl genau gemacht wurde.

Peter Jackson hat ja einen beeindruckenden Lebenslauf 👍. Und unser FlyingSloth tummelt sich also scheinbar in der digitalen Medienbranche!?. Bisher vermutete ich dich in der Flugzeugbranche, auch wegen deinem Forumsname und den öfter geposteten Fliegern am Airport. Bist du von deiner bayrischen Heimat nach Neuseeland ausgewandert oder dort als „Gastarbeiter“ tätig? Oje, Oje, Fragen über Fragen. So oder so, ich wünsche dir eine weiterhin gute Zeit 😉🍾😊.

Wer mal selbst Stimmen und Gesang trennen will empfehle ich vocalremover.org .
Ist natürlich nicht eine speziell trainierte KI, aber doch schon verblüffend was hier möglich ist.

Vielen Dank! Tolle Geschichte, tolles Ende tolles Lied. Danke für den Beitrag!

... aber ob das auch in seinem Sinne ist? Hat für mich irgendwas von "Leichenfledderei".
Oder aber einfach business...

Oasis waren sowieso die besseren Beatles... schwupps, schnell weg.

Für mich als jüngeren Beatles-Fan, finde ich die Idee und die Umsetzung klasse. Toller Song! 😀

Vielen Dank für den Hinweis und die Erklärungen.

+ 1

SYS64738

OMG

Die Bealtes haben jetzt zum Song auch ein Musikvideo veröffentlicht! 😉

Also echt irre, habe gerade einmal einen meiner Songs damit bearbeitet.
Das Ergebnis haut mich um.
Tolles Forum, tolle Tipps. Ich bin begeistert.
Natürlich auch als Beatles Fan, obwohl ich die neue Beatles Single nicht wirklich soo toll finde. Da gab es zu lebend Zeiten doch besseres.

Bin tatsächlich in der Film Branche tätig. Genauer Visual Effects. Die Flieger sind nur ein Hobby. Meine Drohnen eine Mischform aus Hobby und Beruf.

Kein Gastarbeiter, sondern komplett ausgewandert.
In Deutschland gibt es in meinem Beruf nicht die Möglichkeiten wie hier.