Google MusicLM AI wird eingeführt, ein bahnbrechendes KI-System, das in der Lage ist, Musikstücke in jedem Genre mit einer Textbeschreibung zu komponieren. Trotz seiner beeindruckenden Fähigkeiten hat sich das Unternehmen entschieden, auf Nummer sicher zu gehen und hat derzeit keine Pläne, es öffentlich zugänglich zu machen. Während frühere generative KI-Systeme für Musik, wie Riffus und Dance Diffusion, Versuche unternommen haben, Songs zu komponieren, waren sie durch technische Einschränkungen und unzureichende Trainingsdaten eingeschränkt, was zu Kompositionen führte, denen es an Komplexität und High-Fidelity mangelt. Google MusicLM AI stellt jedoch einen bedeutenden Sprung nach vorne dar und ist möglicherweise das erste System, das diese Herausforderungen meistert.
whoa, das ist für mich größer als ChatGPT.
google fast gelöst musikerzeugung, würde ich sagen. https://t.co/s9PQaJ5R6A– Keunwoo Choi (@keunwoochoi) 27. Januar 2023
Lernen Sie Google MusicLM AI kennen, das erste bedeutende Text-zu-Musik-Tool
Ein kürzlich akademische Abhandlung hebt die Entwicklung von MusicLM hervor, einem KI-System, das auf einem riesigen Datensatz trainiert wurde, der aus 280.000 Stunden Musik besteht. Ziel des Systems war es, Songs mit „erheblicher Komplexität“ auf der Grundlage textueller Beschreibungen zu generieren, wie „bezaubernder Jazz-Song mit einprägsamem Saxophon-Solo und Solo-Sänger“ oder „Berliner 90er-Techno mit tiefem Bass und starkem Kick“. Die von Google MusicLM AI produzierte Ausgabe ist zwar nicht unbedingt so einfallsreich oder musikalisch einheitlich wie ein menschlicher Künstler, besitzt aber dennoch eine bemerkenswerte Ähnlichkeit mit von Menschen komponierter Musik.
Es wäre eine Untertreibung auszudrücken, wie beeindruckend die von Google MusicLM AI produzierte Ausgabe ist, insbesondere angesichts der Abwesenheit menschlicher Musiker oder Instrumentalisten im Erstellungsprozess. Obwohl MusicLM mit manchmal langen und komplexen Beschreibungen versehen ist, hat es die bemerkenswerte Fähigkeit, komplizierte Elemente wie instrumentale Riffs, melodische Linien und emotionale Untertöne in seine Kompositionen zu integrieren.
Die Fähigkeiten von Google MusicLM AI gehen über die bloße Generierung kurzer Musikschnipsel hinaus. Das Google-Forschungsteam demonstrierte die Fähigkeit des Systems, auf bereits vorhandenen Melodien aufzubauen, egal ob sie gesummt, gesungen, gepfiffen oder auf einem Instrument gespielt werden. Darüber hinaus hat MusicLM die Fähigkeit, mehrere aufeinanderfolgende Beschreibungen zu nehmen und eine melodische Erzählung zu erstellen, die sich über mehrere Minuten erstreckt, wodurch sie sich für einen Film-Soundtrack eignet.
Die Vielseitigkeit von Google MusicLM AI erstreckt sich auf die Steuerung durch eine Kombination aus Bildern und Untertiteln sowie auf die Erzeugung von Audio, das den Klang eines bestimmten Instruments innerhalb eines bestimmten Genres nachahmt. Das Fachwissen des KI-„Musikers“ kann ebenfalls angepasst werden, sodass das System Musik erzeugen kann, die von verschiedenen Orten, Zeiträumen oder bestimmten Zwecken beeinflusst wird, z. B. erhebende Musik für körperliche Übungen.
Sie können Google MusicLM AIs erreichen GitHub-Seite um einige Hörproben anzuhören!
Ist Google AI Music Composer wirklich gut?
Es ist jedoch wichtig zu beachten, dass Google MusicLM AI nicht fehlerfrei ist. Ein Teil der vom System erzeugten Ausgabe kann eine unzusammenhängende Qualität aufweisen, ein natürliches Ergebnis des Trainingsverfahrens. Die Fähigkeit des Systems, Gesang einschließlich Chorharmonien zu erzeugen, bleibt hinter den Erwartungen zurück. Die generierten Texte sind oft nicht nachvollziehbar, bestehen aus gebrochenem Englisch oder sinnlosem Kauderwelsch, und die synthetisierten Vocals lassen die Raffinesse eines einzelnen Künstlers vermissen und klingen stattdessen wie ein Hybrid aus verschiedenen Stimmen.
Googles neues Musikmodell MusicLM ist der Durchbruch der Woche.
Hier ist es in Aktion.
Beschreibe einfach die Musik und es wird der Track generiert: pic.twitter.com/xAhzHfGnMH
— Pete (@nonmayorpete) 27. Januar 2023
Trotz seiner beeindruckenden Fähigkeiten erkennen die Google-Forscher die zahlreichen ethischen Dilemmata an, die ein System wie MusicLM mit sich bringt, einschließlich der Wahrscheinlichkeit, urheberrechtlich geschütztes Material aus den Trainingsdaten in die generierten Songs zu integrieren. Während ihrer Experimente entdeckten sie, dass etwa 1 % der generierten Musik eine exakte Kopie der Songs aus dem Trainingsdatensatz war. Diese hohe Duplizierungsrate hat die Forscher dazu veranlasst, sich gegen die Veröffentlichung von Google MusicLM AI in seiner jetzigen Form zu entscheiden.
„Wir erkennen das Risiko einer potenziellen Veruntreuung kreativer Inhalte im Zusammenhang mit dem Anwendungsfall an. Wir betonen nachdrücklich die Notwendigkeit weiterer zukünftiger Arbeiten zur Bewältigung dieser Risiken im Zusammenhang mit der Musikerzeugung“, erklärten die Co-Autoren des Papiers.
Wenn MusicLM oder ein ähnliches System in der Zukunft veröffentlicht würde, würden wahrscheinlich erhebliche rechtliche Probleme entstehen, unabhängig davon, wie das System vermarktet oder positioniert wird, ob als Hilfe für Künstler oder nicht. Dies ist eine Sorge, die bereits in Bezug auf einfachere KI-Systeme aufgekommen ist. Im Jahr 2020 reichte das Plattenlabel von Jay-Z Urheberrechtsverletzungen gegen den YouTube-Kanal Vocal Synthesis ein, weil er mithilfe von KI Coverversionen von Jay-Z-Songs erstellt hatte, darunter Billy Joels „We Didn’t Start the Fire“. Nachdem die Videos zunächst entfernt wurden, stellte YouTube sie später wieder her und stellte fest, dass die Deaktivierungsanträge „unvollständig“ waren. Die Legalität von KI-generierter Musik bleibt eine Grauzone.
Google kündigt MusicLM an: ein Modell zur Generierung von Musik aus Text. Hier sind einige verrückte Dinge, die es tun kann:
1. Bei gegebenem Audio einer Melodie kann es neue Musik erzeugen, die von dieser Melodie inspiriert ist, die durch Eingabeaufforderungen angepasst wird! Hier ist jemand, der bella ciao summt und sich in einen A-cappella-Chorus, EDM usw. verwandelt. pic.twitter.com/HKDnXI1C8U
— blutende.ai (@bleedingedgeai) 27. Januar 2023
Da die KI-Technologie für die Musikerzeugung weiter voranschreitet, bleiben Fragen zu ihrer Legalität im Vordergrund. Eric Sunray, ein juristischer Praktikant bei der Music Publishers Association, hat a weißes Papier Darin wird argumentiert, dass Systeme wie MusicLM die nach dem US-amerikanischen Urheberrechtsgesetz geschützten Rechte verletzen, indem sie aus urheberrechtlich geschütztem Material, das in ihrer Ausbildung verwendet wird, „Wandteppiche aus kohärentem Audio“ erstellen.
Diese Bedenken wurden in Bezug auf KI-Systeme in anderen Bereichen, einschließlich Bild-, Code- und Textgenerierung, wiederholt, da ihre Trainingsdaten häufig ohne Zustimmung der Ersteller aus dem Internet bezogen werden. Die Frage der fairen Nutzung wurde auch nach der Veröffentlichung von OpenAIs Jukebox diskutiert, wobei einige die Verwendung von urheberrechtlich geschütztem Material beim Training von KI-Modellen in Frage stellten.
Wie Andy Baio von Waxy meint, wird spekuliert, dass Musik, die von KI-Systemen generiert wird, aus der Sicht eines Benutzers als abgeleitetes Werk angesehen werden kann, wodurch nur die Originalkomponenten urheberrechtlich geschützt werden. Die Definition dessen, was „Originalität“ in diesem Zusammenhang ausmacht, bleibt unklar, was die kommerzielle Verwertung solcher Musik zu einem Neuland macht. Fällt die erzeugte Musik jedoch in den Bereich der fairen Verwendung wie Parodie oder Kommentar, wird die Sache weniger kompliziert. Dennoch prognostiziert Baio, dass das Gerichtssystem von Fall zu Fall vorgehen muss, um zu einem Urteil zu gelangen.
Da sich die Rechtslandschaft weiter entwickelt, könnte Klarheit in der Frage der musikerzeugenden KI unmittelbar bevorstehen. Mehrere laufende Klagen, darunter eine, die sich mit den Rechten von Künstlern befasst, deren Arbeit ohne ihre Genehmigung oder ihr Wissen beim Training von KI-Systemen verwendet wird, werden sich wahrscheinlich auf die Branche auswirken. Nur die Zeit wird den Ausgang dieser Gerichtsverfahren zeigen.
Kennen Sie den neuen KI-Textklassifizierer von OpenAI zur Erkennung von KI-generierten Texten?
Source: Google MusicLM AI: Verwandle Text in … Musik!