Lyria
Musikgenerierungsmodell von DeepMind hinter Music AI Sandbox
Lyria ist das Musikgenerierungsmodell von Google DeepMind, das aus Textbeschreibungen fertig produzierte Audiotracks erstellt. Die über Vertex AI verfügbare Version Lyria 2 erzeugt Instrumentalmusik anhand von Textbeschreibungen, unterstützt viele Genres und erfasst die Klangfarbe einzelner Instrumente. Die Streaming-Variante Lyria RealTime erzeugt fortlaufend Musik über eine WebSocket-Verbindung und reagiert auf Änderungen von Parametern in Echtzeit. DeepMind versieht jeden Clip mit einem SynthID-Wasserzeichen, sodass sich die KI-generierte Audiodatei später erkennen lässt.
Das Modell ergänzt Googles weitere Werkzeuge für generative Medien: Imagen für Bilder und Veo für Videos. Zusammen sind sie Teil des Vorhabens, hochwertige Generierung für Entwicklerinnen und Entwickler auf der Google-Cloud-Plattform Vertex AI sowie in Verbraucherprodukten wie der Gemini-App bereitzustellen. Zur Zielgruppe gehören Musikerinnen, Musiker und Produzenten, die mit dem gemeinsam mit Künstlern entwickelten Music AI Sandbox komponieren, sowie Entwicklerteams, die über die API Musikfunktionen in eigene Apps integrieren.