Meta veröffentlicht generative KI „AudioCraft“ für Audio als Open Source

• Generative KI, die aus textbasierten Benutzereingaben hochwertiges Audio und Musik erzeugt
• Besteht aus MusicGen + AudioGen + EnCodec-Decoder, die jeweils für Musik, Audiogenerierung und Audiokomprimierung zuständig sind
• Kann zu Forschungszwecken und dazu genutzt werden, das Verständnis von Menschen für die Technologie zu erhöhen
• Professionelle Musiker können neue Stücke komponieren, ohne auch nur einen einzigen Ton auf einem Instrument zu spielen, und Indie-Game-Entwickler können realistische Soundeffekte und Hintergrundgeräusche kostengünstig umsetzen

[ticonweb]

Ich weiß nicht, ob das mit dem veröffentlichten Source möglich ist, aber wenn man es in Digital-Audio-Workstation-Software als instrumentenspezifische Tracks einfügen könnte, wäre der praktische Nutzen wirklich enorm.

Danke für die Nachricht

[GN⁺]

Hacker-News-Kommentare

• Generative KI-Modelle wie AudioCraft, die in der Werbung eingesetzt werden, erleichtern A/B-Tests und machen kreative Arbeitskräfte weniger notwendig.
• Meta hebt hervor, dass patentierte Daten verwendet werden und unbezahlte Daten nicht genutzt werden, um sich von OpenAI abzugrenzen.
• Die in AudioCraft verwendete CC-BY-NC-Lizenz gilt nach der Open-Source-Definition nicht als Open-Source-Lizenz.
• Es gibt die Sorge, dass durch die Flut von KI-generierten Inhalten die Vergangenheit verloren gehen könnte und es schwieriger wird, echte von falschen Informationen zu unterscheiden.
• Es gibt Spekulationen über die Fähigkeit, auf Basis bestehender Musikbibliotheken Musik zu generieren.
• Manche glauben, dass die Kontrolle von Urheberrechtsinhabern über die Dateneingaben von KI-Modellen in eine Gesellschaft der "Gedankenkriminalität" führen könnte.
• Warum Meta sich entschieden hat, solche Modelle als Open Source zu veröffentlichen, ist nicht klar.
• Einige Nutzer haben Schwierigkeiten, Dokumentation zur Installation und zur Nutzung der Modelle zu finden.
• Zwischen MBD von AudioCraft und den EnCodec-Varianten ist ein Unterschied in der Klangqualität deutlich hörbar.
• Ein Kommentator schlägt vor, dass Spotify mit generativen KI-Modellen wie AudioCraft eigene Musik erzeugen und zur Verbesserung der Profitabilität die Abhängigkeit von Labels verringern könnte.