ElevenLabs kündigt SFX v3 an, die neueste Version seines Modells zur Erzeugung von Soundeffekten. Ab sofort in ElevenCreative und über ElevenAPI verfügbar, wird es als zuverlässiger bei Prompting beschrieben, das mehrere Sounds gleichzeitig beschreibt, mit überzeugenderer Musik und Stimmen sowie einem saubereren und natürlicheren Klang als SFX v2 in Benchmark-Tests.
Eine starke Szene beruht selten auf einem einzigen Klang. Eine Fußballsequenz kann eine jubelnde Menge, einen fallenden Ball und dann dieselbe Menge benötigen, die Sekunden später pfeift. Bisher erforderte die Erzeugung all dieser Elemente aus einer einzigen Eingabeaufforderung zahlreiche Versuche.
Mehrere Sounds in einer einzigen Eingabeaufforderung
SFX v3 folgt mehreren Anweisungen innerhalb desselben Textes besser. Somit finden sich mehr der beschriebenen Sounds im generierten Audio. Laut ElevenLabs kann der Nutzer die Sounds beschreiben, die seine Szene ausmachen, und hören, wie sie miteinander interagieren.
Für Videomacher, Spieleentwickler oder andere Projekte besteht die vorgeschlagene Methode darin, von der Hauptaktion auszugehen, Umgebungsgeräusche hinzuzufügen und dann deren gemeinsames Ergebnis anzuhören. Die Beschreibung kann anschließend angepasst werden, um sich dem gewünschten Ergebnis anzunähern.
Musik, Stimmen und Klangqualität
Das Modell verbessert auch die Erzeugung, wenn die Eingabeaufforderung Musik und Stimmen enthält. Es ermöglicht laut Unternehmen die Erstellung von Effekten, die eine musikalische Phrase oder eine vokale Interpretation mit Umgebungs- und Alltagsgeräuschen kombinieren.
Die Qualität jedes einzelnen Sounds beeinflusst die Glaubwürdigkeit einer Szene. Ein Gong muss seinen Nachhall behalten, eine Glocke ihr Klingen und eine Pfeife ihre Note halten, ohne schrill oder knisternd zu werden. ElevenLabs gibt an, dass SFX v3 die Gesamtklangqualität verbessert und die Wahrscheinlichkeit solcher unerwünschten Artefakte bei Gongs, Glocken und Pfeifen reduziert. Das resultierende Audio bewahrt den Charakter des gewünschten Klangs besser, egal ob er im Vordergrund steht oder als Hintergrunddetail dient.
Verfügbarkeit
In ElevenCreative können Effekte im Tab Sound Effects generiert und erkundet, zu Flows hinzugefügt oder in Studio in Projekte integriert werden. SFX v3 ist auch über die mobile App von ElevenLabs zugänglich. Entwickler können das Modell wiederum über ElevenAPI, seine Programmierschnittstelle, nutzen, um die Soundeffektgenerierung in ihre eigenen Produkte und Workflows zu integrieren.
