A Vercel AI Gatewayre érkezett a Drama 3 beszédmodell

A Fish Audio Drama 3 szövegből beszédet készítő modellje elérhetővé vált a Vercel AI Gatewayen. Az előzetes verzió 30 napig, november 12-ig 80 százalékos kedvezménnyel használható.
- A Fish Audio Drama 3 elérhető a Vercel AI Gatewayen.
- A modell természetes nyelvű utasításokkal vezérelhető.
- Támogatja a több beszélős párbeszédeket és a külön hangokat.
- November 12-ig 80 százalékos kedvezménnyel használható.
- Az AI Gateway felár és inferencia utáni platformdíj nélkül tükrözi a szolgáltatói árakat.
Természetes nyelvű utasításokkal irányítható a beszéd
A Vercel október 13-i bejelentése szerint a Drama 3 olyan szövegből beszédet készítő modell, amellyel a fejlesztők természetes nyelvű utasításokat adhatnak a hang előadásmódjára. A modell jelenleg előzetes verzióban érhető el az AI Gatewayen.
Az utasítások szögletes zárójelben adhatják meg például a kívánt érzelmet vagy beszédtempót. A szövegben a hangokat és a szüneteket is el lehet helyezni. Egyes szavak előadásmódja címkékkel módosítható, például a <whisper> és az <emphasis> elemekkel. A Vercel szerint az instrukciók nyelve eltérhet a kimondott szöveg nyelvétől.
Hangalámondásra és párbeszédekre is használható
A Drama 3-at a bejelentés hangalámondásokhoz, szereplők párbeszédeihez és hangalapú történetmeséléshez ajánlja. A modell több beszélőt kezelő párbeszédeket is támogat, így minden szereplőhöz külön hang rendelhető.
Az AI Gatewayen a modell neve fish-audio/drama-3. A Vercel példakódja az AI SDK experimental_generateSpeech függvényét használja. A bemeneti szövegben egy megnyugtató előadásmódra vonatkozó utasítás, egy suttogva előadandó mondatrész és egy konkrét hangazonosító szerepel. A példa MP3 formátumú fájlt állít elő, amelyet a kód a speech.mp3 fájlba ment.
Kedvezmény és egységes hozzáférés
A Drama 3 az AI Gatewayen az elérhetőség kezdetétől számított 30 napig, november 12-ig 80 százalékos kedvezménnyel használható. A modell kipróbálható a Vercel modelljátszóterén is.
Az AI Gateway egységes API-t kínál a modellek meghívásához, miközben lehetővé teszi a használat és a költségek követését. A szolgáltatás újrapróbálkozási és tartalékmodell-beállításokat, valamint teljesítmény-optimalizálást is támogat a szolgáltatónál elérhetőnél magasabb rendelkezésre állás érdekében.
A Vercel közlése szerint az AI Gateway a szolgáltatók árait tükrözi felár nélkül, és az inferencia után nem számít fel platformdíjat. Ez a saját kulcs használatával indított, BYOK-kérésekre is vonatkozik. A rendszer egyebek mellett egyedi jelentéseket, a felhasználói adatok megőrzése nélküli működés támogatását, API-kulcsokra beállítható költségkereteket és útválasztási szabályokat is kínál.
Vercel: Drama 3 now available on AI Gateway


