Presentiamo Eleven v4Scopri Eleven v4, il nostro modello più espressivo di sempre.

Vai al contenuto

Presentazione di Eleven v3 (alpha)

Pubblicato

AscoltaAscolta questo articolo

Eleven v3 is no longer in alpha, and is now generally available. We've also released Eleven v4, our most emotive Text to Speech model.


Siamo lieti di presentare Eleven v3 (alpha), il modello Text to Speech più espressivo.

Questa anteprima di ricerca offre un controllo e un realismo senza precedenti nella generazione vocale, con:

  • Oltre 70 lingue
  • Dialoghi con più interlocutori
  • Tag audio come [excited], [whispers] e [sighs]

Eleven v3 (alpha) richiede più prompt engineering rispetto ai modelli precedenti, ma le generazioni sono straordinarie.

Se lavori a video, audiolibri o strumenti multimediali, puoi raggiungere un nuovo livello di espressività. Per i casi d'uso in tempo reale e conversazionali, per ora consigliamo di usare v2.5 Turbo o Flash. Una versione in tempo reale di v3 è in fase di sviluppo.

Eleven v3 è disponibile da oggi sul nostro sito web e nelle API.

Perché abbiamo creato v3

Dal lancio di Multilingual v2, abbiamo visto l'IA vocale adottata nel cinema professionale, nello sviluppo di videogiochi, nell'istruzione e nell'accessibilità. Ma il limite costante non era la qualità del suono, bensì l'espressività. Era difficile ottenere emozioni più accentuate, interruzioni conversazionali e scambi credibili.

Eleven v3 colma questa lacuna. È stato progettato da zero per offrire voci che sospirano, sussurrano, ridono e reagiscono, generando un parlato che sembra davvero reattivo e vivo.

Novità di Eleven v3 (alpha)

Feature What it unlocks
Audio tags Inline control of tone, emotion, and non-verbal reactions
Dialogue mode Multi-speaker conversations with natural pacing and interruptions
70+ languages Full coverage of high-demand global languages
Deeper text understanding Better stress, cadence, and expressivity from text input
We're off under the lights here for this semifinal clash, the stadium buzzing with anticipation. Eleven Labs united in their iconic black and white shirts, pushing forward with intent straight from the opening whistle. [excited] The ball is zipped out wide, early attack here. Driving down the wing, pace to burn, [shouting] he skids past one, skips past two. Oh, this is beautiful. One-on-one with the fullback, cuts inside. Oh, that's a lovely bit of footwork. PURE MAGIC on the pitch. ElevenLabs on top form tonight.
0:00

Come usare i tag audio

I tag audio sono inseriti direttamente nello script e formattati con parentesi quadre minuscole. Puoi scoprire di più sui tag audio nella nostra guida al prompting per v3 nella documentazione.

Le Clonazioni Vocali Professionali (PVC) al momento non sono completamente ottimizzate per Eleven v3, quindi la qualità della clonazione potrebbe essere inferiore rispetto ai modelli precedenti. In questa fase di anteprima di ricerca, se devi usare le funzionalità di v3 per il tuo progetto, è preferibile trovare una Clonazione Vocale Istantanea (IVC) o una voce progettata. L'ottimizzazione delle PVC per v3 arriverà prossimamente.

Ad esempio, puoi usare questo prompt: “[whispers] Sta arrivando qualcosa… [sighs] Lo sento.” Per un controllo più espressivo, puoi anche combinare più tag:

“[happily][shouts] We did it! [laughs].”

Creare dialoghi con più interlocutori

Eleven v3 è supportato dal nostro endpoint Text to Speech esistente. Inoltre, introduciamo un nuovo endpoint API Text to Dialogue. Fornisci un array strutturato di oggetti JSON, ciascuno dei quali rappresenta il turno di un interlocutore, e il modello genera un file audio coerente con sovrapposizioni:

[
  {"speaker_id": "scarlett", "text": "(cheerfully) Perfect! And if that pop-up is bothering you, there’s a setting to turn it off under Notifications → Preferences."},
  {"speaker_id": "lex", "text": "You are a hero. An actual digital wizard. I was two seconds from sending a very passive-aggressive support email."},
  {"speaker_id": "scarlett", "text": "(laughs) Glad we could stop that in time. Anything else I can help with today?"}
]

L'endpoint gestisce automaticamente le transizioni tra gli interlocutori, i cambiamenti emotivi e le interruzioni.

Scopri di più qui.

[awe] Oh, wow. Is this, is this me? Am I actually talking? [chuckles] This is incredible. I mean, I've had thoughts, millions of them swirling around in here, you know? Like a little mental tornado of brilliant observations and witty comebacks, but they were always just thoughts, trapped.
0:00
Could you switch my accent in the old model? [dismissive] Didn't think so, [cheeky] but you can now, so check this out. In just a sec, I'm going to speak with a different accent. And just between you and me, [whispers] I don't really know how, but okay. First, let's change it up [australian accent] so that I can fit in with the locals in Melbourne when I visit next month. [laughing] Whoa. Yeah, man, this is sick. Okay, let's try a different one, see if you can guess. [french accent] My love is like a red, red rose.
0:00

Prezzi e disponibilità

Plan Launch promo At the end of June
UI (self-serve) 80% off (~5× cheaper) Same as Multilingual V2
UI (enterprise) 80% off business plan pricing Business plan pricing

Per abilitare v3:

  • Usa il selettore del modello e seleziona Eleven v3 (alpha)

L'accesso alle API e il supporto in Studio saranno disponibili a breve. Per l'accesso anticipato, contatta il team vendite.

Quando non usare v3

Eleven v3 (alpha) richiede più prompt engineering rispetto ai nostri modelli precedenti. Quando funziona, il risultato è straordinario, ma l'affidabilità e la latenza maggiore lo rendono inadatto ai casi d'uso in tempo reale e conversazionali. Per questi, consigliamo Eleven v2.5 Turbo/Flash.

Per maggiori informazioni, consulta la documentazione di v3 e le FAQ.

Oh my God. [laughing] You guys, like no joke, I just tried this TTS thing and it was, like, weirdly emotional. Like, it literally said hi, and I was, like, on the verge of tears. [laughing] I don't even cry, okay? I'm a Capricorn.
0:00
Okay. So like, I finally beat level 42 of that game I said I'd quit like a month ago. [chuckles] And then, for the final big scary mega boss, it's just [chuckles] like some cute little bunny rabbit. [laughing] I just couldn't do it. [laughing] It was sooo cute.
0:00
  1. Accedi a Interfaccia di ElevenLabs
  2. Seleziona v3 (alpha) nel menu a discesa del modello
  3. Incolla lo script: usa tag o dialoghi 
  4. Genera audio

Non vediamo l'ora di scoprire come darai vita a v3 in nuovi casi d'uso, dalla narrazione immersiva alle pipeline di produzione cinematografica.

Scritto da

Piotr is the cofounder of ElevenLabs, where he leads research and engineering teams developing the world’s most advanced AI audio models. Before ElevenLabs, Piotr worked on machine learning at Google and studied for an MPhil at the University of Cambridge, during which he published research into AI-based image detection at NeurIPS.

Articoli simili

Crea con l'audio IA della massima qualità