Welke LLM's worden ondersteund?

Elke LLM die tekst produceert. De SDK heeft ingebouwde streamextractie voor OpenAI (Responses API en Chat Completions API), Anthropic Messages API en Google Gemini API. Voor andere providers geef je een gewone string of een async iterable met stringchunks door.

Wat is het verschil tussen Speech Engine en ElevenAgents?

ElevenAgents is een volledig gehost platform waarop ElevenLabs de LLM, kennisbank en tools biedt. Speech Engine is voor ontwikkelaars die hun eigen LLM willen gebruiken en de gesprekslogica op hun eigen server willen beheren.

Welke serverframeworks worden ondersteund?

In TypeScript kun je Speech Engine koppelen aan elke Node.js HTTP-server (Express, Fastify of gewone http.createServer()), of een zelfstandige WebSocket-server uitvoeren. In Python biedt de SDK een zelfstandige server via engine.serve(), of kun je integreren met FastAPI, Starlette of elk ASGI-framework via engine.create_session().

Maak kennis met Speech Engine

Maak van je chatagent een spraakagent

Aan de slag Neem contact op met sales

Voeg met één prompt menselijk klinkende spraak toe aan je bestaande chatagent. Wij regelen de spraak. De LLM, RAG en architectuur van je agent blijven volledig onaangetast.

Voeg een spraaklaag toe aan je bestaande stack

Aan de slag

Speech Engine integreert boven op je bestaande stack. Er hoeft niets opnieuw te worden ontworpen en je tekstgebaseerde agent blijft onaangetast.

De complete spraaklaag in één integratie

Speech Engine combineert onze toonaangevende modellen voor spraak, transcriptie en spraakorkestratie in één pipeline, allemaal speciaal ontwikkeld om optimaal samen te werken.

Speech Engine

Speech to Text

Turn Detection

Interrupt Detection

Text to Speech

Audio Orchestration

Breid je chatbot uit met spraak

Spraak is de snelste en rijkste manier om informatie uit te wisselen, waardoor producten en diensten toegankelijker worden voor klanten.

Vloeiend gesprekverloop

Onze spraakmodellen zijn geoptimaliseerd voor gesprekken en bieden ultralage latentie in praktijkomgevingen.

Beurtwisseling en onderbrekingen afhandelen

Specifieke modellen verwerken overlappende spraak en wijzigingen midden in een zin, zonder dat je zelf custom logica hoeft te bouwen.

Wereldwijde dekking in meer dan 90 talen

Gebruik expressieve, menselijk klinkende stemmen die het volledige spectrum aan emoties ondersteunen in een breed scala aan talen.

Een spraakstack getest in miljoenen echte gesprekken

Elk onderdeel is ontwikkeld en geoptimaliseerd om optimaal samen te werken.

Speech to Text

Ons transcriptiemodel is geoptimaliseerd voor nauwkeurigheid in gesprekken en transcribeert spraak van gebruikers met een ultralage latentie van 80 ms.

Text to Speech

Expressieve, menselijk klinkende stemmen in meer dan 90 talen. Kies uit onze stembibliotheek met meer dan 11.000 stemmen of maak je eigen stem met Voice Cloning.

Beurtdetectie

Herken wanneer de gebruiker is uitgesproken of alleen pauzeert, zodat het transcript precies op het juiste moment naar je LLM wordt gestuurd.

Onderbrekingen afhandelen

Controleert op spraak van de gebruiker terwijl de agent praat. Stopt de afspeelfunctie en schakelt meteen terug wanneer de gebruiker onderbreekt.

Spraakactiviteitsdetectie

Filtert spraak van achtergrondgeluid bij de invoer, zodat alleen schone audio het transcriptiemodel bereikt.

Audio-orkestratie

Beheert de volledige levenscyclus van spraak, van het vastleggen van gebruikersaudio tot het leveren van het gesproken antwoord van de agent.

Voeg Speech Engine met één prompt toe aan je agent

Installeer met één opdracht via onze skill. De skill stelt alles in wat je nodig hebt, zodat je met één prompt van chat naar spraak gaat.

Server SDK

Koppel Speech Engine aan je server. Ontvang transcripts, stuur ze door naar je LLM en stuur het antwoord terug, allemaal in een paar regels.

import { ElevenLabsClient } from "@elevenlabs/elevenlabs-js";
import "dotenv/config";
const elevenlabs = new ElevenLabsClient({
  apiKey: process.env.ELEVENLABS_API_KEY,
});
const engine = await elevenlabs.speechEngine.create({
  name: "My Speech Engine",
  speechEngine: {
    // Note we use the wss protocol instead of https
    wsUrl: "wss://abc123.ngrok.io/ws",
  },
});
console.log("Speech Engine ID:", engine.engineId);

ElevenLabs UI

Gebruik vooraf gebouwde UI-componenten, zoals agentorbs, golfvormen en chatwidgets, of bouw je eigen oplossing met dezelfde SDK.

ElevenLabs UI bekijken

Chat interface with options for customer support and text input field. "Yes, for John Johnson please" visible.

Client SDK

Start vanuit de browser of mobiele app in drie regels een gesprekssessie. Dezelfde clientintegratie als ElevenAgents, dus later upgraden vereist geen wijzigingen.

import express from "express";
import { ElevenLabsClient } from "@elevenlabs/elevenlabs-js";
import "dotenv/config";

const app = express();
const elevenlabs = new ElevenLabsClient({ apiKey: process.env.ELEVENLABS_API_KEY });
const speechEngineId = "seng_8k3m9xr4hjnfg983brhmhkd98n6";

app.get("/api/token", async (req, res) => {
  const { token } = await elevenlabs.conversationalAi.conversations.getWebrtcToken({ agentId: speechEngineId });
  res.json({ token });
});

app.listen(3002, () => console.log("Token server listening on port 3002"));

Beveiliging op enterpriseniveau

Ons platform is ontworpen voor implementaties op schaal met databescherming op enterpriseniveau, waaronder ondersteuning voor SOC 2-, HIPAA- en AVG-compliance. EU Data Residency en Zero Retention Mode zijn beschikbaar voor strengere datacontrole.

Meer informatie