Nederlandstalige editie
Realtime API en Voice Agents
Deze cursus behandelt de Realtime API, Whisper, TTS en het bouwen van complete voice agents voor telefonie en assistenten.
18 lessen ca. 1 h 15 min Ontwikkelaar
Wat u leert
- Een WebSocket-sessie tot stand brengen met de Realtime API en lifecycle-events beheren
- Bidirectionele audio streamen terwijl onderbrekingen en beurtbeheer worden afgehandeld
- Audiobestanden transcriberen en vertalen met Whisper terwijl de kwaliteit op basis van de taal wordt geoptimaliseerd
- Spraak genereren met de TTS API door stem, prosodie en snelheid te regelen
- Een voice agent bouwen die is geïntegreerd met telefonie en de latentie ervan in productie beheersen
Cursusoverzicht
- Voor wie
- Ontwikkelaars, engineers en integrators die ChatGPT via API in hun toepassingen willen benutten.
- Vereisten
- Vermogen om Python en JSON te lezen, basiskennis van de command line. Een API-sleutel van het OpenAI-platform om de voorbeelden uit te proberen.
- Duur
- 1 h 15 min — 18 lessen
- Modaliteiten
- 100% online zelfgestuurde cursus, 24/7 toegankelijk via een browser. Vooruitgang wordt opgeslagen, hervatting op elk moment. Geschatte duur: 45 min.
- Toetsing
- Validatiequizzen geïntegreerd in de cursus. Elke les eindigt met de belangrijkste leerpunten, ter ondersteuning van zelfevaluatie.
- Toegankelijkheid
- Zelfgestuurde cursus toegankelijk voor personen met een handicap: tekstinhoud compatibel met schermlezers, toetsenbordnavigatie en conforme contrasten. Voor aanpassingsbehoeften kunt u e-mailen naar [email protected].
- Prijs
- Gratis
Inhoud van de cursus
- 01 WebSocket-architectuur van de Realtime API
- 02 Sessies, gebeurtenissen en levenscyclus
- 03 Bidirectionele audiostreaming
- 04 Functieaanroepen in realtime
- 05 Onderbrekingen en beurtbeheer
- 06 Een audiobestand transcriberen: gpt-transcribe en Whisper
- 07 Ondersteunde formaten en talen
- 08 Automatische vertaling
- 09 De transcriptiekwaliteit optimaliseren
- 10 De TTS-API: Spraak genereren
- 11 Beschikbare stemmen en aanpassing
- 12 Real-time audiostreaming
- 13 Prosodie en spreektempo regelen
- 14 Bouw een volledige voice-agent
- 15 Telefonie-integratie (Twilio, enz.)
- 16 Assistent vocal multimodal
- 17 Latentie en optimalisatie in real-time
- 18 Productie: Schalen en Monitoring