Nederlandstalige editie
Voice Agent API: realtime gesprekken
Bouw voice-agents via WebSocket: VAD, spraakgestuurd functieaanroepen, gebeurtenissen en SIP-telefonie-integratie.
16 lessen ca. 1 h Ontwikkelaar
Wat u leert
- Een realtime WebSocket-sessie openen die is geverifieerd met ephemeral tokens en geconfigureerd via session.update
- PCM- en G.711-audiostreams verwerken terwijl automatische spraakdetectie wordt beheerd
- De cyclus van gebeurtenissen van client-naar-server en server-naar-client van een gesprek afhandelen
- Spraakgestuurd functieaanroepen en ingebouwde tools activeren tijdens een live uitwisseling
- Een voice-agent verbinden met telefonie via SIP en LiveKit, en audio converteren in Python
Cursusoverzicht
- Voor wie
- Ontwikkelaars, engineers en integrators die Grok via de API in hun toepassingen willen gebruiken.
- Vereisten
- Kunnen lezen van Python of JavaScript en JSON, plus basisvaardigheden voor de opdrachtregel. Een API-sleutel van de xAI-console om de voorbeelden uit te proberen.
- Duur
- 1 h — 16 lessen
- Modaliteiten
- 100% online en zelfgestuurd, 24/7 beschikbaar vanuit elke browser. Uw voortgang wordt opgeslagen, zodat u op elk moment kunt verdergaan waar u gebleven was. Geschatte tijd: 1 h.
- Toetsing
- Zelfevaluatie met de belangrijkste leerpunten aan het einde van elke les, en praktische oefeningen waarbij u de voorbeelden toepast op uw eigen use cases. Een eindquiz van 5 vragen met antwoorden, aan het einde van de laatste les, stelt u in staat te controleren wat u heeft geleerd.
- Toegankelijkheid
- Deze cursus is ontworpen om toegankelijk te zijn voor mensen met een handicap: tekstinhoud compatibel met schermlezers, toetsenbordnavigatie en conforme kleurcontrasten. Voor verzoeken om aanpassingen kunt u een e-mail sturen naar [email protected].
- Prijs
- Gratis
Inhoud van de cursus
- 01 Het WebSocket-eindpunt en de realtime verbinding
- 02 Authenticatie en ephemeral tokens
- 03 De sessie configureren met session.update
- 04 De gebeurtenissen session.created en session.updated
- 05 Audioformaten: PCM en G.711
- 06 VAD: automatische spraakdetectie
- 07 Audio verzenden met input_audio_buffer.append
- 08 De audiobuffer vastleggen en wissen
- 09 Client-naar-server events
- 10 Server-naar-client events
- 11 De responsaudio ontvangen en afspelen
- 12 MCP-gebeurtenissen in spraakgesprekken
- 13 Functieaanroepen via spraak
- 14 Ingebouwde tools: webzoekopdrachten, X en collecties
- 15 Telefonie: SIP, LiveKit en G.711
- 16 Hulpprogramma's voor audioconversie in Python