Lietuviška laida
Voice Agent API: pokalbiai realiuoju laiku
Kurkite balso agentus naudodami WebSocket: VAD, funkcijų kvietimai balsu, įvykiai ir integracija su SIP telefonija.
16 paskaitų maždaug 1 val. Kūrėjas
Ko išmoksite
- Atidaryti realaus laiko WebSocket seansą, autentifikuotą laikinaisiais prieigos raktais ir sukonfigūruotą per session.update
- Apdoroti PCM ir G.711 garso srautus valdant automatinį kalbos aptikimą
- Valdyti pokalbio client-server ir server-client įvykių ciklą
- Aktyvinti balso funkcijų kvietimą ir integruotus įrankius tiesioginio pokalbio metu
- Prijungti balo agentą prie telefonijos per SIP ir LiveKit bei konvertuoti garsą Python kalba
Kurso kortelė
- Kam skirta
- Kūrėjai, inžinieriai ir integratoriai, norintys naudoti Grok per API savo programose.
- Būtinos žinios
- Gebėjimas skaityti Python arba JavaScript ir JSON, pagrindiniai komandinės eilutės įgūdžiai. xAI pultelio API raktas pavyzdžiams išbandyti.
- Trukmė
- 1 val. — 16 paskaitų
- Formatas
- 100 % nuotolinis savarankiško mokymosi kursas, prieinamas 24/7 per naršyklę. Eiga išsaugoma, galima tęsti bet kada. Numatoma trukmė: 1 val..
- Vertinimas
- Savisvertinimas pagal pagrindinius punktus kiekvienos pamokos pabaigoje ir praktinis pavyzdžių taikymas savo atvejuose. Baigiamasis 5 klausimų testas su atsakymais po paskutinės pamokos leidžia pasitikrinti įgytas žinias.
- Prieinamumas
- Šis kursas sukurtas taip, kad būtų prieinamas žmonėms su negalia: teksto turinys suderinamas su ekrano skaitytuvais, navigacija klaviatūra ir atitinkamas spalvų kontrastas. Dėl bet kokio pritaikymo poreikio rašykite el. paštu [email protected].
- Kaina
- Nemokama
Kurso turinys
- 01 „WebSocket“ galinis taškas ir ryšys realiuoju laiku
- 02 Autentifikavimas ir laikinieji žetonai
- 03 Konfigūruok seansą naudodamas session.update
- 04 Įvykiai session.created ir session.updated
- 05 Garso formatai: PCM ir G.711
- 06 VAD: automatinis kalbos aptikimas
- 07 Siųsti garso įrašą naudojant input_audio_buffer.append
- 08 Fiksuoti ir išvalyti garso buferį
- 09 Įvykiai nuo kliento iki serverio
- 10 Įvykiai iš serverio klientui
- 11 Gauti ir atkurti atsakymo garso įrašą
- 12 MCP įvykiai balso pokalbiuose
- 13 Funkcijų kvietimas balsu
- 14 Integruoti įrankiai: žiniatinklio paieška, X ir kolekcijos
- 15 Telefonija: SIP, LiveKit ir G.711
- 16 Garso konvertavimo įrankiai „Python“ kalboje