Pereiti prie pagrindinio turinio
Lietuvių— Pasirinkite kalbą
Meniu

Lietuviška laida

Voice Agent API: pokalbiai realiuoju laiku

Kurkite balso agentus naudodami WebSocket: VAD, funkcijų kvietimai balsu, įvykiai ir integracija su SIP telefonija.

16 paskaitų maždaug 1 val. Kūrėjas

Ko išmoksite

  • Atidaryti realaus laiko WebSocket seansą, autentifikuotą laikinaisiais prieigos raktais ir sukonfigūruotą per session.update
  • Apdoroti PCM ir G.711 garso srautus valdant automatinį kalbos aptikimą
  • Valdyti pokalbio client-server ir server-client įvykių ciklą
  • Aktyvinti balso funkcijų kvietimą ir integruotus įrankius tiesioginio pokalbio metu
  • Prijungti balo agentą prie telefonijos per SIP ir LiveKit bei konvertuoti garsą Python kalba

Kurso kortelė

Kam skirta
Kūrėjai, inžinieriai ir integratoriai, norintys naudoti Grok per API savo programose.
Būtinos žinios
Gebėjimas skaityti Python arba JavaScript ir JSON, pagrindiniai komandinės eilutės įgūdžiai. xAI pultelio API raktas pavyzdžiams išbandyti.
Trukmė
1 val. — 16 paskaitų
Formatas
100 % nuotolinis savarankiško mokymosi kursas, prieinamas 24/7 per naršyklę. Eiga išsaugoma, galima tęsti bet kada. Numatoma trukmė: 1 val..
Vertinimas
Savisvertinimas pagal pagrindinius punktus kiekvienos pamokos pabaigoje ir praktinis pavyzdžių taikymas savo atvejuose. Baigiamasis 5 klausimų testas su atsakymais po paskutinės pamokos leidžia pasitikrinti įgytas žinias.
Prieinamumas
Šis kursas sukurtas taip, kad būtų prieinamas žmonėms su negalia: teksto turinys suderinamas su ekrano skaitytuvais, navigacija klaviatūra ir atitinkamas spalvų kontrastas. Dėl bet kokio pritaikymo poreikio rašykite el. paštu [email protected].
Kaina
Nemokama

Kurso turinys

  1. 01 „WebSocket“ galinis taškas ir ryšys realiuoju laiku
  2. 02 Autentifikavimas ir laikinieji žetonai
  3. 03 Konfigūruok seansą naudodamas session.update
  4. 04 Įvykiai session.created ir session.updated
  5. 05 Garso formatai: PCM ir G.711
  6. 06 VAD: automatinis kalbos aptikimas
  7. 07 Siųsti garso įrašą naudojant input_audio_buffer.append
  8. 08 Fiksuoti ir išvalyti garso buferį
  9. 09 Įvykiai nuo kliento iki serverio
  10. 10 Įvykiai iš serverio klientui
  11. 11 Gauti ir atkurti atsakymo garso įrašą
  12. 12 MCP įvykiai balso pokalbiuose
  13. 13 Funkcijų kvietimas balsu
  14. 14 Integruoti įrankiai: žiniatinklio paieška, X ir kolekcijos
  15. 15 Telefonija: SIP, LiveKit ir G.711
  16. 16 Garso konvertavimo įrankiai „Python“ kalboje