Suomenkielinen versio
Realtime API ja ääniagentit
Tämä kurssi käsittelee Realtime API:a, Whisperia, TTS:ää sekä kokonaisten ääniagenttien rakentamista puhelinverkkoja ja avustajia varten.
18 oppituntia noin 1 h 15 min Kehittäjä
Mitä opit
- Muodosta WebSocket-yhteys Realtime API:n kanssa ja hallitse elinkaaren tapahtumia
- Lähetä kaksisuuntaista ääntä reaaliajassa halliten keskeytyksiä ja vuoronhallintaa
- Transkriptoi ja käännä äänitiedostoja Whisperillä optimoiden laatua kielen perusteella
- Tuota puhetta TTS-API:lla halliten ääntä, prosodiaa ja nopeutta
- Rakenna puhelinverkkoon integroitu ääniagentti ja hallitse sen viive tuotantoympäristössä
Kurssin tiedot
- Kenelle
- Kehittäjät, insinöörit ja integraattorit, jotka haluavat hyödyntää ChatGPT:tä API:n kautta sovelluksissaan.
- Esitiedot
- Kyky lukea Pythonia ja JSONia, komentorivin perusteet. OpenAI-alustan API-avain esimerkkien kokeilemiseen.
- Kesto
- 1 h 15 min — 18 oppituntia
- Toteutustavat
- 100 % verkkopohjainen itseohjautuva kurssi, saatavilla 24/7 selaimesta. Edistyminen tallentuu, voit jatkaa milloin tahansa. Arvioitu kesto: 45 min.
- Arviointi
- Kurssiin integroidut validointivisat. Jokainen oppitunti päättyy keskeisiin oppeihin, jotka tukevat itsearviointia.
- Esteettömyys
- Itseohjautuva kurssi, joka on esteetön vammaisille: tekstisisältö yhteensopiva näytönlukijoiden kanssa, näppäimistönavigointi ja vaatimusten mukaiset kontrastit. Ota yhteyttä osoitteeseen [email protected] tarvittaessa mukautuksia varten.
- Hinta
- Ilmainen
Kurssin sisältö
- 01 Realtime API:n WebSocket-arkkitehtuuri
- 02 Istunnot, tapahtumat ja elinkaari
- 03 Äänen kaksisuuntainen suoratoisto
- 04 Funktioihin perustuva reaaliaikainen kutsuminen
- 05 Keskeytykset ja vuoronhallinta
- 06 Transkriptoi äänitiedosto: gpt-transcribe ja Whisper
- 07 Tuetut muodot ja kielet
- 08 Automaattinen kääntäminen
- 09 Optimoi litteroinnin laatua
- 10 TTS-API: Puheen tuottaminen
- 11 Käytettävissä olevat äänet ja mukauttaminen
- 12 Äänen suoratoisto reaaliajassa
- 13 Prosodian ja puhenopeuden hallinta
- 14 Rakenna täydellinen puheagentti
- 15 Puhelinintegraatio (Twilio jne.)
- 16 Avustaja multimodaalisella äänellä
- 17 Viive ja reaaliaikainen optimointi
- 18 Tuotanto: skaalaus ja valvonta