Kartokite ir tobulinkite savo užuominas
Šiame puslapyje
Užuočių kūrimas yra iteracinis procesas
Užuoma retai būna tobula nuo pirmojo bandymo. Patyrę specialistai žino, kad tikrasis darbas prasideda gavus pirmąjį atsakymą: tu analizuoji rezultatą, nustatai neatitikimus tarp gauto atsakymo ir savo lūkesčių bei atitinkamai koreguoji užuomą.
Šis metodinis kartojimas yra užuočių inžinerijos šerdis. Jis paverčia vidutinišką rezultatą puikiu.
Tobulinimo ciklas
Iteracijos ciklą sudaro keturi žingsniai:
- Suformuluok: Parašyk pradinę užuomą naudodamas tris pagrindinius elementus (aiškumą, kontekstą, struktūrą)
- Išbandyk: Nusiųsk užuomą ir stebėk atsakymą
- Diagnozuok: Nustatyk, kas negerai (formatas, turinys, tonas, ilgis, tikslumas)
- Koreguok: Pakeisk užuomą, kad išspręstum nustatytą problemą
Kartok šį ciklą, kol gausi patenkinamą rezultatą. Kiekvienos iteracijos metu keisk tik vieną aspektą, kad suprastum kiekvieno pakeitimo poveikį.
Dažnų problemų diagnostika
Atsakymas per ilgas
Modelis sugeneruoja pastraipas, nors tu tikėjaisi trumpo sąrašo.
Prieš:
Kokie yra nuotolinio darbo privalumai?
Po:
Išvardink 5 pagrindinius nuotolinio darbo privalumus. Ne daugiau kaip 1 sakinys vienam privalumui.
Atsakymas nukrypsta nuo temos
Modelis atsako ne į tą klausimą. Pridėk konteksto ir nurodyk apimtį.
Prieš:
Paaiškink ribas.
Po:
Paaiškink matematines ribas pažengusiam vidurinės mokyklos mokiniui. Susitelk ties polinominių funkcijų ribomis, o ne sekų ribomis.
Formatas neatitinka lūkesčių
Modelis grąžina laisvą tekstą, nors tau reikėjo JSON. Aiškiai nurodyk formatą ir pateik pavyzdį.
Prieš:
Išanalizuok šį tekstą ir išskirk entitetus.
Po:
Išanalizuok šį tekstą ir grąžink entitetus JSON formatu:
{"entities": [{"name": "...", "type": "person|location|organization"}]}
Grąžink tik JSON, jokio papildomo teksto.
Netinkamas tonas
Modelis per daug formalus arba per daug neoficialus. Nurodyk registrą sistemos žinutėje arba instrukcijoje.
Prieš:
Parašyk atsakymą šiam nepatenkintam klientui.
Po:
Parašyk empatišką ir profesionalų atsakymą šiam nepatenkintam klientui. Šiltas tonas, bet ne neoficialus. Pradėk pripažindamas problemą, tada pasiūlyk konkretų sprendimą.
Tobulinimo metodai
Naudok neigiamus apribojimus
Kai modelis daro tai, ko nenori, aiškiai tai uždrausk:
Paaiškink mašininį mokymąsi pradedančiajam.
Nenaudok techninio žargono.
Neminėk matematinių formulių.
Nenurodyk kitų DI modelių.
Pateik priešpavyzdį
Parodyk modeliui, ko nenori:
Parašyk šio dokumento santrauką.
Gera santrauka: „Ataskaita rodo 15 % pardavimų augimą III ketvirtį, kurį lėmė B2B segmentas.“
Bloga santrauka: „Šioje ataskaitoje pateikiami įmonės finansiniai rezultatai einamųjų metų trečiąjį ketvirtį, įskaitant įvairius rodiklius...“
Laikykitės geros santraukos stiliaus.
Performuluok palaipsniui
Kai vieno perrašymo nepakanka, veik žingsnis po žingsnio:
- Išbandyk bazinę užuomą
- Pridėk norimą išvesties formatą
- Pridėk turinio apribojimus
- Pridėk tono apribojimus
- Prireikus pridėk pavyzdžių
Naudok „seed“ parametrą palyginimui
Naudodamas tą patį seed, gali palyginti dviejų skirtingų formulių poveikį, pašalindamas atsitiktinumo sukeltą kintamumą:
{"seed": 42, "temperature": 0.5, "messages": [{"role": "user", "content": "Version A of the prompt"}]}
{"seed": 42, "temperature": 0.5, "messages": [{"role": "user", "content": "Version B of the prompt"}]}
Dokumentuok savo iteracijas
Vesk savo užuomų ir jų rezultatų apskaitą. Kiekvienai versijai užsirašyk:
- Tikslų užuomos tekstą
- Naudotus parametrus (modelis, temperatūra, seed)
- Kas pavyko
- Ką reikia tobulinti
Ši dokumentacija sutaupys daug laiko, kai reikės grįžti prie užuomos arba pritaikyti ją naujam naudojimui.
Praktika
Paimk užuomą, kurią jau naudojai ir kuri nedavė tobulo rezultato. Taikyk tobulinimo ciklą trimis iteracijomis:
- Nustatyk pagrindinę dabartinio atsakymo problemą
- Pakeisk vieną užuomos aspektą, kad išspręstum šią problemą
- Išbandyk ir palygink su ankstesniu rezultatu
Kartok, kol gausi patenkinamą rezultatą.
Svarbiausi punktai
- Užuočių kūrimas yra iteracinis: pirmasis bandymas retai būna paskutinis
- Kiekvienos iteracijos metu keisk tik vieną aspektą, kad suprastum kiekvieno pakeitimo poveikį
- Dažnos problemos (ilgis, tema, formatas, tonas) turi specifinius sprendimus
- Neigiami apribojimai ir priešpavyzdžiai yra galingi tobulinimo įrankiai
- Naudok
seedparametrą, kad objektyviai palygintum dvi formules - Dokumentuok savo iteracijas, kad galėtum pasinaudoti sukaupta patirtimi