Preskoči na glavni sadržaj
Hrvatski— Odaberite jezik
Izbornik

Ispunjavanje obrazaca i klikovi

Lekcija 6 od 14 Ažurirano 3. studenoga 2026. Programer
Na ovoj stranici
  1. Najčešća interakcija
  2. Klikni prije tipkanja
  3. Očisti polje prije ispunjavanja
  4. Izbornici, potvrdni okviri i radio gumbi
  5. Obrasci na više zaslona
  6. Reagiranje na pogreške pri validaciji
  7. Prijenos datoteka, poseban slučaj
  8. Ključne točke

Lekcija ažurirana 3. studenog 2026. na temelju smjernica za potvrdu tvrtke OpenAI i dokumentacije Playwrighta: kašnjenje pri tipkanju više se ne prikazuje kao način zaobilaženja detekcije botova; odabir koristi ControlOrMeta+a, što funkcionira i na macOSu; page.screenshot() ne prikazuje izvorni dijaloški okvir za otvaranje datoteke, suprotno tvrdnjama prethodne verzije; smjernice se prosljeđuju putem parametra instructions. Izvori: Potvrda i pristanak · Playwright, Tipkovnica.

Najčešća interakcija

Ako savladaš samo jednu radnju, neka to bude ova. Slanje upita za kontakt, ispunjavanje ponude, unos zapisa o klijentu u CRM bez API-ja: obrasci su obavezna kontrolna točka za većinu automatizacija. To je također mjesto gdje najčešće padaju loše konfigurirani agenti, iz vrlo konkretnih razloga koje ova lekcija obrađuje jedan po jedan.

Klikni prije tipkanja

Radnja type ne piše u polje; ona piše u trenutno fokusirano polje. Na tu nijansu zaboraviš samo jednom: bez prethodnog klika, tvoj tekst odlazi u prazninu ili, što je podmuklije, dodaje se na prethodno polje. Slijed je stoga nepromjenjiv: klik za fokusiranje, zatim tipkanje.

# U vašem izvršitelju radnji
def execute_type(page, text: str):
    """Upisuje tekst u fokusirano polje."""
    page.keyboard.type(text, delay=50)

Parametar delay=50 zaslužuje pozornost. keyboard.type već šalje događaje tipkovnice znak po znak, ali bez kašnjenja ih lanča što je brže moguće; s pedeset milisekundi između pritiska tipki, brzina pada na dvadeset znakova u sekundi. Polja koja reagiraju na svaki pritisak tipke—automatsko dovršavanje, maske za unos telefonskih brojeva—tako imaju vremena sustići ritam. Ova postavka nije pitanje glumljenja ljudskog ponašanja: stranica koja želi blokirat botove izražava volju koju treba poštovati (Lekcija 14).

Očisti polje prije ispunjavanja

Unaprijed ispunjen obrazac—nastavak sesije, zadana vrijednost, automatsko dovršavanje preglednika—pretvara tvoj unos u apsurdnu konkatenaciju: tipkanje „Dupont“ nakon „Martin“ daje „MartinDupont“, a obrazac to prihvaća bez greške. Odaberi sve prije tipkanja.

def clear_and_type(page, text: str):
    """Odabire sav sadržaj u polju, zatim tipka."""
    page.keyboard.press("ControlOrMeta+a")  # Ctrl+A, ili Cmd+A na macOSu
    page.keyboard.type(text, delay=50)

Model donosi odluke o radnjama na temelju upita: podsjeti ga na pravilo, inače će tipkati izravno u zauzeto polje.

task = """
Ispuni obrazac za kontakt:
- Polje "Ime": Dupont
- Polje "E-pošta": [email protected]
- Polje "Poruka": Upit za ponudu za 50 licenci

VAŽNO: Prije tipkanja u svako polje, 
odaberi sav postojeći tekst (Ctrl+A) kako bi ga zamijenio.
Nakon ispunjavanja svih polja, klikni gumb Pošalji.
"""

Izbornici, potvrdni okviri i radio gumbi

Padajući izbornik <select> zahtijeva tri koraka: klik za otvaranje, čekanje da se opcije pojave i drugi klik na željenu opciju. Dobra vijest je da se prilagođeni JavaScript izbornici—oni koji nisu pravi elementi <select> i stvaraju toliko problema klasičnim skriptama—obrađuju na potpuno isti način, jer agent vidi samo vizualni prikaz: klikne, otkrije opcije na sljedećoj snimci zaslona i klikne pravu.

Potvrdni okviri i radio gumbi čine se jednostavnijima, s jednim klikom dovoljnim za njihovu aktivaciju. Zamka je drugdje: potvrdni okvir koji je već označen klikom se poništava, i tvoj agent je upravo opozvao pristanak koji je trebao dati. Stoga mora pročitati stanje prije djelovanja, a ti ga moraš eksplicitno zamoliti da to učini. Također imaj na umu da prihvaćanje uvjeta ili stvaranje računa obvezuje osobu za koju agent radi: povjeri mu ove radnje samo ako ih je ta osoba eksplicitno zatražila.

task = """
U obrascu za registraciju:
1. Označi okvir "Prihvaćam uvjete" ako nije označen
2. Odaberi "Tvrtka" u vrsti računa
3. Klikni "Stvori račun"

Provjeri stanje svakog elementa PRIJE klika.
"""

Obrasci na više zaslona

Tunel za registraciju od tri stranice nije tri puta teži od jednostavnog obrasca, pod uvjetom da strukturiraš upute stranica po stranicu i označiš prijelaze. Agent tada zna kada je dio završen i koji gumb vodi na sljedeći. Primjer obrađuje fiktivne osobne podatke; s stvarnim podacima, zapamti da OpenAI smatra unos osjetljivih informacija u obrazac prijenosom koji zahtijeva odobrenje dotične osobe.

task = """
Ispuni obrazac za registraciju u 3 koraka:

KORAK 1 - Osobni podaci:
- Ime: Jean
- Prezime: Dupont
- Datum rođenja: 15.03.1985.
→ Klikni "Dalje"

KORAK 2 - Kontakt podaci:
- E-pošta: [email protected]
- Telefon: 06 12 34 56 78
- Adresa: Ulica Mira 12, 10000 Zagreb
→ Klikni "Dalje"

KORAK 3 - Potvrda:
- Provjeri jesu li svi podaci točni
- Označi "Prihvaćam Uvjete korištenja"
→ Klikni "Potvrdi"
"""

Reagiranje na pogreške pri validaciji

Odbijen format telefona, nedostaje obavezno polje, lozinka procijenjena prekratkom: obrazac vraća poruku i čeka ispravak. Točno je tu Computer Use nadmašuje skriptu, jer agent zna pročitati prikazanu pogrešku umjesto da posrne o nju. Ipak, moraš ga zamoliti da traži pogreške i ograniči njegove pokušaje kako ga definitivno odbijeno polje ne bi natjeralo u beskonačnu petlju. Ova pravila idu u parametar instructions, koji se vraća sa svakim zahtjevom (Lekcija 5).

INSTRUCTIONS = """
Nakon slanja obrasca:
1. Napravi snimku zaslona da vidiš rezultat
2. Ako se pojave poruke o pogreškama (crvene, u okviru), 
   pročitaj ih i ispravi odgovarajuća polja
3. Ponovno pošalji obrazac
4. Ponavljaj dok obrazac nije prihvaćen 
   ili dok ne pokušaš 3 puta
"""

Prijenos datoteka, poseban slučaj

Postoji jedno ograničenje koje nijedan upit neće prijeći: dijaloški okvir za otvaranje datoteke pripada operacijskom sustavu, a ne stranici. Agent ga čak ni ne vidi—page.screenshot() bilježi samo sadržaj stranice—a koordinate koje proizvodi odnose se na stranicu, a ne na izvorni prozor. Predaj operaciju Playwrightu, koji u potpunosti zaobilazi taj dijaloški okvir.

def handle_file_upload(page, file_path: str, selector: str):
    """Prenosi datoteku putem Playwrighta (ne putem Computer Use)."""
    page.locator(selector).set_input_files(file_path)

Možeš također dopustiti agentu da klikne „Pregledaj“ kao korisnik i presresti birač datoteka u trenutku kada se otvori: tijek rada ostaje prirodan od početka do kraja, uz sistemski dio koji se obrađuje u pozadini. U oba slučaja, tvoj kod bira datoteku, nikada model; a slanje datoteka spada među radnje koje ti OpenAI dopušta unaprijed odobriti u početnom zahtjevu ili potvrditi naknadno.

# Agent klikne "Pregledaj", zatim ti presrećeš
page.on("filechooser", lambda fc: fc.set_files("/path/to/file.pdf"))

Ključne točke

  • Uvijek klikni na polje prije tipkanja u njega
  • Koristi Ctrl+A (ControlOrMeta+a u Playwrightu) za brisanje polja prije tipkanja
  • Padajući izbornici zahtijevaju klik za otvaranje, zatim klik za odabir
  • Planiraj rukovanje pogreškama pri validaciji u upitu
  • Prijenos datoteka mora obaviti Playwright, a ne Computer Use