Afbeeldingen en foto's analyseren
Op deze pagina
ChatGPT Vision: Afbeeldingen begrijpen
ChatGPT is niet beperkt tot tekst: elk model accepteert afbeeldingen. Foto’s, screenshots, grafieken, gefotografeerde documenten, diagrammen; het beschrijft ze, leest ze en becommentarieert ze. De waarde is direct, omdat deze functie de stap van overtypen elimineert: u toont in plaats van te beschrijven. Het is beschikbaar op zowel het gratis abonnement als de betaalde plannen, onder voorbehoud van de quota per abonnement.
Een afbeelding naar ChatGPT sturen
Op het web en in de desktop-app leiden drie wegen naar hetzelfde resultaat: de knop + in het invoerveld, gevolgd door Foto’s en bestanden toevoegen; een afbeelding slepen en neerzetten in het invoerveld; of een gekopieerde afbeelding vanuit het klembord plakken (Ctrl+V of Cmd+V). Op mobiel voegt dezelfde knop + een foto toe, hetzij een zojuist gemaakte opname, hetzij een oudere; op de iPhone opent een lange druk op + direct uw recente foto’s. ChatGPT accepteert PNG-, JPEG- en niet-geanimeerde GIF-indelingen, tot maximaal 20 MB per afbeelding.
U hoeft niet steeds slechts één afbeelding tegelijk te sturen. Het opnemen van meerdere visuele elementen in één bericht stelt u in staat om een vergelijking aan te vragen. Bovendien kunt u nieuwe afbeeldingen toevoegen naarmate het gesprek vordert, om dieper in te gaan of van invalshoek te veranderen.
Wat vision mogelijk maakt in het dagelijks werk
De eerste en meest waardevolle toepassing betreft grafieken. Maak een opname van een curve uit een jaarverslag, een dashboard of een presentatie, en laat ChatGPT deze becommentariëren in plaats van dat u deze zelf ontcijfert.
[afbeelding van grafiek] “Analyseer deze grafiek. Wat zijn de belangrijkste trends? Zijn er afwijkingen? Vat de conclusies samen in 3 punten.”
Daarna volgt het lezen van documenten: ChatGPT leest tekst die in een afbeelding aanwezig is. “Typ de tekst uit dit document over en vat deze vervolgens samen in 3 zinnen.” Dezelfde aanpak werkt voor facturen, met gestructureerde extractie die u handmatige invoer bespaart: “Extraheer de informatie uit deze factuur: leverancier, datum, bedrag exclusief btw, btw, bedrag inclusief btw.” Het werkt ook voor vertalingen wanneer u een bord of menu in een vreemde taal fotografeert.
Identificatie vormt een derde categorie: een foutmelding die op het scherm wordt weergegeven waarvan u de betekenis en oplossing nodig hebt, een object waarvan u de naam zoekt, of een gerecht waarvoor u een vergelijkbaar recept wilt. Tot slot dient vision als kritische blik voor professionele visuals.
[screenshot van een website] “Analyseer deze homepage. Sterke en zwakke punten op het gebied van gebruikerservaring. Stel 3 concrete verbeteringen voor.”
Wat een goede analyse scheidt van een slechte
De kwaliteit van het resultaat hangt allereerst af van de beeldkwaliteit. OpenAI raadt aan om tekst die gelezen moet worden te vergroten zonder belangrijke details af te snijden, en om gedraaide of ondersteboven afbeeldingen te vermijden, evenals panorama’s of “fish-eye”-opnamen, die vaak verkeerd worden geïnterpreteerd. Om de aandacht op een specifiek gebied te vestigen, kunt u de afbeelding annoteren voordat u deze verstuurt, bijvoorbeeld met de bewerkingstool van uw telefoon.
De tweede variabele is de tekst die de afbeelding begeleidt. “Wat is dit?” nodigt uit tot een algemene beschrijving, die vaak nutteloos is. “Hier is onze verkoopgrafiek van het eerste kwartaal: analyseer de trend en identificeer problematische maanden” nodigt uit tot een actiegericht antwoord. Het principe geldt ook bij het combineren van meerdere visuals: “Hier is het logo van mijn concurrent [afbeelding]. Vergelijk dit met dat van ons [afbeelding]. Wat is de visuele positionering van elk?”
Bekende beperkingen
OpenAI publiceert zelf een lijst met beperkingen. Het model is niet ontworpen om gespecialiseerde medische beelden, zoals CT-scans, te interpreteren en mag niet dienen als medisch advies. Het leest tekst in niet-Latijnse alfabetten, zoals Japans of Koreaans, minder betrouwbaar. Het kan fouten maken bij grafieken waarbij alleen kleur of lijnstijl (doorgetrokken, gestippeld, stippellijn) de curves onderscheidt, bij taken voor precieze lokalisatie zoals het lezen van een schaakpositie, en het geeft slechts benaderende tellingen. Het leest niet de bestandsnaam of de metadata, en de afbeelding wordt verkleind voordat deze wordt geanalyseerd.
Eén waarschuwing verdient nadruk: voor cijfers die uit een afbeelding worden gelezen, zoals een gefotografeerde tabel of gescande pdf, worden exacte waarden niet betrouwbaar geëxtraheerd. Wanneer precisie belangrijk is, stuurt u beter de originele spreadsheet of het tekstbestand, en controleert u alles wat een beslissing stuurt handmatig dubbel. Video’s kunnen tot slot als bestanden worden bijgevoegd, zelfs op het gratis abonnement, maar hun analyse kan gedeeltelijk zijn.
Aan de slag
Drie pogingen. Fotografeer of maak een opname van een rapportpagina of een factuur, en vraag om extractie van de belangrijkste informatie in een tabel; verifieer elk bedrag. Maak vervolgens een opname van een grafiek uit een artikel of dashboard, en vraag om een trendanalyse. Sluit af met een foto van een willekeurig object, twee keer verstuurd: één keer zonder instructies, één keer met een specifieke vraag. Vergelijk de diepgang van de twee antwoorden.
Officiële bronnen: ChatGPT Image Inputs FAQ (OpenAI Help Center: abonnementen, indelingen, afbeeldingen toevoegen, beperkingen) · Data-analyse met ChatGPT (gescande of op afbeelding gebaseerde tabellen) · Overzicht van ChatGPT-mogelijkheden (afbeeldingsanalyse)
Belangrijkste punten
- Alle ChatGPT-modellen analyseren foto’s, screenshots, grafieken en gefotografeerde documenten, op alle abonnementen
- Stuur een afbeelding met de knop +, via slepen-en-neerzetten, plakken, of op mobiel vanuit uw foto’s
- Een specifieke vraag en een scherpe afbeelding winnen het van een vaag “wat is dit?”
- Officiële beperkingen: medische beelden, niet-Latijnse alfabetten, curves die alleen door stijl worden onderscheiden, tellingen
- Cijfers die uit een afbeelding worden gelezen, zijn niet betrouwbaar exact: geef de voorkeur aan het originele bestand